Scarp框架 需求 获取网页的url 下载网页内容(Downloader下载器) 定位元素位置, 获取特定的信息(Spiders 蜘蛛) 存储信息(ItemPipeline, 一条一条从管里走) 队列存储(scheduler 调度器) 首先, spiders 给我们一个初始的URL, spider ...
分类：
其他好文 时间：
2018-12-09 14:07:20
阅读次数：
264
首先，先了解一下数据库的基本概念要点： 数据库是数据存储的集合，表示数据结构化的信息 列存储表中的信息 行存储表的明细 主键是表中的唯一标识 主键不具备业务意义 在实际操作中，对表的主键不做强制性要求，但是建议设立 主键必须唯一 每行必须有一个主键，不可为空 主键的值不可被修改 主键值被删除后不可重 ...
分类：
数据库 时间：
2018-11-17 14:27:00
阅读次数：
246
最近想要实现CNN的FPGA加速处理，首先明确在CNN计算的过程中，因为卷积运算是最耗时间的，因此只要将卷积运算在FPGA上并行实现，即可完成部分运算的加速 那么对于卷积的FPGA实现首先要考虑的是卷积子模板具体如何实现，我们在matlab或者c实现比如3X3的子模板的时候，只要用一个数组即可将模板 ...
分类：
其他好文 时间：
2018-11-16 23:32:01
阅读次数：
278
对于日益积累的监控数据，显然需要有规划地进行存储和分析，做到“故障没来时有预防，故障来临时有提示，故障到来时有解决方案”。 一、时间序列存储 对于大多数监控数据，都有一个天然的类似数据库主键的属性，那就是时间。所以，通常情况下，各类监控系统的后台数据库都可以认为是时间序列的数据存储，并由此诞生了一批 ...
分类：
Web程序 时间：
2018-11-11 15:05:25
阅读次数：
163
监控手段：naviseccli工具+zabbix监控naviseccli取值zabbix预警注：这个监控只是提供一个思路，我尝试通过snmpOID去监控，拿了厂商的OID以后发现好多不能用，有人说是用snmptrap的方式，最终没有去尝试，如果有更好的监控方法请大家留言告诉我向大家学习：（1）安装naviseccli工具有linux版本和windows版本（2）因为我们需要通过这个工具获取参数，然
分类：
其他好文 时间：
2018-10-31 17:50:16
阅读次数：
961
一.故障描述客户设备品牌为昆腾系列存储，共10个磁盘柜，每个磁盘柜满配24块硬盘。其9个存储柜用作数据存储使用，另外1个存储柜用作元数据存储使用。元数据存储中共24块146G硬盘，其中设置了9组RAID1阵列，1组4盘位RAID10阵列，4个全局热备硬盘。数据存储中，每6块硬盘设置一组RAID5阵列，共36组RAID，这36组RAID阵列中，又分为2个存储系统。其中1个存储系统中，一组RAID由于
分类：
其他好文 时间：
2018-10-31 15:45:08
阅读次数：
133
Redis的散列可以存储多个键值对之间的映射。和字符串一样，散列存储的值既可以是字符串又可以是数字值，并且用户同样可以对散列存储的数字值执行自增或自减。 ...
分类：
其他好文 时间：
2018-10-31 01:06:15
阅读次数：
111
结果图 最后拼接完成，并执行的SQL语句： ...
分类：
数据库 时间：
2018-10-30 14:42:20
阅读次数：
190
大数据hadoop入门之hadoop家族详解 大数据这个词也许几年前你听着还会觉得陌生，但我相信你现在听到hadoop这个词的时候你应该都会觉得“熟悉”！越来越发现身边从事hadoop开发或者是正在学习hadoop的人变多了。作为一个hadoop入门级的新手，你会觉得哪些地方很难呢？运行环境的搭建恐 ...
分类：
其他好文 时间：
2018-10-23 12:08:40
阅读次数：
242
>数据库分类 数据库可分为关系型数据库（Sql）和非关系型数据库（NoSql） Sql: mysql、sqlserver、oracle NoSql: 1）键值对数据库：redis、memcache 2）列存储数据库：hbase 3）文档型数据库：mongdb 4）图形数据库：graph ？ 区别 1 ...
分类：
数据库 时间：
2018-10-10 23:40:18
阅读次数：
177
