Scrapy是一个为了爬取网站数据，提取结构性数据而编写的应用框架。 其可以应用在数据挖掘，信息处理或存储历史数据等一系列的程序中。其最初是为了页面抓取 (更确切来说, 网络抓取 )所设计的， 也可以应用在获取API所返回的数据(例如 Amazon Associates Web Services ) ...
分类：
编程语言 时间：
2017-05-17 12:00:18
阅读次数：
232
异常信息 原因 数据库表设计时候id没有加自动增长 mybatis添加后执行了查询id 而报错 解决方法 把mysql数据库的id设为自增列 ...
分类：
数据库 时间：
2017-05-17 12:00:12
阅读次数：
243
Ubuntu14.04TLS安装openmpi参考：https://likymice.wordpress.com/2015/03/13/install-open-mpi-in-ubuntu-14-04-13-10/1、安装依赖项：sudo apt-get install libibnetdisc-d ...
分类：
系统相关 时间：
2017-05-17 12:00:05
阅读次数：
378
监控主动轮询进程是否会崩溃跪掉，采取措施是通过心跳包形式进行抓取，定时生成文件，jnotify监听发到kafka上，之后通过消费者进行解析，若发现不符规则情况，发邮件短信报警。 Java代码 package heartbeat.monitor; import java.io.FileInputStr ...
分类：
其他好文 时间：
2017-05-17 11:59:55
阅读次数：
290
iOS 开发如何入门 新人如何入门 上一篇文章的回复中，很多读者让我推荐入门图书。其实我觉得每个人可能有自己喜欢的学习方式，我习惯的不一定适合你。不过我可以分享一下我当时是如何学习 iOS 开发的。 我 当时首先快速看了一本小册子，把 Objective-C 的语法了解了一下。那本小册子叫 《Fro ...
分类：
移动开发 时间：
2017-05-17 11:59:48
阅读次数：
202
题意 求某城到某城的最小花费 一个城中有四个机场，一个城中的机场相互可达，用公路到达，但是不同城的公路的单位路程的费不同，两个不同城的机场（我不知道相同城可不可以）可以通过机场到达，且飞机单位路程价格一定，问从 a 城到b城的最小花费，可从a的任一机场出发，从 b 的任一机场结束 。 题解 这道题思 ...
分类：
其他好文 时间：
2017-05-17 11:59:40
阅读次数：
230
1.运算器、控制器、存储器、输入输出（IO） 地址总线：内存寻址 数据总线：传输数据 控制总线：控制指令 寄存器：cpu暂时存储器 2.系统设定 默认输出设备：标准输出，STDOUT，1（描述符）（显示器） 默认输入设备：标准输入，STDIN ，0 （通常是键盘） 标准错误输出：STDERR ,2 ...
分类：
系统相关 时间：
2017-05-17 11:59:31
阅读次数：
351
////////////////////////////////////////////////////////////////// 记性不好的可以收藏下： 1,下拉框: 稍微解释一下: 1.select[@name='country'] option[@selected] 表示具有name 属性， ...
分类：
Web程序 时间：
2017-05-17 11:59:24
阅读次数：
332
通过monitor这个命令可以查看数据库在当前做了什么操作，对于管理redis数据库有这很大的帮助 如图示，在redis客户端进行操作显示info，另一个窗口打开monitor就会显示出这个命令的操作，类似于linux中的history命令 ...
分类：
其他好文 时间：
2017-05-17 11:59:15
阅读次数：
126
库存预警功能模块：需求来源：业务部门，长期缺货造成用户体验较差。 解决问题：重点解决己成功下单的客户被临时告知缺货的问题,保证有货。 优化：如图所示，显示了很多预警库存为0的SKU。浪费预警资源。很简单的优化，加个过滤条件，必须是审核通过的预警库存，并且实际库存小于等于预警库存的，才提示给采购部门。 ...
分类：
其他好文 时间：
2017-05-17 11:59:06
阅读次数：
151
#include<map> #include<set> #include<cmath> #include<queue> #include<stack> #include<vector> #include<cstdio> #include<iomanip> #include<cstdlib> #inc ...
分类：
其他好文 时间：
2017-05-17 11:58:58
阅读次数：
186
01-01 vue使用雏形 01-02 v-model一般用于表单元素数据双向绑定 01-03 v-for循环数据 01-04 v-click等等基础事件 01-05 点击按钮div消失：v-show(false/true) 01-06 案例添加删除用户 ...
分类：
其他好文 时间：
2017-05-17 11:58:44
阅读次数：
266
贪婪，是人性的弱点？没错，因为生命是有限的，人总希望在有限的生命历程中获得很多其它；享乐绝不能等待，这是掌控生命的基因的渴望。懒惰。是人性的弱点？不是。懒惰仅仅是人的生理性本能，珍惜能量也相同是基因进化中的最优选择，对于人的大脑来说更是如此，假设大脑将所有感知的信息都无遗漏的处理，脑袋预计得冒烟，并 ...
分类：
其他好文 时间：
2017-05-17 11:58:35
阅读次数：
212
1. 数据库的分类：关系型数据库，非关系型数据库（Nosql） 2.非关系型数据库： 键值型数据库：redis 等。 列式存储数据库： hbase 等。 文档型数据库 ： mongoDB 等。 图形数据库 ： infoGirid 等。 3.为什么学习noSql？ 发红包，并发量为15W,10亿，0. ...
分类：
其他好文 时间：
2017-05-17 11:58:28
阅读次数：
128
去雾算法 前言：经过不断的改进研究。该算法最终稳定，高效的问世了！ 经过研究使该算法适应大雾环境，对该算法的内存优化。可以实时的高效的执行。 一、实时视频： 二、视频文件： 三、图片文件 追梦QQ:245656042 去雾算法 前言：经过不断的改进研究。该算法最终稳定，高效的问世了！ 经过研究使该算 ...
分类：
编程语言 时间：
2017-05-17 11:58:21
阅读次数：
172
SQL里面不带参数的存储过程与视图的区别1、存储过程是程序化的sql可以实现一般sql不能实现的功能。 如：先检索一个表得到一些数据，经过一定的编辑后更新到另外一个表中、这就可以用不带参数的存储过程实现。 2、视图是虚拟表，不存储数据，存储的是sql，检索他的时候实际上是执行定义它的sql语句。说明 ...
分类：
其他好文 时间：
2017-05-17 11:58:14
阅读次数：
152
以前使用php的时候还不知道有过滤器filter这玩意，那时候判断邮箱、url和ip地址格式是否符合都是用正则表达式。后来随着使用的逐渐深入，才知道在php中也可以使用内置的函数库过滤器filter来完成这些功能。对于filter_var这个函数，如果验证通过则会返回验证对象，否则返回false。判 ...
分类：
Web程序 时间：
2017-05-17 11:58:06
阅读次数：
261
