Scrapy 提供了 log 功能,可以通过 logging 模块使?。可以修改配置?件 settings.py,任意位置添加下?两?,效果会清爽很多。LOG_FILE = "TencentSpider.log"LOG_LEVEL = "INFO"Log levelsScrapy 提供 5 层 lo ...
分类:
其他好文 时间:
2018-03-07 13:22:16
阅读次数:
128
这里我使用的是GitLab 1.先在本地git清除文件夹 git rm xxx(xxx表文件名) -r ( -r 当给出主目录名时允许递归删除) 2.本地提交 git commit -m''(-m 备注) 3.最后push到远程仓库 git push -u origin master ...
分类:
其他好文 时间:
2018-03-07 13:22:10
阅读次数:
106
push() 方法可向数组的末尾添加一个或多个元素,并返回新的长度。 each() 方法规定为每个匹配元素规定运行的函数。 parseInt() 函数可解析一个字符串,并返回一个整数。 ...
分类:
编程语言 时间:
2018-03-07 13:22:01
阅读次数:
180
严格模式主要有以下限制。 变量必须声明后再使用 函数的参数不能有同名属性,否则报错 不能使用with语句 不能对只读属性赋值,否则报错 不能使用前缀 0 表示八进制数,否则报错 不能删除不可删除的属性,否则报错 不能删除变量delete prop,会报错,只能删除属性delete global[pr ...
分类:
其他好文 时间:
2018-03-07 13:21:52
阅读次数:
156
初学maven,简单总结一下学习心得,若有不对的地方,欢迎各位大神给我指正~ 总结分为6个部分 maven概述 maven安装 maven项目结构和创建方法 maven配置文件settings.xml 项目对象文件pom.xml解析 eclipse插件安装 一、maven概述 要用java实现一个后 ...
分类:
编程语言 时间:
2018-03-07 13:21:44
阅读次数:
170
一、安装SMNP 可以理解为net-snmp是服务端,net-snmp-utils是客户端工具集;如果机器上只需要搭建服务那可以只安装net-snmp。 由于依赖关系,其实最终会安装net-snmp net-snmp-utils net-snmp-agent net-snmp-libs perl-D ...
分类:
其他好文 时间:
2018-03-07 13:21:38
阅读次数:
308
$(window).scroll(function() { var swipeHeight = 200;//完全变色高度 var scrollTop = $(document).scrollTop();//页面滚动高度 var x = scrollTop/swipeHeight; $(".head.... ...
分类:
其他好文 时间:
2018-03-07 13:21:31
阅读次数:
131
函数内部有两个方法 [[call]] 和 [[construct]] (箭头函数没有这个方法),当使用new 操作符时, 函数内部调用 [[construct]], 创建一个新实例,this指向这个实例; 不使用new 操作符时, 函数内部调用 [[call]]。 判断一个函数是否使用new操作符, ...
分类:
其他好文 时间:
2018-03-07 13:21:25
阅读次数:
398
使?FormRequest.from_response()?法模拟?户登录 通常?站通过 实现对某些表单字段(如数据或是登录界?中的认证令牌等)的预填充。使?Scrapy 抓取??时,如果想要预填充或重写像?户名、?户密码这 些表单字段, 可以使? FormRequest.from_response ...
分类:
其他好文 时间:
2018-03-07 13:21:18
阅读次数:
151
HSV模式中的H、S、V分别表示色调、饱和度、亮度 RGB转化到HSV的算法:max=max(R,G,B) min=min(R,G,B) if R = max, H = (G-B)/(max-min) if G = max, H = 2 + (B-R)/(max-min) if B = max, H ...
分类:
其他好文 时间:
2018-03-07 13:21:10
阅读次数:
187
一、Python OS模块介绍 OS模块简单的来说它是一个Python的系统编程的操作模块,可以处理文件和目录这些我们日常手动需要做的操作。 可以查看OS模块的帮助文档: >>> import os #导入os模块>>> help(os) #查看os模块帮助文档,里面详细的模块相关函数和使用方法 二 ...
分类:
编程语言 时间:
2018-03-07 13:21:01
阅读次数:
169
图片的三级缓存 一、概述 一開始在学习Android的时候。处理图片的时候,每次获取图片都是直接从网络上面载入图片。 可是在开发项目的过程中,每次点击进入app里面,图片都要慢慢的再一次从网络上面载入。 给用户的体验很不好,第一个等待的时间很令人dan 疼 第二个给用户的流量造成了不必要的浪费 因此 ...
分类:
移动开发 时间:
2018-03-07 13:20:53
阅读次数:
250
1 n = 1 2 s = 0 3 SeatID=1 4 while n <= 100*SeatID: 5 s += n 6 n += 2 7 8 print '奇数的和:%d'%(s) ...
分类:
其他好文 时间:
2018-03-07 13:20:44
阅读次数:
149
一、前述 SparkStreaming中的算子分为两类,一类是Transformation类算子,一类是OutPutOperator类算子。 Transformation类算子updateStateByKey,reduceByKeyAndWindow,transform OutPutOperator ...
分类:
其他好文 时间:
2018-03-07 13:20:36
阅读次数:
186
<TreeView Canvas.Top="1" Canvas.Bottom="1" HorizontalAlignment="Left" Name="MaintreeView" VerticalAlignment="Stretch" Width="200"> <TreeViewItem Heade ...
分类:
Windows程序 时间:
2018-03-07 13:20:28
阅读次数:
1051
MySQL-配置环境变量和修改密码 一、 闪退问题 1.1、没有配置环境变量 例如下图: 1.2、 不用输入密码直接进入 直接在输入密码步骤回车。 1.3、 没有启动mysql服务 二、 配置环境变量 2.1、 配置环境的好处 a)没有配置环境的情况下:输入mysql -u root -p 错误 输 ...
分类:
数据库 时间:
2018-03-07 13:20:19
阅读次数:
1176
将以上文件保存为.pythonstartup并存放在用户的主目录下,window放在C:\Users\Administrator下,linux放在/root或者/home/xxx目录下,然后设置环境变量 linux中export PYTHONSTARTUP=~/.pythonstartup wind ...
分类:
编程语言 时间:
2018-03-07 13:20:12
阅读次数:
173