很多人学用python，用得最多的还是各类爬虫脚本：有写过抓代理本机验证的脚本，有写过自动收邮件的脚本，还有写过简单的验证码识别的脚本，那么我们今天就来总结下python爬虫抓站的一些实用技巧。 静态网页 对于静态网页的爬虫不用多说大家也都知道，因为爬取静态网页非常的简单，只要用requests直接 ...
分类：
编程语言 时间：
2018-09-07 19:17:17
阅读次数：
803
库文件是已经编译好的二进制代码。这个二进制代码可以是动态的，如 .so 也可以是静态的，如 .a ，如果是动态的，则你最后生成的程序文件在运行时，需要这个动态库的支持，如果是静态的，则你最后生成的客执行程序文件运行时可以脱离这个库文件而独立运行。 ...
分类：
其他好文 时间：
2018-09-07 19:17:10
阅读次数：
194
很多分布式缓存登录用户信息一般都是存在redis类似的缓存里面。其中实现细节或者拆分都是大同小异。 一般用户登录权限管理都用shiro处理。 如果仔细分应该就是一下3种。 1，有一个单独的用户权限管理平台。别的系统用户登录权限都再这个系统里面维护配置。登录后的用户信息存在redis。 2，每个系统都 ...
分类：
其他好文 时间：
2018-09-07 19:15:05
阅读次数：
162
举例来说：以下是css文件夹下site.css文件为site.min.css，并且将生成的文件放在指定的目录下 在window下，执行是没有问题， 但是在centos下执行有问题，经过排查，是由于文件夹的名称是大写的Css,gulpfile中是小写的css，导致的问题，统一修改后，问题解决。 ...
分类：
其他好文 时间：
2018-09-07 19:13:40
阅读次数：
495
最近刚搭建的Hadoop集群（CM），发现在通过sqoop导入数据使整个集群当中的磁盘都快占满了。这个时候考虑到需要对集群当中数据的副本数进行修改（由原来的3个副本修改为现在的1个副本） 然后我们在对之前到如到HDFS上面的文件进行重新设置副本数。命令如下： 然后我们使用CM对集群当中的资源进行平衡 ...
分类：
其他好文 时间：
2018-09-07 19:13:20
阅读次数：
883
【传送门】http://acm.zju.edu.cn/onlinejudge/showProblem.do?problemCode=4020 【题目大意】从起点（sx, sy）出发，要到达（ex , ey）。每次从点（x,y）走的时候要看红绿灯，灯的状态为1时只能左右走，走到（x , y+1）或者 ...
分类：
其他好文 时间：
2018-09-07 18:39:22
阅读次数：
207
最近读到一本书，被里面的一些观点打动了，记录下来，共勉。 所谓编程实际上是把一件事情通过程序语言告诉计算机，让计算机替你做。 但是假如你自己都不明白如何去做，那就更不要指望计算机能理解你想做什么了。 所以编程的第一要务就是要弄清楚到底要做什么事情，然后再用代码去实现。 一接到任务就开始coding的 ...
分类：
其他好文 时间：
2018-09-07 18:03:57
阅读次数：
285
对于es6来说，本省自带模块化开发，其实就是export 导出,import导入 es5之前是通过require.js,sea.js实现模块化。 相关资料：https://blog.csdn.net/tsingsn/article/details/72307788?utm_source=itdada ...
分类：
其他好文 时间：
2018-09-07 18:01:21
阅读次数：
193
1.前言：为什么我们要关心模型的bias和variance？ 大家平常在使用机器学习算法训练模型时，都会划分出测试集，用来测试模型的准确率，以此评估训练出模型的好坏。但是，仅在一份测试集上测试，存在偶然性，测试结果不一定准确。那怎样才能更加客观准确的评估模型呢，很简单，多用几份测试数据进行测试，取多 ...
分类：
其他好文 时间：
2018-09-07 17:59:18
阅读次数：
638
