码迷,mamicode.com
首页 > 2018年02月10日 > 全部分享
scrapy-redis 更改队列和分布式爬虫
这里分享两个技巧 1.scrapy-redis分布式爬虫 我们知道scrapy-redis的工作原理,就是把原来scrapy自带的queue队列用redis数据库替换,队列都在redis数据库里面了,每次存,取,删,去重,都在redis数据库里进行,那我们如何使用分布式呢,假设机器A有redis数据 ...
分类:其他好文   时间:2018-02-10 21:55:29    阅读次数:957
19.2、httpd2.2配置介绍
1、centos6、centos7安装后相应文件对比centos6centos7备注配置文件/etc/httpd/conf/httpd.conf/etc/httpd/conf.d/*.conf/etc/httpd/conf/httpd.conf/etc/httpd/conf.d/*.conf服务脚本/etc/rc.d/init.d/httpd/usr/lib/systemd/system/http
分类:Web程序   时间:2018-02-10 21:55:21    阅读次数:101
mysql数据库操作
创建库操作 http://www.cnblogs.com/linhaifeng/articles/7211690.html 1、create database homework; 创建数据库) 2、show create database homework; 查询创建过程 3、drop databa ...
分类:数据库   时间:2018-02-10 21:55:10    阅读次数:102
寒假作业01
1.对大一上学期的总结: 用一句很经典的话来说,大学生活与高中生活不同就在于高中忙着做作业是为了有时间去做其他的事,而在大学,得忙着做完其他事情才有时间去做作业。因为不仅要处理好学习内的事情,还要花心思在课余活动,比如说对我来说就是参与了129晚会的舞蹈编排、二系宣传海报的绘画、我们班以及足球队的公 ...
分类:其他好文   时间:2018-02-10 21:55:04    阅读次数:56
bzoj 1066: [SCOI2007]蜥蜴
题目链接 "bzoj 1066: [SCOI2007]蜥蜴" 题解 对于每块石头拆点限流为高度 限制跳跃次数 对于能跳出去的石头的连接汇点容量为INF 源点连接青蛙容量为1 对于互相能到达的点建立容量为INF的边 求出最大流为做多逃出数 答案为青蛙数 最大流 代码 c++ include inclu ...
分类:其他好文   时间:2018-02-10 21:54:57    阅读次数:75
luogu P1108 低价购买
题目链接 "luogu P1108 低价购买" 题解 朴素n^2dp,对于方案的转移利用加法原理,dp每一种最有解的方案 代码 c++ include include include include using namespace std; const int maxn = 60007; int f ...
分类:其他好文   时间:2018-02-10 21:54:50    阅读次数:50
python3 爬取百合网的女人们和男人们
学Python也有段时间了,目前学到了Python的类。个人感觉Python的类不应称之为类,而应称之为数据类型,只是数据类型而已!只是数据类型而已!只是数据类型而已!重要的事情说三篇。 据书上说一个.py(常量、全局变量、函数、数据类型)文件为一个模块,那么就有了一种感觉:常量、全局变量、函数、数 ...
分类:编程语言   时间:2018-02-10 21:54:42    阅读次数:251
搭建服务器端
1.使用VS新建个项目ChatServer 2.给项目添加所需的lib引用(C:\Program Files\Photon Server\lib\) PhotonHostRuntimeInterfaces.dll 主机运行时接口dll ExitGames.Logging.Log4Net.dll 退出 ...
分类:其他好文   时间:2018-02-10 21:54:34    阅读次数:78
CodeForces - 367C Sereja and the Arrangement of Numbers
题目大意: 要求构建一个长为n的数组,其中每两种不同的元素必须有一对是相邻的 然后给出m个交易,如果数组中有q[i]这个元素,就给w[i]元钱,求最多能得到多少钱? 具体思路: 先求出有x个不同元素的最小长度,然后给钱排个序就好啦 怎么求最小长度呢?可以把数组看成一个完全图的一条路径 最小长度大概就 ...
分类:其他好文   时间:2018-02-10 21:54:24    阅读次数:69
java复习路3
1、直接排序(选择排序): 双重for循环,数组的第一个数a[0]和后面所有的数进行比对,得到最小的数,然后第二个数a[1]和后面所有的数进行比对,得到次小的数。。。反复后得到排序后的结果。 2、冒泡排序: 相邻的两个数相比,如果排序不对时,就对调位置;排序对时,不动。 第一轮比较后,有一个最大的数 ...
分类:编程语言   时间:2018-02-10 21:54:17    阅读次数:57
python简介
Python介绍 python的创始人为吉多·范罗苏姆(Guido van Rossum)。1989年的圣诞节期间,吉多·范罗苏姆为了在阿姆斯特丹打发时间,决心开发一个新的脚本解释程序,作为ABC语言的一种继承。 Python可以应用于众多领域,如:数据分析、组件集成、网络服务、图像处理、数值计算和 ...
分类:编程语言   时间:2018-02-10 21:54:09    阅读次数:76
第十六章 标准函数库
1.整数函数:函数分为三类:算术,随机数和字符串转换。返回值为整型值。 2. 两个函数一起会产生伪随机数。(rand返回一个范围在0和RAND_MAX(至少是32767)之间的随机数) http://blog.csdn.net/edonlii/article/details/8464944 http ...
分类:其他好文   时间:2018-02-10 21:54:00    阅读次数:76
会话原理
会话保持的作用,方便服务器在一个本服务器的不同页面中识别出用户,可以用来防止登录绕过访问,也可以用来区别不同用户以加载不同的功能 种类, 1.session, 特点 ①有默认过期时间,大约15分钟 ②储存在服务器,每人一份,过多的数据会对服务器造成压力, ③可以储存任意类型的数据 用法, ①使用se ...
分类:其他好文   时间:2018-02-10 21:53:53    阅读次数:66
机器学习之概述(整体思维导图)
利用三遍读书法学习机器学习这本书,下面展示的是第一遍读书后所绘的思维导图,工具是《幕布》: 第一遍读书主要是罗列,简单对比了每一种算法的特点及优缺点,在第二遍读书的时候再继续优化,敬请期待! ...
分类:其他好文   时间:2018-02-10 21:53:47    阅读次数:47
bzoj 1305: [CQOI2009]dance跳舞
题目链接 "bzoj 1305: [CQOI2009]dance跳舞" 题解 男,女生拆点A1A2,B1B2,拆成两点间分别连容量为K的边,限制与不喜欢的人跳舞的数量 A1连接源点容量为x,B1连接汇点容量为x,x即为歌曲数目 对与相互喜欢的男女直在A1,B1间接连容量为1的边 对于相互不喜欢A2练 ...
分类:其他好文   时间:2018-02-10 21:53:38    阅读次数:70
seq_file学习(2)—— seq_file
作者 彭东林 [email protected] 平台 Linux-4.14.13 Qemu + vexpress 概述 前面介绍了single_open,下面结合一个简单的demo驱动,学习一下seq_file的用法。 下面是一张示意图: 正文 seq_demo驱动里实现了一个简单的链表 ...
分类:其他好文   时间:2018-02-10 21:53:28    阅读次数:71
严格而一丝不苟的理性思维,不一定是人的工作的思维发展方向
只是自己胡乱想的东西,但不一定不对。 我曾经听到过科学与艺术的关系,说艺术只是科学的一种特例,一切人类文明都可划分到科学这门中。 看过《太空堡垒》的朋友们都应该有印象,巨大的外星生物看到人类异性接吻时的异常反应。 难道人类需要更进一步必须完全形成严格的理性思维的社会规范吗?就如当前男性理性社会规范一 ...
分类:其他好文   时间:2018-02-10 21:53:22    阅读次数:52
1067条   上一页 1 ... 5 6 7 8 9 10 11 ... 63 下一页
© 2014 mamicode.com 版权所有 京ICP备13008772号-2
迷上了代码!