码迷,mamicode.com
首页 > 2017年10月29日 > 全部分享
爬取房天下整个网站房产数据。。。
以前爬的数据量都有点少了,所以现在写个爬全站数据爬虫来,用redis进行URL的去重处理,采用mysql储存清洗过后房产数据,采用线程池来进行调度,进行多线程爬取 下面是房天下所有地区二手房和新房的URL,为后续爬取提供起始URL: ...
分类:Web程序   时间:2017-10-29 17:43:23    阅读次数:464
外部排序归并排序 败者树
一、定义问题 外部排序指的是大文件的排序,即待排序的记录存储在外存储器上,待排序的文件无法一次装入内存,需要在内存和外部存储器之间进行多次数据交换,以达到排序整个文件的目的。外部排序最常用的算法是多路归并排序,即将原文件分解成多个能够一次性装入内存的部分,分别把每一部分调入内存完成排序。然后,对已经 ...
分类:编程语言   时间:2017-10-29 17:43:12    阅读次数:214
团队作业2:需求分析&原型设计
Deadline: 2017-11-5 22:00PM,以博客发表日期为准。 评分基准: 按时交 - 有分,检查的项目包括后文的三个方面 按时交 - 有分,检查的项目包括后文的三个方面 需求分析 需求分析 原型设计 原型设计 编码规范 晚交 - 0分 迟交两周以上 - 倒扣本次作业分数 抄袭 - 倒 ...
分类:其他好文   时间:2017-10-29 17:43:02    阅读次数:181
HTTP协议
HTTP协议简介:协议规则:内容本身(协议头,协议内容)传输明文显示,安全性较差无状态协议,需用session,cookie来记录状态应用层协议,标准化HTTP1.1版本状态码:1,2,3开头表示响应成功,4开头表示请求错误,5开头表示服务器出错http请求:get:从服务器端获取URL资源post:..
分类:Web程序   时间:2017-10-29 17:42:53    阅读次数:227
518抽奖软件教程之:开盘选房摇号
518抽奖软件可用于年会抽奖,也可用于选房摇号,区别是:选房滚动的是号码,选房一般显示中奖序号,选房的奖项是第一轮、第二轮这种。一、奖项设置常见的摇号奖项设置举例如下:第一轮、第二轮……。二、名单设置屏幕上滚动的是号码,买房的人每人拿一个号码牌,参与摇号。如下..
分类:其他好文   时间:2017-10-29 17:42:37    阅读次数:123
清北刷题冲刺 10-29 p.m
洗澡 /* 这个题不能单纯判断左括号和右括号的多少,而应该从左到右扫一遍,看应该如何配对 */ #include<iostream> #include<cstdio> #include<cstring> using namespace std; char s[100010]; int cnt,ans ...
分类:其他好文   时间:2017-10-29 17:42:24    阅读次数:161
python里面的浅copy的方式和作用
python的浅copy有以下四种方式 code person = ["name",["money","10000"]] #type1 p1 = person[:] #type2 p2 = person.copy() #type3 p3 = list(person) #type4,这种方式等同与第2 ...
分类:编程语言   时间:2017-10-29 17:42:15    阅读次数:174
如何写代码(转载)
转载链接:http://www.cnblogs.com/bughui/p/7422304.html 写代码就是学一门语言然后开始撸代码吗?看完了我的《GoF设计模式》系列文章的同学或者本身已经就是老鸟的同学显然不会这么认为。编程是一项非常严谨的工作!虽然我们自嘲为码农,但是这工作毕竟不是真正的搬砖, ...
分类:其他好文   时间:2017-10-29 17:42:09    阅读次数:170
Eclipse项目导入出现感叹号解决方法
Eclipse项目导入出现感叹号解决方法 出现这样的情况怎么办 右击项目名—Bulid path —configure Bulid path 选择Libraries—Remove(移去错的)—Add Libraries选择你的JRE—Finish—OK 啦啦啦,很神奇是不是哈 这个问题一般是导入别人... ...
分类:系统相关   时间:2017-10-29 17:41:58    阅读次数:281
第五天:JavaWeb核心之Servlet
一、Servlet简介1、什么是Servletservlet是运行在服务端的Java小程序,是sun公司提供的一套规范,用来处理客户端请求、响应给浏览器的动态资源Servlet是Javaweb三大组件之一(Servlet、Filter、Listener),且最重要2、Servlet的作用用来处理从客户端发送过来的请求,并对该请求..
分类:编程语言   时间:2017-10-29 17:41:49    阅读次数:209
10.29 T2 codeforces 671D
首先O(n2)dp很好想 f[i][j]表示i子树内的所有边都被覆盖且i~j的路径也都被覆盖的最小花费。 考虑去掉无用的状态,其实真正用到的就是每一条链。 去掉第二维,f[i]表示i子树内的边都被覆盖且父向边也被覆盖的最小花费。 那么怎么转移呢? f[i]可以是任意一条包含i和fa[i]的链转移而来 ...
分类:其他好文   时间:2017-10-29 17:41:40    阅读次数:132
UML类图详解_组合关系
组合关系和聚合关系有一个最大的不同,组合关系中的整体直接掌握部件的生灭,聚合关系中的整体并不具有生灭部件的权力。一旦组合中的整体不存在时,其组合部件也不能单独存在,必须同时消灭。另外,外界也不能直接与部件沟通,必须通过整体代为传达消息。那么在C++中实现组合关系时,不能由第三者产生部件后才将部件指标 ...
分类:其他好文   时间:2017-10-29 17:41:29    阅读次数:209
linux基本命令操作03
软件包管理1.让光盘文件的内容出现在系统(挂载)[root@A~]#mkdir/rhel7[root@A~]#mount/dev/cdrom/rhel7mount:/dev/sr0写保护,将以只读方式挂载[root@A~]#ls/rhel7[root@A~]#ls/rhel7/P(tab)#查看光驱中的安装包2.RHEL7当中RPM包(后缀.rpm,相当于win的.exe),方便快捷,不..
分类:系统相关   时间:2017-10-29 17:41:21    阅读次数:252
Unity3D开发《我的世界》之五、创建无限地形
转载请注明出处:http://www.cnblogs.com/shamoyuu/p/unity_minecraft_05.html 一、导入Unity3D自带的第一人称角色控制器 直接导入就行,我们用FPSController。 二、为Map添加创建Chunk和判断Chunk是否存在的方法 上上一章 ...
分类:编程语言   时间:2017-10-29 17:41:10    阅读次数:281
KMP相关
KMP是一个困扰我很久的算法,听老师或者是学姐讲了差不多有4次了,但是还是搞不太懂,今天终于,终于,终于搞懂了! ——2017-10-29 Vanora 首先推荐一下KMP详解——July 读罢之后内心只有一个感觉:我的KMP终于可以毕业了qwq 学东西千万不要求快!细细地,慢慢地去读这篇文章,相信 ...
分类:其他好文   时间:2017-10-29 17:41:02    阅读次数:201
Linux网络(一)
一、计算机网络基础二、Mac&ip&port三、通信子网和资源子网四、网络接口命名规范一、计算机网络基础Linux网络属性配置计算机网络:文本流:把文件变成bit(01)流,传输,文本在线缆中传输的是bit流根据时钟频率来决定:例如1s震动1000次,标识1s可以传输1000个数据流为..
分类:系统相关   时间:2017-10-29 17:40:56    阅读次数:194
ajax 异步刷新,需要填写的参数
参数 options 类型:Object 可选。AJAX 请求设置。所有选项都是可选的。 *******async 类型:Boolean 默认值: true。默认设置下,所有请求均为异步请求。如果需要发送同步请求,请将此选项设置为 false。 注意,同步请求将锁住浏览器,用户其它操作必须等待请求完 ...
分类:Web程序   时间:2017-10-29 17:40:47    阅读次数:202
1292条   上一页 1 ... 28 29 30 31 32 33 34 ... 76 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!