3.爬取优质的资源:图片、文本、视频 爬取知乎钓鱼贴\图片网站,获得福利图片。 爬取微信公众号文章,分析新媒体内容运营策略。 1.了解爬虫的基本原理及过程 2.Requests+Xpath 实现通用爬虫套路 3.了解非结构化数据的存储 4.学习scrapy,搭建工程化爬虫 5.学习数据库知识,应对大 ...
分类:
其他好文 时间:
2018-06-23 21:02:34
阅读次数:
155
1. 送分题 一开始真没明白为什么叫送分题,后来明白了,泪流满面。。我只想说,查看源码这个事情一辈子都不能忘。 还是推荐以后都用这个,就不会漏了 2.Do you know time 网页显示一张福利图片,下载下来,随便用二进制打开图片,翻到最后面,发现了代码,种子确定了,srand就没意义了,种子... ...
分类:
Web程序 时间:
2016-05-11 21:43:22
阅读次数:
537
在某Q和某信中都有我们熟悉的公众号和结构化消息,例如又或者这样:这些图片都是固定的,每个用户看到的图片都是同一张。第一张,实在没有太多的点击欲望!第二张就还算凑合吧,不过哪来天天这么多福利图!如果想让每个用户看到的消息有所不同,因人而异,我们需要依赖终端做相应的开发。例如某某运动的消息:这种方式就比...
分类:
其他好文 时间:
2015-08-27 10:56:53
阅读次数:
212
引言
上一篇 《Socket与网站保密应用 (隐藏链接的视频下载)》大大咧咧地从 WEB 讲 Socket,再到 TCP/IP 等协议,又再讲到 Wireshark
如何抓IP包分析,最还要复习一下路由与网络的知识,真的涉及面太广了,只能蜻蜓点水一一带过,不过将多领域的知识串烧也是不错的,可以起到一个归纳的作用。这篇针对 Flash 来进行,写作思路以解决问题的过程行为线索。依次展示如何使用...
分类:
其他好文 时间:
2015-08-12 06:44:26
阅读次数:
501