爬虫前奏 爬虫实例: 1.搜索引擎(百度、谷歌、360搜索等)。 2.伯乐在线。 3.惠惠购物助手。 4.数据分析与研究(数据冰山知乎专栏)。 5.抢票软件等。 什么是网络爬虫: 1.通俗理解:爬虫是一个模拟人类请求网站行为的程序,可以自动请求网页、并将数据抓取下来,然后使用一定的规则提取有价值的数 ...
分类:
其他好文 时间:
2019-06-05 21:48:17
阅读次数:
80
一、前言 ?之前说过,我的网站编辑器一开始是tinymce,然后才用的ckeditor。可是最近我发现,ckeditor的小图标不是很美观,看久了有点low的样子。我是不是应该换一个编辑器呢,一想到这里,马上打开谷歌搜索有没有更加美观的富文本编辑器。翻了几页,才发现百度Ueditor编辑器就很不错, ...
分类:
Web程序 时间:
2019-05-11 18:04:24
阅读次数:
208
前言2018年9月26日,开源Closure库(最初由谷歌创建并用于谷歌搜索)的一名开发人员创建了一个提交,删除了部分输入过滤。据推测,这是因为开发人员在用户界面设计方面出现了问题。但此次提交的开发人员以及审核人员并未发现这一举动将会导致XSS。2019年2月,安全研究员Masato Kinugaw ...
分类:
编程语言 时间:
2019-04-27 10:02:57
阅读次数:
184
最近发现,我的一个网站http://www.chinaobd2.com/ 收录量从 二十多万 一下被减少到只有2430个。 现在正经产品详细说明页面收录的少,大部分收录的都是我们之前弄的关键词库 拓展出来的内容。 这个让我们觉得是否关键词库数据过于庞大,导致谷歌搜索引擎蜘蛛陷入其中就很难自拔。 但是 ...
分类:
其他好文 时间:
2019-02-12 13:00:36
阅读次数:
182
使用html2canvas 生成尺寸较大 base64 后进行 a标签 download 下载 ,浏览器报网络失败错误 通过谷歌搜索 发现原因是 因为截取尺寸较大 导致生成base64 长度太大 ,达到了a标签的href 上限,所以报错下载失败,解决方案是 将base64 dataURI转换为Blo ...
分类:
其他好文 时间:
2019-02-02 23:31:59
阅读次数:
1496
为了对网络数据包的“流转”有更加深刻的理解,我在docker(远程)上部署一个服务,支持http方式调用。从客户端(本地)用http方式请求其中的一个接口,并得到响应数据。同时本地通过wireshark抓包,远程用tcpdump抓包,然后分析过程中的所有通信细节。悲剧是把美好的东西撕碎给人看,而我们... ...
分类:
Web程序 时间:
2019-01-17 23:45:04
阅读次数:
342
从delphi的角度看Google(谷歌)URL编码解码方式 在网上搜索了一下,似乎没有什么关于google的URL编码解码的很详细的资料,因此在这里写一下,希望给有用的人提供一点帮助。 使用google谷歌搜索一下关键词,对应的编码如下: 刀:%E5%88%80 刀具:%E5%88%80%E5%8 ...
我相信你正在阅读本文的时候,可能是因为你渴望学习Linux技术。我想分享一下过去两年中我自己的一些学习经历,希望你能更顺利地成为Linuxer。 两年前在Linux系统的运行和维护方面找到了一份工作(当时估计该公司非常缺乏,哈哈),我在收到录取通知后才开始学习Linux技术。但是,由于本科生不是计算 ...
分类:
系统相关 时间:
2019-01-03 10:51:52
阅读次数:
189
方法一:在百度或谷歌搜索关键字,要完成某一个功能,看网上是否给提供框架支撑 一般看三个博客:csdn,iteye(两者已合并),cnblog,51cto等 方法二:在百度或谷歌搜索技术选型的关键字,找到对应技术的官方网站 a.下载对应框架的jar包,寻找download的词语 b.尽量写出demo ...
分类:
其他好文 时间:
2018-12-09 23:02:29
阅读次数:
177
结构体是谷歌搜索API package main import ( "encoding/json" "fmt" "io/ioutil" "log" ) type Datas struct { Kind string URL struct { Type string Template string } ...
分类:
Web程序 时间:
2018-12-03 22:56:40
阅读次数:
224