最近做网站有一个站要用到WEB网页采集器功能，当一个PHP脚本在请求URL的时候，可能这个被请求的网页非常慢慢，超过了mysql的 wait-timeout时间，然后当网页内容被抓回来后，准备插入到MySQL的时候，发现MySQL的连接超时关闭了，于是就出现了“MySQL server has gone away”这样的错误提示。
对于这个错误提示我百度了一下，关于产生这个错误的原因，比如...
分类：
数据库 时间：
2015-03-07 11:38:35
阅读次数：
195
最近做网站有一个站要用到WEB网页采集器功能，当一个PHP脚本在请求URL的时候，可能这个被请求的网页非常慢慢，超过了mysql的 wait-timeout时间，然后当网页内容被抓回来后，准备插入到MySQL的时候，发现MySQL的连接超时关闭了，于是就出现了“MySQL server has go...
分类：
数据库 时间：
2015-03-07 11:30:01
阅读次数：
164
最近做网站有一个站要用到WEB网页采集器功能，当一个PHP脚本在请求URL的时候，可能这个被请求的网页非常慢慢，超过了mysql的 wait-timeout时间，然后当网页内容被抓回来后，准备插入到MySQL的时候，发现MySQL的连接超时关闭了，于是就出现了"MySQL server has go...
分类：
数据库 时间：
2015-02-15 19:23:58
阅读次数：
173
网页采集利器 phpQuery2012-02-28 11:43:24|分类：php|举报|字号订阅在网页采集的时候，通常都会用到正则表达式。但是有时候对于正则不太好的同学，比如我，那就杯具了。。如今google的项目里有个phpQuery , 顾名思义query，完全类似于jquery的语法，但这是...
分类：
Web程序 时间：
2015-01-08 22:41:12
阅读次数：
207
这段时间想做一个网页采集的程序，由于一网站采用了防采集的办法，我的httpclient总是在登录后无法获取到我想要过去的链接。在无数次的跟踪过后发现原来人家给返回的是javascript拼成的页面，而且其中包含了frameset，期间嵌套好多frame。由于httpclient的getResonse...
分类：
Web程序 时间：
2015-01-04 14:55:03
阅读次数：
320
以百度新闻为例，介绍如何基于HttpClient去采集网络新闻资源信息。...
分类：
Web程序 时间：
2014-11-07 14:54:11
阅读次数：
552
网络爬虫，是一种按照一定的规则，自动的抓取万维网信息的程序或者脚本。网络爬虫是搜索引擎系统中十分重要的组成部分，它负责从互 联网中搜集网页，采集信息，这些网页信息用于建立索引从而为搜索 引擎提供支持，它决定着整个引擎系统的内容是否丰富，信息是否即 时，因此其性能的优劣直接影响着搜索引擎的效果。网络爬...
分类：
Web程序 时间：
2014-09-29 13:30:00
阅读次数：
281
我们这个系列准备讲一下--网络爬虫。网络爬虫是搜索引擎系统中十分重要的组成部分，它负责从互联网中搜集网页，采集信息，这些网页信息用于建立索引从而为搜索引擎提供支持，它决定着整个引擎系统的内容是否丰富，信息是否即时，因此其性能的优劣直接影响着搜索引擎的效果。网络爬虫的基本工作原理： (1)从一个...
分类：
其他好文 时间：
2014-08-08 23:54:56
阅读次数：
396
--MySQL连接问题【如何解决MySQL连接超时关闭】------------------------------------------------转载最近做网站有一个站要用到WEB网页采集器功能，当一个PHP脚本在请求URL的时候，可能这个被请求的网页非常慢慢，超过了mysql的 wait-t...
分类：
数据库 时间：
2014-06-18 17:19:02
阅读次数：
253
