码迷,mamicode.com
首页 > 其他好文 > 详细

随机IP代理

时间:2016-01-29 20:01:37      阅读:191      评论:0      收藏:0      [点我收藏+]

标签:

技术分享 

技术分享 

第一个例子就设置了一个代理IP,也是不靠谱的,最好的方式就是多设置几个,如第二个例子,通过http://www.youdaili.net/Daili/你可以找到很多代理IP,

抓取国内网站时尽量选取中国的IP(虽然这种免费IP代理很多,不过免费的东西靠不靠谱就说不好了,实际上以我的经验,我会初始设置100个左右,根据他们的访问效率测试抓取,再筛选几个靠谱的代理正式抓取),第二个例子中用到了随机数,每次抓取都是随机选取一个IP代理。

随机IP代理

标签:

原文地址:http://www.cnblogs.com/timdes/p/5169451.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!