码迷,mamicode.com
首页 >  
搜索关键字:爬虫 数据处理    ( 15133个结果
【大数据】大数据时代--网络数据与科学的时代
大数据_大数据时代_大数据概念_网络大数据随着大数据时代的来临,大数据也吸引了越来越多的关注。网络大数据(http://www.raincent.com)整合了大数据,大数据概念,大数据处理,大数据分析,cdn,cdn加速,idc,网络测量,网络监测,网络安全测量,网站性能监测,行业分析报告,行业研...
分类:其他好文   时间:2014-07-22 23:16:55    阅读次数:381
【网络大数据】大数据时代:网络营销能否颠覆传统?
大数据分析_大数据技术_大数据处理_云计算数据中心网络大数据(www.raincent.com)整合了大数据分析,大数据处理,大数据技术,云计算数据等服务为一体,力争打造国内数一数二的网络数据处理平台。众所周知,构成世界的三大要素为物质,能源和信息。由于互联网的迅猛发展,一场人类历史上从未有过的庞大...
分类:其他好文   时间:2014-07-22 23:16:12    阅读次数:381
http请求的过程
1.在浏览器输入网址http://www.baidu.com2.解析域名为主机ip地址和端口号(web应用默认端口号80)3.通过浏览器类似Socket的机制与主机建立连接4.客户端与服务器端建立连接5.客户端与服务器端按照HTTP协议传送文本数据6.服务端解析请求数据,处理后反馈结果(html,超...
分类:其他好文   时间:2014-07-22 23:08:35    阅读次数:358
网络爬虫(专门抓取图片)
xmfdsh我真是兴趣多多,怎么老是静不下心来搞定一方面的技术,再学点其他的东西,循序渐进,好吧,我又研究网络爬虫去了,这是一个简单版的,参考了网上很多资料,C#来编写,专门抓取图片,能够抓取一些需要cookie的网站,所以功能上还是挺完善的,xmfdsh只研究了三天,因此还有大把需要改进的地方,日...
分类:其他好文   时间:2014-04-29 21:50:37    阅读次数:712
j2me必备之网络开发数据处理
第9章 无线网络开发MIDP提供了一组通用的网络开发接口,用来针对不同的无线网络应用可以采取不同的开发接口。基于CLDC的网络支持是由统一网络连接框架(Generic Connection Frameword, 简称GCF)定义的。其相关类、接口以及异常都放置在javax.microedtion.i...
分类:其他好文   时间:2014-04-29 17:14:47    阅读次数:382
【转载】HTTP/FTP客户端开发库:libwww、libcurl、libfetch
网页抓取和ftp访问是目前很常见的一个应用需要,无论是搜索引擎的爬虫,分析程序,资源获取程序,WebService等等都是需 要的,自己开发抓取库当然是最好了,不过开发需要时间和周期,使用现有的Open source程序是个更好的选择,一来别人已经写的很好了,就近考验,二来自己使用起来非常快速,三来...
分类:其他好文   时间:2014-04-29 16:45:47    阅读次数:749
关于工作习惯的一点思考
最近项目发布新的版本,一个月要求四个人完工上线。我负责实现接口和相应的数据处理,从整体的任务比重上看能站到20%左右。我平时做事情比较赶,也就是属于拿的活差不多有个大体了解,就开始干,到功能实现为止。所谓的功能实现,就是能拿到相应的数据,至于数据整不正确,我一点兴趣都不感。所以整个项目下来,当别人....
分类:其他好文   时间:2014-04-29 12:11:45    阅读次数:284
SqlServer索引的原理与应用
原文:SqlServer索引的原理与应用索引的概念索引的用途:我们对数据查询及处理速度已成为衡量应用系统成败的标准,而采用索引来加快数据处理速度通常是最普遍采用的优化方法。索引是什么:数据库中的索引类似于一本书的目录,在一本书中使用目录可以快速找到你想要的信息,而不需要读完全书。在数据库中,数据库程...
分类:数据库   时间:2014-04-29 10:11:46    阅读次数:626
爬虫Larbin解析(一)——Larbin配置与使用
介绍功能:网络爬虫开发语言:c++开发者:Sébastien Ailleret(法国)特点:只抓取网页,高效(一个简单的larbin的爬虫可以每天获取500万的网页)安装安装平台:Ubuntu 12.10下载:http://sourceforge.net/projects/larbin/files/...
分类:其他好文   时间:2014-04-28 14:46:03    阅读次数:565
NodeJS写个爬虫,把文章放到kindle中阅读
这两天看了好几篇不错的文章,有的时候想把好的文章 down 下来放到 kindle 上看,便写了个爬虫脚本,因为最近都在搞 node,所以就很自然的选择 node 来爬咯~本文地址:http://www.cnblogs.com/hustskyking/p/spider-with-node.html,...
分类:Web程序   时间:2014-04-28 12:20:09    阅读次数:566
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!