《基于Java的数据采集（一）》：http://www.cnblogs.com/lichenwei/p/3904715.html《基于Java的数据采集（二）》：http://www.cnblogs.com/lichenwei/p/3905370.html基于之前2篇Java数据采集入库，做了下功能...
分类：
编程语言 时间：
2014-08-12 13:27:34
阅读次数：
267
在上一篇文章《基于Java的数据采集（一）》：http://www.cnblogs.com/lichenwei/p/3904715.html提到了如何如何读取网页源代码，并通过group正则 动态抓取我们所需要的网页数据现在来写下关于数据的存储，思路很简单，只需要在我们每次读取一个数据的时候，把数据...
分类：
编程语言 时间：
2014-08-11 20:55:32
阅读次数：
311
对于互联网人来说，web data scraping (web数据采集)已经成为一个迫切而又实在的需求。在如今这个开源的时代，问题往往不在于是否有解决方案，而是如何选择适合你的解决方案，因为总是有很多潜在的方案供你选择。...
对于互联网人来说，web data scraping (web数据采集)已经成为一个迫切而又实在的需求，然而，面对众多的web scraping 方案，你有该如何选择适合你的方案？笔者试图帮助你解决这个问题.
一.需求.我们公司要对自己的各个网站进行数据采集，想了解一个用户在我们网站的整个浏览轨迹，但是我们每个二级域名都对应自己的项目，也就是说对应自己的jsessionid，我们无法把这些数据关联起来，所以想到让所有的二级域名都公用一个jsessionid，这样用户的整个浏览数据我们..
分类：
Web程序 时间：
2014-08-08 16:33:38
阅读次数：
305
在阅读这篇文章之前，我们默认您已经具备了Linux基本操作技能，能够搭建LAMP环境，了解SNMP简单网络管理协议以及RRDTool绘图工具的使用。环境：CentOS6.5x86Cacti-0.8.8b一、概述首先，我们对监控要有一定的了解，我们需要层层递进。什么是监控？Linux上常见的监控方式（命令或..
分类：
其他好文 时间：
2014-08-08 16:25:26
阅读次数：
439
*集群可以布署在一台服务器上，也可以布署在多台服务器上；*支持传统TCP\IP协议；*既支持SOCKET长连接也支持短连接；*支持最新REST WEBSERVICE；*一台应用服务器可支持5000以上TCP\IP长连接，适用于大并发适时数据采集系统；*支持多帐套；*可实现应用服务器自由扩展，插件式的...
分类：
其他好文 时间：
2014-08-07 21:34:50
阅读次数：
303
跨境电商最近非常火爆，虽然目前做跨境电商在通关及仓储物流环节还存在着难点，但是随着各地政府相继推出各种促进跨境电商交易的扶持政策，跨境电商的大环境日趋明朗，逐渐呈现火爆的状况。
对于做跨境电商的企业和个人来说，为了缩短物流时间和环节，会选择在海外建仓提前备货，那么，提前了解市场行情和用户喜好，做出科学合理的产品SKU预测就非常重要了，很多做跨境电商的企业或个人习惯性的会通过从国外像...
分类：
其他好文 时间：
2014-08-04 14:27:47
阅读次数：
500
大规模数据采集后总是要进行数据匹配，这个时候正则表达式就能十分酷炫的解决这个问题~常用的元字符代码 说明. 匹配除换行符以外的任意字符\w 匹配字母或数字或下划线或汉字\s 匹配任意的空白符\d 匹配数字\b 匹配单词的开始或结束^ 匹配字符串的开始$ 匹配字符串的结束例子 一个网站如果要求你填写的...
分类：
其他好文 时间：
2014-08-01 04:39:51
阅读次数：
304
条码技术属于自动识别技术范畴，它是在计算机技术和信息技术的基础上发展起来的一门实用的数据采集、自动输入技术。从系统的角度看，条码技术涉及编码技术、通信技术、光电传感技术、印刷技术及计算机应用技术。由于条码技术具有成本低、识别快速、准确、操作简单、出错率低等优点，在现代物流信息的形成和传输过程中，条码...
分类：
其他好文 时间：
2014-07-31 19:44:27
阅读次数：
217
