随着BIG DATA大数据概念逐渐升温,如何搭建一个能够采集海量数据的架构体系摆在大家眼前。如何能够做到所见即所得的无阻拦式采集、如何快速把不规则页面结构化并存储、如何满足越来越多的数据采集还要在有限时间内采集。这篇文章结合我们自身项目经验谈一下。我们来看一下作为人是怎么获取网页数据的呢?1、打开浏...
分类:
其他好文 时间:
2015-01-13 15:50:17
阅读次数:
216
“
美国“网络武器”的研究已多达2千多种,其中最值得注意的是,“震网”病毒是世界上首个专门针对工业控制系统编写的破坏性病毒,被称为“网络空间的精确制导武器”。它能够利用Windows系统和西门子SIMATIC WinCC系统的漏洞进行攻击。攻击西门子公司控制系统的数据采集与监视控制系统(SCADA),该系统广泛应用于能源、交通、水利、石油化工等领域,实现生产过程控制与调度的自动化。“震网”病毒侵...
分类:
其他好文 时间:
2015-01-12 22:32:24
阅读次数:
202
最近文章:高可用数据采集平台(如何玩转3门语言php+.net+aauto)、高并发数据采集的架构应用(Redis的应用)项目文档:关键词匹配项目深入研究(二)- 分表思想的引入吐槽:本人也是非常讨厌拿来主义的,有些培训每个细节都提到过,主管还找我要实际案例,而不是去安排合适的人去做这件事情,有点过...
分类:
Web程序 时间:
2015-01-10 12:29:19
阅读次数:
271
Scada系统组成图:
1 Q:什么是SCADA系统
A:SCADA(SupervisoryControl
And Data Acquisition)系统,即数据采集与监视
控制系统。应用远程通信技术对远方设备进行监视和控制,以实现远程信号,
远程测量,远程控制和远程调节等各项功能。它并非一个单纯的控制系统,
而更多地注...
分类:
其他好文 时间:
2015-01-09 09:17:39
阅读次数:
177
FIFO( First In First Out)简单说就是指先进先出。由于微电子技术的飞速发展,新一代FIFO芯片容量越来越大,体积越来越小,价格越来越便宜。作为一种新型大规模集成电路,FIFO芯片以其灵活、方便、高效的特性,逐渐在高速数据采集、高速数据处理、高速数据传输以及多机处理系统中得到越来...
分类:
其他好文 时间:
2015-01-08 19:56:05
阅读次数:
122
使用LPC1768做了一个数据采集设备,将经验总结出来,分享给大家,欢迎大家评论交流。
1. 通过SPI方式实现LPC17xx的远程升级设计
2. LPC 1768 -- RTC使用方法
3....
分类:
其他好文 时间:
2015-01-07 22:10:12
阅读次数:
130
(二)分表思想的引入近期的文章: 1)高并发数据采集的架构应用(Redis的应用) 2)高可用数据采集平台(如何玩转3门语言php+.net+aauto)手把手教你做关键词匹配项目这块基本已经完成,深入研究是对系统的性能作为分析,在一些环境的刺激下所必需要做的一些改变。手把手教你做关键词匹配项目:手...
分类:
其他好文 时间:
2015-01-03 22:13:07
阅读次数:
248
(二)分表思想的引入近期的文章: 1)高并发数据采集的架构应用(Redis的应用) 2)高可用数据采集平台(如何玩转3门语言php+.net+aauto)手把手教你做关键词匹配项目这块基本已经完成,深入研究是对系统的性能作为分析,在一些环境的刺激下所必需要做的一些改变。手把手教你做关键词匹配项目: ...
分类:
其他好文 时间:
2015-01-03 10:36:53
阅读次数:
172
同类文章:高并发数据采集的架构应用(Redis的应用)吐槽下:本人主程是PHP,团队里面也没有精通.net的人才,为了解决这个平台方案,还是费了一部分劲。 新年了,希望有个新的开始。技术+团队管理都有新的突破吧,在新的一年对自己好些,不能再继续搞基下去。问题出发点:´随着软件的日益强大,用户的使用需...
分类:
编程语言 时间:
2015-01-01 08:58:01
阅读次数:
263