码迷,mamicode.com
首页 >  
搜索关键字:数据采集    ( 1158个结果
事故·由于关闭telnet造成数据采集失败,中断6小时
···绿盟发的整改措施,我以为telnet没什么用,就按照绿盟发的文档把telnet关了,造成平常采集服务器数据采集终端6小时。···以后不会在贸然的去改动服务器的设置了,改动之前一定要和相关人员协商清楚。
分类:Web程序   时间:2016-07-13 12:07:44    阅读次数:153
NetCDF 入门
一、概述 NetCDF全称为network Common Data Format,中文译法为“网络通用数据格式”,对程序员来说,它和zip、jpeg、bmp文件格式类似,都是一种文件格式的标准。netcdf文件开始的目的是用于存储气象科学中的数据,现在已经成为许多数据采集软件的生成文件的格式。 从数 ...
分类:Web程序   时间:2016-07-12 14:01:32    阅读次数:237
一种面向电信行业基站数据的数据采集系统的设计与实现
一种面向电信行业基站数据的数据采集系统的设计与实现 1,项目简介 本论文来源于上海电信应急指挥平台。上海电信应急指挥平台主要是采集上海所有基站的一些与应急相关的实时数据,将这些数据做统计分析工作之后,在web浏览器上展示出来,便于电信上级的部门做决策。由于本人主要负责数据采集模块的架构、设计和开发工作。对这个领域有点体会,本篇文章主要总结这个领域的一些实践工作。 由于在数据采集的领域主要以使...
分类:移动开发   时间:2016-07-12 12:18:56    阅读次数:358
.NET 开发的-服务于企业,个人用户群的打杂平台-可定制数据采集,刷单抢购,验证码识别各类插件
一个小小的插件打杂平台,基于.NET开发,可以方便定制数据采集 验证码识别,以及其它能够想到的小工具插件的定制 ...
分类:Web程序   时间:2016-07-12 01:33:13    阅读次数:203
笔记之Python网络数据采集
笔记之Python网络数据采集 非原创即采集 一念清净, 烈焰成池, 一念觉醒, 方登彼岸 网络数据采集, 无非就是写一个自动化程序向网络服务器请求数据, 再对数据进行解析, 提取需要的信息 通常, 有api可用, api会比写网络爬虫程序来获取数据更加方便. Part1 创建爬虫 Chapter1 ...
分类:编程语言   时间:2016-07-08 10:25:27    阅读次数:588
让Scrapy的Spider更通用
1,引言《Scrapy的架构初探》一文所讲的Spider是整个架构中最定制化的一个部件,Spider负责把网页内容提取出来,而不同数据采集目标的内容结构不一样,几乎需要为每一类网页都做定制。我们有个设想:是否能做一个比较通用的Spider,把定制部分再进一步隔离出去?GooSeeker有一..
分类:其他好文   时间:2016-07-06 10:29:00    阅读次数:332
zabbix
01-zabbix简介TheEnterprise-classMonitoringSolutionforEveryonewww.zabbix.comSLA:Service-LevelAgreement:服务等级协议监控解决方案应该具有哪些功能?数据采集(Datagathering)ZabbixAgentPassive/Active方式,内置常用监控项,多平台支持SNMP对路由/交换等设备提供SNMP支持I..
分类:其他好文   时间:2016-07-05 22:40:31    阅读次数:351
采集大众点评、美团等数据进行大数据挖掘
当你有了一只美丽的爬虫后你可以做很多有意思的事情,比如爬虫爬到了很多餐饮数据后就可以做餐饮地区活跃度分析了,这些分析指标是很有意义的,特别是对准备开店的人。首先要将数据从大众点评、美团或其他网站数据采集下来,方式可以从美食产品入口,然后找到餐饮公司信息,然后找到地址,地区等信息。采集的时候要做好防重 ...
分类:其他好文   时间:2016-07-04 01:14:47    阅读次数:469
公司组建爬虫团队可以遇到的问题
网络爬虫是数据采集的利器,不同的应用领域出现各种各样的网络爬虫类型,企业在组建自己的爬虫团队,招几个爬虫工程师,爬下几个网站,貌似就可以说我们有自己的爬虫团队,我们可以得到任何数据。再过几个月你会发现其实不是这样的。首先第一点爬虫只能爬取公开数据,否则就不是爬虫行为,是黑客行为了,其次写程序能将数据 ...
分类:其他好文   时间:2016-07-03 01:45:43    阅读次数:200
【蓝牙数据采集模块】-02-Sensor Controller 编写CC2650STK外设驱动
上次说到把所有的传感器模块在Sensor Controller中实现读写,并封装驱动。 先来看一下CC2650STK的原理图 用红色方框标记的DIO_0~DIO_7, DIO_23~DIO_30是可以通过Sensor Controller去控制的。后面几个暂时用不到,前面的包括了一个I2C接口,和两 ...
分类:其他好文   时间:2016-07-01 06:36:28    阅读次数:191
1158条   上一页 1 ... 81 82 83 84 85 ... 116 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!