XML 指可扩展标记语言(eXtensible Markup Language)。 XML 被设计用来传输和存储数据。 HTML 被设计用来显示数据。 (一切都是为了数据:采集、整理、存储、传输、显示等等) XML 是独立于软件和硬件的信息传输工具 。 特点: 1.自行定义标签。 不像HTML都是定 ...
分类:
其他好文 时间:
2016-11-23 23:18:25
阅读次数:
177
今天各种事情比较多.......技术活时间略少,就搞了这一项~ 52832的ADC和之前51822系列还是有蛮大差别的: 1、支持差分输入方式,测量结果为两输入端口电压差的转换的有符号数值,这个功能对于啥桥式传感器的数据采集真是太爽了,可以省一个电平平移放大电路 2、原始分辨率最高提升到12位,14 ...
分类:
其他好文 时间:
2016-11-23 16:46:09
阅读次数:
979
本文主要讲解如何在scrapy中使用xpath获取各种你想要的值 使用豆瓣作为例子 https://book.douban.com/tag/%E6%BC%AB%E7%94%BB?start=20&type=T 此处可以配合chrome浏览器的插件 xpath helper配合验证你的xpath是否正 ...
分类:
编程语言 时间:
2016-11-16 14:49:26
阅读次数:
251
监控系统基础及zabbix介绍zabbix工作原理及安装配置zabbix配置入门zabbix配置入门一、监控系统基础及zabbix介绍著名的监控工具zabbixzennosopennmscactinagios.cacti收集数据、展示图表nagios关注状态报警机制强zabbix强大的监控工具能完成数据采集、存储、展示、报警功能。zab..
分类:
其他好文 时间:
2016-11-13 19:59:51
阅读次数:
288
虽然在APP应用、Web应用、Winform应用等大趋势下,越来越多的企业趋向于这些应用系统开发,但是Socket的应用在某些场合是很必要的,如一些停车场终端设备的接入,农业或者水利、压力监测方面的设备数据采集等,以及常见的IM(即时通讯,如腾讯QQ、阿里旺旺等)的客户端,都可以采用Socket框架 ...
分类:
其他好文 时间:
2016-11-13 16:07:35
阅读次数:
190
一直想做个这样的爬虫:定制自己的种子,爬取想要的数据,做点力所能及的小分析。最近把自己做的这个豆瓣电影爬虫的数据采集部分跑起来了,目前已经爬取并存储了几万条的网页地址、几百条电影详情记录和几百条的电影短评记录。现在做一个概要的介绍和演示。 ...
分类:
编程语言 时间:
2016-11-06 13:44:14
阅读次数:
345
以前也接触过爬虫方面的知识,但是总体感觉写爬虫的话,最好使用python,因为python有很多数据采集方面的库, 此外python这面语言使用起来比较简洁易读,在采集的过程中,维护起来也比较方便! 首先来几个简单的数据采集: import requests req=requests.get("ht ...
分类:
编程语言 时间:
2016-11-05 00:15:09
阅读次数:
289
Flume作为日志收集工具,监控一个文件目录或者一个文件,当有新数据加入时,采集新数据发送给消息队列等。 1 安装部署Flume 若要采集数据节点的本地数据,每个节点都需要安装一个Flume工具,用来做数据采集。 1.1 下载并安装 到官网去下载最新版本的Flume 下载地址为:http://flu ...
分类:
Web程序 时间:
2016-11-02 17:54:55
阅读次数:
357
说一下,目前我们基础数据平台的机构。 OLTP: OLTP 主要使用ORACLE 平台,集群环境使用的是RAC。在前端做数据采集的还有SQLSERVER,但是目前初步不会从其中取数据。 中间件:主要使用的是 ORACLE FUSION ,也就是 WEBLOGIC, 在这个层次,主要考虑的是 平台的E ...
分类:
其他好文 时间:
2016-10-28 03:10:18
阅读次数:
237
业务运维并不是一个新概念,针对传统信息架构提出的业务服务管理就是把以业务为核心的IT系统与IT基础设施性能进行整合运维的解决方案。然而随着互联网+转型的不断推进,基础设施的智能化和广泛云化成为IT发展的“新常态”,只关注IT基础设施、系统与应用软件的稳定性与性能状况..
分类:
其他好文 时间:
2016-10-28 00:14:51
阅读次数:
188