※已刊登在《无线电》04月刊上 搭建属于你的在线实时采集系统——HTML5 在嵌入式系统中的应用 作者：刘琛，徐洋 摘要： 本应用摆脱了以往嵌入式系统的数据采集方式，借助于最新的HTML5的Canvas API及WebSocket API两大特性，实现了数据的在线实时采集功能。提升了嵌入式采集系统的 ...
分类：
Web程序 时间：
2017-03-23 13:59:39
阅读次数：
211
pillar存储位置：master端，数据类型：动态数据，数据采集方式：在master端定义，指定给对应的minion。可以使用saltuitl.refresh_pillar刷新。应用：存储master指定的数据。只有指定的minion可以看到。用于敏感数据保存。通过一个例子来了解：###salt‘*‘pillar.items
###默认是..
分类：
其他好文 时间：
2017-03-21 11:31:44
阅读次数：
131
监控主要功能设备样本数据采集告警:短信、微信、电话、邮件，并能实现告警升级；生成图型趋势存储监控数据任何未被监控的系统都不得上线；nagios图形处理较弱，不存储数据，告警能力强大；catia有强大的图形处理和数据存储，但告警太弱；Zabbix就是集合nagios和cacia的功能，并..
分类：
其他好文 时间：
2017-03-20 19:50:07
阅读次数：
314
网络是十分复杂的。网页数据格式不友好，网站服务器宕机，目标数据的标签找不到，都 是很麻烦的事情。网络数据采集最痛苦的遭遇之一，就是爬虫运行的时候你洗洗睡了，梦 想着明天一早数据就都会采集好放在数据库里，结果第二天醒来，你看到的却是一个因某 种数据格式异常导致运行错误的爬虫，在前一天当你不再盯着屏幕去 ...
分类：
编程语言 时间：
2017-03-18 18:20:06
阅读次数：
182
本文作者为阿里云技术专家郑重（卢梭），主要分享内容是如何在21天内快速搭建推荐系统。推荐系统的搭建是个复杂工程，涉及到实时计算、离线计算，以及各种数据采集、流转等，对自建推荐系统来说，1人年是跑不掉的。 本文介绍的内容还包括如何搭建一个个性化推荐系统所需的环境准备、基本配置和离线技术等基本功能的搭 ...
分类：
其他好文 时间：
2017-03-17 18:54:58
阅读次数：
210
本文主要介绍了各种数据采集的方法，并重点对日志数据的上传进行了讲解。 ...
分类：
其他好文 时间：
2017-03-17 16:44:02
阅读次数：
198
Logstash是一款开源日志收集处理框架，logstash-output-datahub插件，实现将数据导入DataHub的功能。通过简单的配置即可完成数据采集和向DataHub的传输，结合MaxCompute/StreamCompute可以轻松构建流式数据从采集到分析的一站式解决方案。 ...
分类：
其他好文 时间：
2017-03-17 16:19:51
阅读次数：
293
前言最近在公司接到一个任务，是关于数据采集方面的。
需求主要有3个：
通过web端上传文件到HDFS;
通过日志采集的方式导入到HDFS;
将数据库DB的表数据导入到HDFS。
正好最近都有在这方面...
分类：
Web程序 时间：
2017-03-11 23:57:35
阅读次数：
2712
