public void createIndex() throws IOException { // 第一步采集数据：(jdbc采集数据) BookDao dao = new BookDaoImpl(); List<Book> queryBookList = dao.queryBookList(); ...
分类：
Web程序 时间：
2017-06-26 19:59:11
阅读次数：
211
基层干部大把的精力花在会议和上报材料上，难以抽出更多的精力推动精准扶贫。要反对形式主义，把基层干部从文山会海中解放出来 精准扶贫驻村蹲点一个月，与乡镇和村干部同吃同住同工作，深度体验了他们的工作生活状态，由衷地觉得基层干部真的不容易。 别的不说，就说说他们要应付的种种文山会海吧。 去年镇里的政法委副 ...
分类：
其他好文 时间：
2017-06-25 11:07:31
阅读次数：
189
转自原文 使用ScrapySharp快速从网页中采集数据 转自原文 使用ScrapySharp快速从网页中采集数据 ScrapySharp是一个帮助我们快速实现网页数据采集的库，它主要提供了如下两个功能 从Url获取Html数据 提供CSS选择器的方式解析Html节点 安装： ScrapySharp ...
分类：
Web程序 时间：
2017-06-25 10:19:59
阅读次数：
220
理解现在--挖掘规律--预测未来 精准营销智能风控运营优化 多维分析挖掘预测敏捷BI 分析展示数据挖掘语音识别人脸识别 数据仓库Hadoop数据集市 数据采集-数据存储-数据查询-数据分析 大数据建模：-风险建模能力：理赔欺诈-用户画像能力：精准营销-疾病预测能力：病历分析 保险社交营销 保险社交图 ...
分类：
其他好文 时间：
2017-06-17 20:47:22
阅读次数：
155
大气质量数据监测站用于测试空气质量监测及数据采集，实现野外或者室内空气质量的检测。 1、项目概述 本项目是一个定制项目，要求采集大气的压力、温度、湿度、PM25、位置等数据并上传到指定的后台服务器。但有时候因为没有条件或因为各种原因不能联网，则采用本地保存的方式，本地保存我们决定使用SD卡来实现。除 ...
分类：
Web程序 时间：
2017-06-13 21:47:35
阅读次数：
331
需求描述 将数据记录持久化存储在HBase中，需要支持如下功能： 设计方案 按列存储 优点 缺点 列合并为JSON格式存储 优点 缺点 列合并为PB格式存储 优点 缺点 批量写入性能对比 单线程连续批量发送100万条过车记录（每条记录37个字段，每批10000条记录），三种方案完成数据采集总耗时对比 ...
分类：
其他好文 时间：
2017-06-13 12:47:58
阅读次数：
164
活动说明：挨踢部落是为核心开发者提供深度技术交流，解决开发需求，资源共享的服务社群。基于此社群，我们邀请了业界技术大咖对开发需求进行一对一突破，解除开发过程中的绊脚石。以最专业、最高效的答复为开发者解决开发难题。话题关键词：大数据来源/数据安全/云计算/Linux..
分类：
其他好文 时间：
2017-06-12 22:39:33
阅读次数：
202
补充： 1、 常见开源监控的对比和选择 cacti cacti不是监控工具，他是个依赖于SNMP的数据采集和数据呈现的工具。 功能： 数据采集、保存数据[SQL,txt] 数据展示（rrdtool绘图） 数据分析和报警（很一般） nagios 功能： 数据报警（报警功能是Nagios的特色功能）[故 ...
分类：
移动开发 时间：
2017-06-12 10:51:11
阅读次数：
414
SaltStack实战之数据系统GrainsVSPillar学习SaltStackSaltStack实战之数据系统GrainsVSPillar名称存储位置数据类型数据采集更新方式应用GrainsMinion端静态数据Minion启动时采集，也可以使用saltutil.sync_grains进行刷新。存在Minion基本数据。比如用于匹配Minion，自身数据可..
分类：
其他好文 时间：
2017-06-07 14:18:42
阅读次数：
185
一、概述zabbix自带的MySQL插件来监控mysql数据库，但是太过简陋了，对于我们dba来说，基本没有啥作用，所以需要做更详细的监控，而percona就有这个详细监控的模版以及脚本，正好拿过来用。percona官网：www.percona.comPercona组成介绍1、PHP脚本用来数据采集2、shell脚本用来..
分类：
数据库 时间：
2017-06-04 22:37:36
阅读次数：
2098
