物化视图是包括一个查询结果的数据库对象，它是远程数据的的本地副本，或者用来生成基于数据表求和的汇总表。物化视图存储基于远程表的数据，也可以称为快照。对于复制，物化视图允许你在本地维护远程数据的副本,这些副本是只读的。如果你想修改本地副本，必须用高级复制的功能。当你想从一个表或视图中抽取数据时，你可以 ...
分类：
其他好文 时间：
2016-11-22 14:58:43
阅读次数：
259
转载：http://www.jianshu.com/p/9fb0a795da93 1. Android中的内存 1.1 Android中的垃圾回收机制 Android 平台最吸引开发者的一个特性：有垃圾回收机制，无需手动管理内存，Android 系统会自动跟踪所有的对象，并释放那些不再被使用的对象 ...
分类：
移动开发 时间：
2016-11-05 02:35:47
阅读次数：
260
ETL是BI项目最重要的一个环节，通常情况下ETL会花掉整个项目的1/3的时间，ETL设计的好坏直接关接到BI项目的成败。ETL也是一个长期的过程，只有不断的发现问题并解决问题，才能使ETL运行效率更高，为项目后期开发提供准确的数据。 ETL的设计分三部分：数据抽取、数据的清洗转换、数据的加载。在设 ...
分类：
其他好文 时间：
2016-10-08 20:23:43
阅读次数：
109
本案例是一个小型数据抽取分析类系统，通过抽取数据共享中心中的配网台区（一个台区一个配变）的相关数据进行整合，完成有关台区的50多个字段按照日、月、多月等维度的集中计算展示，其中有17个指标字段需要系统进行自动计算，并于每天对不同部门关注的台区指标进行超标告警 ...
分类：
其他好文 时间：
2016-09-24 01:54:11
阅读次数：
687
第一部分需要三个步骤： 选择输入步骤，“生成记录”，将步骤里设置记录数为1，并设置一个类型为String的字段country（名字随便），这个字段的值应设置为我们要抽取数据的URL，如： 然后，添加一个“HTTP 客户端”步骤，并把这两个步骤连起来。对于“HTTP 客户端”来说，选择“从字段中获取U ...
分类：
Web程序 时间：
2016-09-09 16:47:20
阅读次数：
3216
结果画出的图如上面所示。 主要步骤为： 第一：从原始数据中随机性的抽取数据，然后进行数据探索分析数据，数据探索分析包括： 1.数据清洗 2.缺失值处理 3.数据变换 第二：建模样本数据 1.模型训练 2.模型评价 第三：预处理后诊断数据 第四：自动诊断 第五：根据诊断结果进行模型的优化与重构 最后， ...
分类：
其他好文 时间：
2016-09-08 12:46:50
阅读次数：
261
一、ETL操作 抽取数据 日志格式： 分割符号：^A IP地址 服务器时间 二、Java工程 1. 创建项目 copy代码及配置文件 2. 改配置 core-site.xml hbase-site.xml 3. 代码描述 common包：常量(字段常量) dimension包：自定义key valu ...
分类：
其他好文 时间：
2016-09-04 11:28:20
阅读次数：
128
awkawk是一种程序语言，对文档资料的处理具有很强的功能。awk擅长从格式化报文或从一个大的文本文件中抽取数据。awk的命令格式为：awk [-F filed-separator] “commands” input-file(s) awk将一行文字按分隔符（filed-separator）分为多个 ...
分类：
系统相关 时间：
2016-08-12 21:41:23
阅读次数：
1204
对于大数据机器数据处理应当是这样一种逻辑，数据获取过来，我们根据数据来源对数据做分组管理、应用模型构建，构建好之后根据需要抽取数据重要字段，抽取字段时我们可根据现有的经验对数据一种预警处理，字段抽取之后对数据进行索引，构建查询服务。构建定时任务之后去分析这些数据的规律性，总结一些事件发生的规律为生产... ...
分类：
其他好文 时间：
2016-08-04 13:27:20
阅读次数：
180
在查询分析器中执行：select rand()，可以看到结果会是类似于这样的随机小数：0.36361513486289558，像这样的小数在实际应用中用得不多，一般要取随机数都会取随机整数。那就看下面的两种随机取整数的方法：1、A：select floor(rand()*N) 生成的数是这样的：12 ...
分类：
数据库 时间：
2016-07-31 11:35:14
阅读次数：
204
