ETL，Extraction-Transformation-Loading的缩写，中文名称为数据抽取、转换和加载。大多数据仓库的数据架构可以概括为：数据源-->ODS(操作型数据存储)-->DW-->DM(data mart)ETL贯穿其各个环节。?一、数据抽取： 可以理解为是把源数据的数据抽取到O...
分类：
其他好文 时间：
2015-07-08 00:13:54
阅读次数：
222
大数据架构hadoop摘要：Admaster数据挖掘总监 随着互联网、移动互联网和物联网的发展，谁也无法否认，我们已经切实地迎来了一个海量数据的时代，数据调查公司IDC预计2011年的数据总量将达到1.8万亿GB，对这些海量数据的分析已经成为一个非常重要且紧迫的需求。随着互联网、移动互联网和物联网的...
分类：
其他好文 时间：
2015-06-15 12:38:41
阅读次数：
176
因软件在一直不停的更新迭代，导致的数据库同步问题就来了，于是开始浏览网页找解决方案，不经意间从msdn上发现原来VS2010就有此功能：1、打开VS，数据-架构比较-新建架构比较：2、选择已保存过的数据库连接或者新建连接，左边的是源架构，右边的是要比较的目标架构：（还可以对数据库文件的架构进行比较，...
分类：
数据库 时间：
2015-06-06 13:21:46
阅读次数：
217
随着AOP研究的深入，我们发现，核心概念变得极其重要，这些概念就是一幅图，指引我们在优化之路上越走越远！...
分类：
编程语言 时间：
2015-05-31 15:24:05
阅读次数：
200
提到大数据分析平台，不得不说Hadoop系统，Hadoop到现在也超过10年的历史了，很多东西发生了变化，版本也从0.x进化到目前的2.6版本。我把2012年后定义成后Hadoop平台时代，这不是说不用Hadoop，而是像NoSQL （Not Only SQL）那样，有其他的选型补充。我在知乎上也写过Hadoop的一些入门文章 如何学习Hadoop –
董飞的回答，为了给大家有个铺垫，简单讲一...
分类：
其他好文 时间：
2015-05-18 11:02:19
阅读次数：
182
ReportViewer是微软的报表控件，其设计文件为RDLC，数据架构为数据集。效果图如下：
其中序号调用的是内置函数，姓名、收入、所属部门绑定的是数据源，头像绑定的是URL指向的外部图片。下面是实现过程。
一.新增数据集
1.在创建Web空项目后，在项目上右键->添加->新建项->数据->选择数据集，见下图
2.将数据集命名为DataSet1_DataTable1
3...
分类：
Web程序 时间：
2015-05-08 10:58:34
阅读次数：
172
通过VS2010进行服务器数据库和本地数据库比较架构(都是sql server 2008 R2)时，弹出“text lines should be not null”错误，如下图：解决方法：在Visual Studio 2010安装包/或者镜像中找到下面三个文件,重新安装即可，如下图：
分类：
其他好文 时间：
2015-04-23 13:13:29
阅读次数：
112
题目大意给出一些任务开始的时间，结束的时间，和优先级。问在第k秒时的第k大优先级，和前k小优先级的和。思路CQOI太良心，所有题都是512M。
这个题只需要按照时间轴弄一个可持久化线段树就行了，每个时间点对应着一个权值线段树，维护子节点的和和个数。
注意在没有操作的时候，当前时间点的线段树要复制上一个时间点的线段树。CODE#define _CRT_SECURE_NO_WARNINGS#incl...
分类：
其他好文 时间：
2015-04-09 13:45:34
阅读次数：
203
注：本文中提到的ochadoop 不要感到奇怪，是亚信公司内部自己合成的一个包，把所有的组件都放在一个包内了，免去了组件的下载过程和解决兼容问题，其实也可以自己下载的，不要受到影响。
另，转载请注明出处，谢谢
修改静态IP和hostname
在 /etc/sysconfig/network-scripts/ifcfg-eth0
配置IPADDR
地址
运行以下命...
分类：
其他好文 时间：
2015-03-15 09:27:51
阅读次数：
310
信息架构： 成本与架构度量 大数据对信息架构的影响 大数据架构： Oracle的大数据架构逻辑视图： 大数据开发流程 大数据的角色与功能 数据治理 案例：保险 大数据关联与分析 关联与分析 概念视图 数据流 希望您对大数据平台有帮助。 企业应用之性能实时度量系统演变 云计算参考架构几例 智能移动导游...
分类：
其他好文 时间：
2015-02-20 11:57:15
阅读次数：
473
