码迷,mamicode.com
首页 > 其他好文 > 详细

数据仓库层级

时间:2019-05-24 17:22:15      阅读:863      评论:0      收藏:0      [点我收藏+]

标签:数据仓库   处理   获取   code   指标   mic   alt   http   汇总   

从数据的获取到数据提供到最终的应用方,数据仓库中,我们将其分为源数据层、操作数据层、数仓公共层、集市层四个层次。
技术图片
1.数据采集到后会根据数据本身特性分别进入stage和ods,stage区的数据处理过后也会存入ods中,对后面的服务统一由ods提供;
2.数仓公共层的数据统一来自于ods,其自身总共包含明细层(DWD)和汇总层(DWS),汇总层的数据又分为轻度汇总数据(DWB)和重度汇总数据(DWS);
3.数据集市层(DM)的数据主要用来为业务需求提供服务,其包含应用产品所需数据、需求报表、指标等,同时该层还可为业务部门创建专用数据库以及数据探索库。
下面分别将数仓中的ods层、dwd层、dws层、dm层分开展示:
ods层建设:
技术图片
dwd层建设:
技术图片
dws层建设:
技术图片
dm层建设:
技术图片

数据仓库层级

标签:数据仓库   处理   获取   code   指标   mic   alt   http   汇总   

原文地址:https://blog.51cto.com/abezoo/2399546

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!