码迷,mamicode.com
首页 > 其他好文 > 详细

[数据仓库]数仓概念合集

时间:2021-01-13 11:15:23      阅读:0      评论:0      收藏:0      [点我收藏+]

标签:druid   ruid   cat   enter   service   res   lan   postgre   redis   

数仓分层

虽然作为数据分析或者商业分析师并不需要去做数据仓库,但在企业实际工作中,或多或少,还是需要接触或对接数仓部门,如提出需求、了解相关表的字段含义等,所以今天我们就简单说下数据分析师需要了解的 数据仓库基础知识。

技术图片 技术图片

ODS层 / 贴源层

DW层(Data Warehouse)

数据明细层:DWD(Data Warehouse Detail)

数据中间层:DWM(Data WareHouse Middle)

数据服务层:DWS(Data WareHouse Service)

数据应用层:ADS(Application Data Store)

在这里,主要是提供给数据产品和数据分析使用的数据,一般会存放在 ES、PostgreSql、Redis等系统中供线上系统使用,也可能会存在 Hive 或者 Druid 中供数据分析和数据挖掘使用。比如我们经常说的报表数据,一般就放在这里。

数仓技术

ETL / Kettle

事实(数据)表 / 明细(数据)表 / 维度(数据)表 / 指标表

维度退化

X 参考文献

[数据仓库]数仓概念合集

标签:druid   ruid   cat   enter   service   res   lan   postgre   redis   

原文地址:https://www.cnblogs.com/johnnyzen/p/14265098.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!