[数据仓库]数仓概念合集

标签:druid   ruid   cat   enter   service   res   lan   postgre   redis   

数仓分层

虽然作为数据分析或者商业分析师并不需要去做数据仓库,但在企业实际工作中,或多或少,还是需要接触或对接数仓部门,如提出需求、了解相关表的字段含义等,所以今天我们就简单说下数据分析师需要了解的 数据仓库基础知识。


技术图片
技术图片

ODS层 / 贴源层

DW层(Data Warehouse)

数据明细层:DWD(Data Warehouse Detail)

数据中间层:DWM(Data WareHouse Middle)

数据服务层:DWS(Data WareHouse Service)

数据应用层:ADS(Application Data Store)

在这里,主要是提供给数据产品和数据分析使用的数据,一般会存放在 ES、PostgreSql、Redis等系统中供线上系统使用,也可能会存在 Hive 或者 Druid 中供数据分析和数据挖掘使用。比如我们经常说的报表数据,一般就放在这里。

数仓技术

ETL / Kettle

事实(数据)表 / 明细(数据)表 / 维度(数据)表 / 指标表

维度退化

X 参考文献

  • 数据分析师面试相关:数据仓库相关 - Zhihu

[数据仓库]数仓概念合集

标签:druid   ruid   cat   enter   service   res   lan   postgre   redis   

原文地址:https://www.cnblogs.com/johnnyzen/p/14265098.html

版权声明:完美者 发表于 2021-01-13 11:15:23。
转载请注明:[数据仓库]数仓概念合集 | 完美导航

暂无评论

暂无评论...