数据仓库层级

Posted

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了数据仓库层级相关的知识,希望对你有一定的参考价值。

从数据的获取到数据提供到最终的应用方,数据仓库中,我们将其分为源数据层、操作数据层、数仓公共层、集市层四个层次。
技术图片
1.数据采集到后会根据数据本身特性分别进入stage和ods,stage区的数据处理过后也会存入ods中,对后面的服务统一由ods提供;
2.数仓公共层的数据统一来自于ods,其自身总共包含明细层(DWD)和汇总层(DWS),汇总层的数据又分为轻度汇总数据(DWB)和重度汇总数据(DWS);
3.数据集市层(DM)的数据主要用来为业务需求提供服务,其包含应用产品所需数据、需求报表、指标等,同时该层还可为业务部门创建专用数据库以及数据探索库。
下面分别将数仓中的ods层、dwd层、dws层、dm层分开展示:
ods层建设:
技术图片
dwd层建设:
技术图片
dws层建设:
技术图片
dm层建设:
技术图片

以上是关于数据仓库层级的主要内容,如果未能解决你的问题,请参考以下文章

七数据仓库元数据管理

数据仓库之创作者分层模型服务构建

数据仓库系列之元数据管理

元数据数据仓库

元数据数据仓库

数据仓库系列之元数据管理系统