全局宏观认识数据仓库分层
数据仓库分层我们大概知道有哪些层,比如ODS、DWD等,可是还有DW层,DM层,他们之间是什么关系,可参考下面内容和图示。
数据仓库一般分为ODS层、DWD和DWS层、应用层。
ODS层:数据仓库源头系统的数据表通常会原封不动地存储一份,这成为ODS(Operation Data Store)层。它们是后续数据仓库层加工数据的来源,同时也存储着历史的增量数据或全量数据。
DWD和DWS层:数据仓库明细层(Data Warehouse Detail, DWD)和数据仓库汇总层(Data Warehouse Summery, DWS)是数据平台的主体内容,这两个层的数据是ODS层数据经过ETL清洗、转换、加载生成的。
应用层(ADS):应用层主要是各个业务方或者部门基于DWD和DWS建立的数据集市(Data Market, DM),一般来说应用层的数据来源于DW层,而且相对于DW层,应用层只包含部门或者业务方面自己关心的明细层和汇总层的数据。
数据仓库逻辑分层架构如下图所示:
页:
[1]