知识点 | 数据仓库中的 ods ,dw,dm分别是个啥？

先看一下数据中心的整体架构以及数据流向：

DB 是现有的数据来源，可以为mysql、SQLserver、Oracle、Mongodb、PostgreSQL、文件日志等，为数据仓库提供数据来源的一般存在于现有的业务系统之中。
ETL的是 Extract-Transform-Load 的缩写，用来描述将数据从来源迁移到目标的几个过程：

Extract，数据抽取：把数据从数据源读出来。
Transform，数据转换：把原始数据转换成期望的格式和维度。
如果用在数据仓库的场景下，Transform也包含数据清洗，清洗掉噪音数据。
Load 数据加载：把处理后的数据加载到目标处，比如数据仓库。
ODS(Operational Data Store) 操作性数据：是作为数据库到数据仓库的一种过渡，ODS的数据结构一般与数据来源保持一致，便于减少ETL的工作复杂性，而且ODS的数据周期一般比较短；ODS的数据最终流入DW
DW (Data Warehouse)数据仓库，是数据的归宿，这里保持这所有的从ODS到来的数据，并长期报错，而且这些数据不会被修改。
DM(Data Mart) 数据集市：为了特定的应用目的或应用范围，从数据仓库中独立出来的一部分数据，也可称为主题数据，面向应用。

【参考链接】
链接：https://www.jianshu.com/p/3e1386d6052e

文章结束

以下为个人公众号，欢迎扫码关注：

知识点 | 数据仓库中的 ods ,dw,dm分别是个啥？相关推荐

数据仓库中的 ods ,dw,dm分别表示什么？
版主整理的很详细,容易理解.查看原文,请点击这里 ODS--操作性数据 DW--数据仓库 DM--数据集市 1.数据中心整体架构数据中心整体架构数据仓库的整理架构,各个系统的元数据通过ETL同步到 ...
数据仓库分层ODS DW DM 主题标签
数据仓库知识之ODS/DW/DM - xingchaojun的专栏 - CSDN博客数据仓库为什么要分层 - 晨柳溪 - 博客园数据仓库的架构与设计 - Trigl的博客 - CSDN博客数据仓 ...
数据仓库中的ODS、EDW、DM等分层是什么？
参考:数据仓库中的ODS.EDW.和DM层是什么?(系列3) (pmcaff.com) 数据仓库各层说明: 一.数据加载层:ETL(Extract-Transform-Load) 二.数据运营层:OD ...
数据分层/ODS/DW/DM
数据分层/ODS/DW/DM 数据分层数据分层的目的 ODS层 (Operational Data Store 又称数据运营层) DW层(data warehouse 数据仓库) DM层 (data ...
数据仓库ods层是啥意思_数据仓库中的ODS、EDW、和DM层是什么？（系列3）
在第一节内容,提到了数据仓库和数据库的区别,数据仓库作主要面向分析场景的数据库,又进行了"分层"的设计,因此出现了ods层.edw.dm层的设计(也有的公司会使用超过3层的设计模式 ...
ods,dw,dm理解
ods,dw,dm解释与理解 ods:操作性数据仓库ods的应用场景 1.在业务系统和数据仓库之间形成一个隔离,ods直接存放从业务系统抽取过来的数据,这些数据从结构和数据上与业务系统保持一致,降低了 ...
对数据仓库ODS DW DM的理解
今天看了一些专业的解释,还是对ODS.DW和DM认识不深刻,下班后花时间分别查了查它们的概念. ODS--操作性数据 DW--数据仓库 DM--数据集市 1.数据中心整体架构数据中心整体架构数据仓 ...
数据仓库DW、ODS、DM及其区别
一.基本概念 DW 数据仓库(Data Warehouse):是一个面向主题的(Subject Oriented).集成的(Integrated).相对稳定的(Non-Volatile).反映历史变化 ...
数据仓库DW、ODS、DM概念及其区别
数据仓库DW.ODS.DM概念及其区别一.整体结构在具体分析数据仓库之前先看下一下数据中心的整体架构以及数据流向数据中心整体架构 DB 是现有的数据来源(也称各个系统的元数据),可以为mysql ...

知识点 | 数据仓库中的 ods ,dw,dm分别是个啥？

知识点 | 数据仓库中的 ods ,dw,dm分别是个啥？相关推荐

最新文章

热门文章