第8章大数据领域建模综述

一、典型的数据仓库建模方法论

1、ER模型
特点：需要全面了解企业业务和数据、实施周期非常长、对建模人员的能力要求非常高。
2、维度模型
步骤：选择需要进行分析决策的业务过程、选择粒度、识别维表、选择事实（确定分析需要衡量的指标）
3、Data Vault模型
Data Vault模型由以下几部分组成：
Hub：是企业的核心业务实体，由实体key、数据仓库序列代理键、装载时间、数据来源组成；
Link：代表Hub之间的关系。这里与ER模型最大的区别是将关系作为一个独立的单元抽象，可以提升模型的扩展性。它由Hub的代理键、装载时间、数据来源组成；
Satellite：是Hub的详细描述内容，一个Hub可以有多个Satellite。它由Hub的代理键、装载时间、来源类型、详细的Hub描述信息组成。
Data Vault模型比ER模型更容易设计和产出，它的ETL加工可实现配置化。

大数据之路：阿里巴巴大数据实践（数据模型篇）相关推荐

读《大数据之路-阿里巴巴大数据实践》数据模型篇笔记
读<大数据之路-阿里巴巴大数据实践>数据模型篇七建模综述 OLTP 面向数据随机读写 3NF OLAP 批量读写不关注一致性更关心数据整合 ER模型–衍生出dataVault 维度 ...
大数据之路阿里巴巴大数据实践读书笔记
一 .总述人类正在从IT时代走向DT时代.现在的数据呈爆炸式增长,其潜在的巨大价值有待发掘.但是如果不对数据进行有序.有结构的分类组织和存储,它将变成一场灾难. 在阿里内部,数据的存储达到EB级别. ...
《大数据之路-阿里巴巴大数据实践》读书笔记
ps:这本书主讲阿里的大数据体系架构方案,从底层到高层阐述,目前对我来说此书的难度较大,不是很懂,大部分为对原书的引用归纳,我会给出相应的大牛的关于此书的读书笔记的传送门供参考.以下为大牛关于本书的读 ...
大数据之路——阿里巴巴大数据实践：总述
阿里巴巴大数据系统架构图: Aplus.JS是web端日志采集技术 UserTask是APP端日志采集技术 TimeTunel(TT)是一个实时消息处理平台,类似于kafka+storm DataX是 ...
《大数据之路阿里巴巴大数据实践》笔记
此书下载传送门http://www.java1234.com/a/javabook/yun/2018/0308/10578.html 第1章总述阿里巴巴大数据系统体系主要分为,数据采集.数据计算. ...
《大数据之路-阿里巴巴大数据实践》第一章总述
中国大数据明星企业——阿里巴巴的“数据攻防战”
From: http://www.36dsj.com/archives/4130 平台型企业的大数据应用策略有何特点?阿里巴巴.百度.腾讯等一批平台型企业,汇集了海量用户和商家,聚集成富有张力的生态系 ...
数据之路 - Python爬虫 - 数据存储
一.文件存储 1.文件打开方式文件打开方式说明 r 以只读方式打开文件.文件的指针将会放在文件的开头.这是默认模式 rb 以二进制只读方式打开一个文件.文件指针将会放在文件的开头 r+ 以读写方式 ...
大数据:技术与应用实践指南_大数据技术与应用社团社会实践总结篇
不知不觉,我们已经在家里呆了七个月了也不知道宿舍还好吗小伙伴们有没有在家好好学习在这个漫长的假期里,我们热爱学习的大数据技术与应用社团举办了为期七天的社会实践活动. 本次实践活动主要内容为网页设 ...
大数据之路之平台数据开发规范
一数据开发规范命名标准这个命名包含了表命名,项目命名,作业命名等,拿表名来说,一般都是按系统来为首,业务做次之,接着是表名,最后还加上一些备注信息,demo是系统_业务_表名_备注,比如来自外 ...

大数据之路：阿里巴巴大数据实践（数据模型篇）

第8章大数据领域建模综述

一、典型的数据仓库建模方法论

大数据之路：阿里巴巴大数据实践（数据模型篇）相关推荐

最新文章

热门文章

大数据之路：阿里巴巴大数据实践（数据模型篇）

第8章 大数据领域建模综述

一、典型的数据仓库建模方法论

大数据之路：阿里巴巴大数据实践（数据模型篇）相关推荐

最新文章

热门文章

第8章大数据领域建模综述