大数据作为Tech Insight热点内容,12月19日上午北京场再一次惊爆会场,前后两个门口都挤满了用户,150人的场子,却挤了300多人,大多数用户边掂着脚认真听讲,还边录音。

 

一个参加完大数据场的用户在Tech Insight结束后到前台来给工作人员说到,Tech Insight特别棒,没有听过瘾,明天还有就好了。他还说到,Tech Insight论坛讲的内容都是其它企业的实际应用场景,听起来就像是我们自己公司的业务搭建中的场景再现一样,非常实用。我们来看看阿里巴巴是如何对海量数据进行整合和价值发掘的,同时这对其他企业也具有很好的借鉴意义。

阿里巴巴大数据建设经历了不断理念革新和实战、不断量变和质变的过程,其中,2014.04-2015.11的阿里集团数据公共层建设和2016.09开启的阿里巴巴大数据能力赋能社会是阿里巴巴在大数据领域的两次关键质变,第一次质变确定了阿里巴巴数据中台业务模式,第二次质变确定了阿里巴巴数据赋能社会的战略。

 

一、那么阿里巴巴是怎么通过数据中台业务模式来进行阿里内部数据建设的?

企业的发展,往往伴随着业务更多元化,而与此同时企业在积极推进业务数据化,因此越来越多的企业伴随着各个垂直业务的发展,形成了一个个垂直的数据中心,如何打通这些数据并且以统一的标准进行建设,以达到技术降本、应用提效、业务赋能的目标,是众多企业面临的问题。

阿里巴巴提出的数据中台模式正是为解决这些问题而生,并通过实践形成了统一全域数据体系,实现了计算存储累计过亿的成本降低、响应业务效率多倍提升、为业务快速创新提供坚实保障。

全域数据采集与引入:以需求为驱动,以数据多样性的全域思想为指导,采集与引入全业务、多终端、多形态的数据;

标准规范数据架构与研发:统一基础层、公共中间层、百花齐放应用层的数据分层架构模式,通过数据指标结构化规范化的方式实现指标口径统一;

连接与深度萃取数据价值:形成以业务核心对象为中心的连接和标签体系,深度萃取数据价值;

统一数据资产管理:构建元数据中心,通过资产分析、应用、优化、运营四方面对看清数据资产、降低数据管理成本、追踪数据价值。

统一主题式服务:通过构建服务元数据中心和数据服务查询引擎,面向业务统一数据出口与数据查询逻辑,屏蔽多数据源与多物理表;

极大的丰富和完善了阿里巴巴大数据中心,OneData、OneID、OneService渐趋成熟并成为上至CEO、下至一线员工共识的方法论体系。

二、是否在阿里生态之外,这套在阿里巴巴生态内实战过的数据中台模式可以推而广之、赋能全社会呢?

这就为大数据能力赋能阿里生态内外的社会思考开始酝酿并悄然拉起帷幕!未来,阿里巴巴还将全力以赴的分享自己的大数据观和基于阿里巴巴大数据观的数据中台业务模式。

赋能业务并闭环迭代:数据中台的建设的最终目标还是赋能业务,但在赋能业务的过程中,反馈数据和新数据需要源源不断地从业务前台回流到数据中台,形成闭环且可不端迭代。

企业建设数据中台建设有三个必要条件,战略决心、人才投入和工具保障。数据中台模式的建设不是一个运动,也不是一个一次性的项目,而是需要不断投入迭代的过程,并且可能会驱动企业的组织和流程进化,因此需要企业的决策层从战略上认同和下决心。数据中台的构建需要大数据人才,并通过一套完善的大数据工具来支撑建设。而人才方面可以通过借鉴成熟的方法论+外部服务商的引入+好的大数据工具来降低依赖。阿里的智能数据引擎Dataphin,结合数据中台实践沉淀的方法论和建模化的自动代码生成等技术能力和功能,可以高效、高质助力企业从各垂直业务的数据到统一全域数据的转变,建设自有的数据中台。

一个企业的大数据架构体系的成熟度将很大程度决定了企业大数据团队资源的长期投入是否能聚焦在业务问题一般企业只有50%资源投入在业务问题解决,另外50%资源投入在应对源业务系统的突发变更,应对数据架构和模型体系的调整与优化。解决此问题需要从三方面着手:

第一:构建一个统一的研发工作平台,让大数据的模型设计与实现一体化协同;

第二:采用系统化的方法替代工程师设计,实现物理模型和物理运行代码的自动化生产,让架构调整与优化在系统层面自动完成;

第三:构建一个以逻辑模型为中心的数据架构体系,既可以简化数据访问的复杂度,有可以屏蔽数据源变更的影响范围。数据引擎Dataphin从这三方面解决大型企业数据架构问题,帮助企业构建全域数据构建体系,实现企业大数据资源能力要求简化,实现企业大数据资源更加聚焦在利用大数据实现业务价值问题,来帮助大型企业实现数字化转型。

如何打通这些数据并以统一的标准进行建设,以达到技术降本、应用提效、业务赋能的目标,将会成为众多企业面临的问题,而数据中台模式正是为解决该问题而生。全域数据采集与引入、标准规范数据架构与研发、连接与深度萃取数据价值、统一数据资产管理、统一主题式服务、赋能业务并闭环迭代,是数据中台建设的核心六个方面。对于数据中台建设有三个必要条件,战略决心、人才投入和工具保障,借力阿里的智能数据引擎Dataphin,通过其结合数据中台实践沉淀的方法论和自动化代码生成等技术能力,可极好地解决人才和工具两方面的问题。

数据中台-阿里巴巴的数据整合、价值发掘、社会赋能之道相关推荐

  1. 细数数据中台的3个业务价值和5个技术价值

    导读:数据中台有什么用?本文带你细数它的业务价值与技术价值. 作者:付登坡 江敏 任寅姿 孙少忆 等 来源:大数据DT(ID:hzdashuju) 01 业务价值:从洞察走向赋能业务创新,形成核心壁垒 ...

  2. 数据中台01:数据中台的发展:什么是中台、什么是数据中台

    一.什么是中台 中台是2019年开始火起来的一个概念,它最早是由阿里在2015年提出的"大中台,小前台"战略中延伸出来的概念,灵感来源于一家芬兰的小公司Supercell--一家仅 ...

  3. 数据中台即服务——数据中台的四大支柱

    作者丨石秀峰 全文共4416个字,建议阅读10分钟 中台概念,2015年诞生,2019年爆火,在最火的时候被很多人当成了"无所不能"的"万能药",只要是IT的问 ...

  4. 《数据中台:让数据用起来》读书笔记

    本篇博客是通过阅读<数据中台:让数据用起来>,结合现在自己正在一个数据中台还没成体系化的公司中的一些工作经历写的一些笔记和个人感想.一直很喜欢数据产品经理这个岗位,也希望有一天能够真正理解 ...

  5. 八问数据中台:关于数据中台你想知道的都在这里!

    八问数据中台:关于数据中台你想知道的都在这里! 原创: 筱愚她爸 凯哥讲故事系列 1周前 数据中台最近特别火,各个企业都在关注如何构建自己的数据中台,利用数据中台打造数据驱动的经营能力.数据中台的概念 ...

  6. 个人理解数据中台与大数据平台区别

    个人理解数据中台与大数据平台区别 概念介绍 本文主要介绍如下几个数据概念: 数据库 数据库是"按照数据结构来组织.存储和管理数据的仓库".是一个长期存储在计算机内的.有组织的.有共 ...

  7. 数据中台精华问答 | 数据中台和传统数仓的区别是什么?

    中台系统把业务层同性的算法能力,服务能力,业务能力高度集成,有效组织 ,动态规划.更好的帮助上层业务. 今天就让我们看看关于数据中台的问答吧. 1 Q : 什么是数据中台? A : 数据中台是指通过数 ...

  8. 大咖分享 | 甘云锋:解码数据中台,打造数据价值与能力共享中心

    导语 数字化浪潮正以一种大势所趋的姿态汹涌而来.面对如此澎湃之伟力,产业数字化的转型之路正面临哪些痛点,又迎来何种机遇?怎样构建可持续发展的技术构架体系以激活数据要素的潜能? 日前,数澜科技创始人.董 ...

  9. 【数据中台】关于数据中台系统,需要了解哪些技术?

    来源:产业智能官 国家建材大数据研究中心 今天让我们全面解读中台,包括企业为什么要平台化,目前中台都有哪些形式,实施中台系统的优势.面临的问题以及建议都有哪些? 中台这个概念早期是由美军的作战体系演化 ...

最新文章

  1. DPDK — TestPMD
  2. 机器学习之梯度下降法
  3. shell 中scp 和 ssh密码输入 --expect (转:http://blog.sina.com.cn/s/blog_8ad7d4ca01014lft.html)
  4. ASP.NET 开源导入导出库Magicodes.IE 导出Pdf教程
  5. 什么是REST API?
  6. Matlab中出现“无法打开电子表格,MATLAB报告了以下错误;错误:服务器出现意外情况”
  7. 2017.2.19 loli测试
  8. 鸿蒙个人用户怎么申请,鸿蒙OS来了,这些机型的用户可以申请
  9. PAT甲级1012 (结构体,排序)
  10. StringJoiner 拯救那些性能低下的字符串拼装代码(转)
  11. facade层,service 层,domain层,dao 层设计
  12. orcad导出BOM
  13. 成都理工计算机考研很难吗,成都理工大学考研难吗?一般要什么水平才可以进入?...
  14. windows使用DD刻录工具刻录U盘
  15. 用 JS 给图片加文字水印或图片水印
  16. 【服务器风扇静音】确定风扇线序定义的通用方法——以IBM SystemX 3630 M4为例
  17. python中空格怎么打_191012 python3关于空格打印、赋值、+=符号的小坑
  18. promise .then和async await的使用
  19. 查询省会python
  20. 集团企业邮箱申请哪家的好,怎么选择?

热门文章

  1. 使用C/C++发展Web系统开源
  2. [Beta]第五次 Scrum Meeting
  3. 运维工作钱少、事多而且杂?年轻人,你这个思想很危险吶
  4. Oracle备份恢复一(手动备份)
  5. iOS自动布局框架-Masonry详解
  6. NumPy之array
  7. 网络和大数据成为重要文化生产力
  8. JqueryQrcode生成二维码不支持中文的解决办法
  9. JDK1.6.0下载安装与环境配置
  10. 用jstl截取字符串