随着数据爆发式的增长,数据之间的关系也变得越发复杂,如何厘清数据在具备数据存储和处理能力的基础设施中从一个系统流转至另一个系统,对于很多企业而言是一个艰难的问题。

数据血缘是解决广泛的数据驱动型业务需求的关键。大多数组织中,数据血缘的第一个业务场景就是监管合规。为响应监管机构日益频繁的法规要求,在各种法规中实现精细透明化,企业要想应对所有包括巴塞尔协议、新资本协议、IFRS9、CCAR(美国)等国际上的以及我国监管机构提出的合规要求,不仅需要提供报告,还应通过显示这些报告中的关键指标的计算方式来证明其准确性。

一、数据沿袭是数据血缘关系的直观体现  

拥有端到端的数据血缘视图正在成为支持所有数据驱动的业务计划的关键基础要求。它不仅能帮助企业展现数据的来源、跟踪其在组织系统中的历程,还能展现其在此过程中的变化,揭示分析中任意不一致或不准确之处,驱使企业主动识别和修复所需数据中的差距,轻松地响应合规性审计和报告查询。

众所周知,跟踪数据源是一项艰巨的任务。在软信天成以往的案例中,实施数据沿袭能帮助企业将不同的数据对象和数据流与数据地图进行连接并可视化,实现:

  • 丰富的资源类型

  • 丰富的路线或路径识别

  • 丰富的转换识别

在用户查看元数据对象的数据血缘图谱期间,可任意提取“任务、转换、数据结构、字段、商业条款、报告”等在内的源存储库对象的数据沿袭:

  • 任务:表示在数据结构之间移动数据的转换。

  • 转换:确定数据如何在单个存储库中的数据结构之间流动。转换可以是可重用的或不可重用的。如果多个任务使用转换,则转换是可重用的。转换包括各类映射和数据库视图。

  • 数据结构:包含包含数据的字段。数据结构包括目标定义以及源限定符转换、数据库表和视图。

  • 字段:数据结构的组成部分。字段包含或表示数据。数据库列包含数据。数据库视图列表示包含在数据库表列中的数据。字段包括数据库表和视图的列、转换端口以及商业智能报告中的矩阵和属性。

(1)支持存储过程的深度血缘关系可视化

数据沿袭(Data Lineage)对于法规遵从性、根本原因分析、影响分析、数据迁移到云以及建立对数据的信任至关重要,前三个用例需要将代码分解成可理解的块。针对大块SQL代码,可将其分解为多个数据沿袭子图,以便进行更深入的分析,实现:

  • 高级沿袭可视化,将SQL语句分解为单个转换

  • 允许用户分析存储过程

  • 列映射报告,包括转换表达式

(2)全面:从复杂数据源中提取深层元数据和沿袭

一般来说,复杂的企业数据环境里获得对数据沿袭端到端可见性是一项挑战,尤其是包含数百个可能来自本地数据库、数据仓库和数据湖及大型机系统、SaaS应用程序和多云环境的数百个数据源。全面的数据沿袭,需要从广泛而复杂的企业系统中提取最细粒度元数据。

(3)准确:基于可信数据的数据血缘图谱

数据血缘关系图谱显示数据流的可视化表示以及有关数据流中涉及的对象的信息,支持从不同类型的代码(ETL作业、SQL脚本和存储过程)自动派生,以了解数据在每个步骤中是如何转换的,可提供在不同的级别,从业务和逻辑视图到详情字段级视图,清楚展现转换逻辑。期间支持元数据源的所有者参与验证数据沿袭,确保数据血缘图谱的及时性、准确性和相关性。

二、善用数据血缘加速企业数字化转型   

数据从何而来,又将流向何处?

企业中哪些数据需要管理以符合行业法规?

哪些数据源拥有开发新的客户体验计划所需的个人信息?

这些数据是如何在整个组织中分布的?

……

企业想要轻松回答此类数据问题,只有掌握了完善的数据血缘关系,数据应用的成熟度才会更高,才能更好的释放企业数据资产的商业价值,加速企业数字化转型的进程,推动业务增长,因此,借助数据血缘加速数字化转型进程势在必行!

软信天成:企业如何对数据资产追根溯源?相关推荐

  1. 企业如何做好数据资产的盘点|亿信华辰

    传统意义上的资产盘点是指对资产进行定期清点,以确定各种财产在一定时间的实存数.数据资产盘点则是对企业拥有的数据进行清点,已确定企业当前拥有的数据. 众所周知,数据资产是企业数字化转型的数据底座,企业要 ...

  2. 软信天成:用于数据治理的数据编目都有什么功能?

    众所周知,企业数据治理不再是孤立的功能,业务和 IT 部门需要在管理和利用数据方面协同工作.企业数据目录通过提供全面的数据可视性以及支持业务和IT 部门之间协作的框架,成为有效数据治理计划的要求,最终 ...

  3. 专访爱驰汽车李海军:数据资产是整车企业的核心密码

    "[报名]数据猿年度精彩活动推荐:访谈调研+企业盘点+榜奖峰会,与数据猿共筑2021 大数据产业创新服务媒体 --聚焦数据 · 改变商业 近年来,智能汽车热度不减,各路名企纷纷开启造车之路, ...

  4. 企业关键数据资产如何保护?腾讯安全联合“数据安全推进计划”落地主题沙龙

    4月26日,腾讯安全联合中国信通院"数据安全推进计划"共同在深圳举办了数据安全研讨会,共同探讨新形势下如何让企业关键数据资产更安全.中国信息通信研究院云计算与大数据研究所高级业务主 ...

  5. 一文看懂企业数据资产目录

    精益数据方法强调通过共享.开放.协同的方式,让企业的数据流动起来,共享起来,充分的协作起来,同时将数据治理融入业务场景中,在数据生产的全链路中实施数据治理工作. 为了实现这一个目标,企业需要对应的技术 ...

  6. 企业数据资产管理:数据资产目录应该如何规划

    数字化对现代社会的影响已经从赋能变成了根本上的重构,其所产生的影响最明显的就是数字经济和数字化转型的崛起.数字经济是在世界经济增长减缓的格局下,依旧保持高速增长的新动能,据<全球数字经济白皮书( ...

  7. 企业数据战略中,什么样的数据才能算是真正的数据资产

    后疫情时代,数字化的发展似乎又进行了一次加速,线上化的娱乐工作生活更快速的进行了普及,相当一部分的企业进行了远程工作的尝试,同时很多教学工作也已经被网课所替代.不得不感叹,短短数年的时间里人和社会的改 ...

  8. 企业数据资产盘点与数据标准梳理方法

    大数据在中国的大地上蓬勃发展,带动了许多新的理念的诞生,数据治理就是其中之一,这两年已建立好的数据中心或者正在建的数据中心都在如火如荼的进行,在企业内部,也已经开始由原来的业务部门和IT部门演变出来数 ...

  9. 什么是数据资产?数据资产管理应该如何落地?

    2021年12月,中国南方电网发布了<南方电网数据资产管理体系白皮书>,白皮书指出,数据资产管理,是数据资产价值释放的必经之路. 报告中称,不少企业对于数据如何促进内部的提质增效及外部价值 ...

最新文章

  1. FPGA之道(18)FPGA设计的编译过程
  2. JSON(JavaScript Object Notation)数据在python中的读写
  3. div中移除某个元素 js_[JS基础] 13 - 其他 JS 基础
  4. unslider调用配置选项
  5. 登录系统_执照管理系统登录与执照转换操作指南
  6. python调用c函数传字符串参数_Python使用ctypes模块调用DLL函数之传递数值、指针与字符串参数...
  7. Linux进程之间通信 信号
  8. 【学习笔记】传输层:概述、UDP协议
  9. Eclipse环境下面的配置(转载)
  10. android studio 中怎么写aspectj代码,Android Studio 使用 AspectJ 实践AOP
  11. mysql数据库表格导出为excel表格
  12. chrome 41 空格 nbsp;
  13. mysql登录报错:mysql: error while loading shared libraries: libncurses.so.5: cannot open shared object
  14. 牛客补题 树 dsu on tree
  15. 再见2020,你好2021(2020年度总结)
  16. 矩阵分析L3内积空间
  17. html 调用idm,如何对IDM进行自定义设置
  18. 水热耦合模型SHAW驱动数据说明和运行方法
  19. 关于项目初始化的几个糟心时刻
  20. UE4打包(烘焙)错误 CSC : error CS2012: Cannot open '...BuildGraph.Automation.dll' for writing '...'

热门文章

  1. 水平输送水汽通量matlab,一种气候变化情景下水汽通量的数据处理方法及装置与流程...
  2. java自动编号_java实现自动编号系统(类似于word中自动编号)
  3. 鸿蒙系统平板版本,华为平板首发鸿蒙系统,Matepad Pro2 跑分首曝
  4. 利用编辑器怎么将图纸指定部分进行放大?
  5. 吴导的剑雨其实是一部考证的电影
  6. Scrapy 爬取80s电影网高评分电影详细信息(Scrapy)
  7. 通过编写程序工具提取.pal调色板文件为Rgb/Yuv分量数据的文本保存(同时适用于Win7-24位深度的位图和Win10-32位深度的位图)
  8. Zabbix搭建部署与概述(一)
  9. 逆向工程实验_pre1(密码学算法破解)
  10. 无穷小微积分不减反增,何故?