Apache Atlas血缘依赖管理

2024-05-12 15:41:47

1、创建三张表

CREATE TABLE IF NOT EXISTS billdb.user_name(user_code STRING comment ‘客户代码’,
user_name STRING comment ‘客户名称’
);

CREATE TABLE IF NOT EXISTS billdb.user_age(user_code STRING comment ‘客户代码’,
user_age STRING comment ‘客户年龄’
);

CREATE TABLE IF NOT EXISTS billdb.user_info(
user_code STRING comment ‘客户代码’,
user_name STRING comment ‘客户名称’,
user_age STRING comment ‘客户年龄’
);

insert into table billdb.user_name values(“9999”,“升姐”);

insert into table billdb.user_age values(“9999”,“58”);

2、执行Insert语句写入数据

insert into table billdb.user_info
select t1.user_code,t1.user_name,t2.user_age from billdb.user_name t1 left join billdb.user_age t2 on t1.user_code = t2.user_code;

3、元数据管理

4、 Atlas血缘关系图

表血缘管理图：

字段血缘关系图：

Apache Atlas血缘依赖管理相关推荐

Apache Atlas 是什么？
前言本文隶属于专栏<大数据技术体系>,该专栏为笔者原创,引用请注明来源,不足和错误之处请在评论区帮忙指出,谢谢! 本专栏目录结构和参考文献请见大数据技术体系 WHAT Apache At ...
Apache Atlas 安装及入门
介绍 Apache Atlas 用来管理hive元数据安装 # 解压更名 tar xvfz apache-atlas-1.0.0-sources.tar.gz cd apache-atlas-sou ...
18.play依赖管理
18.依赖管理 Play的依赖管理系统允许你通过一个单独的dependencies.yml 文件来描述你的应用程序所采用的扩展依赖. Play应用程序可以有三种类型的依赖: Play框架自身,这是因为 ...
Apache Atlas精讲：由浅入深，从概念，原理，使用，到自定义数据模型，生成血缘关系，带你玩转Atlas
文章目录引言 Atlas 原理及相关概念 Altas 使用 Atlas Rest Api 详解及示例结语引言 Apache Atlas 是托管于 Apache 旗下的一款元数据管理和治理的产品, ...
用Apache Ivy实现项目里的依赖管理
Apache Ivy是一个管理项目依赖的工具. 它与Maven Apache Maven 构建管理和项目管理工具已经吸引了 Java 开发人员的注意.Maven 引入了 JAR 文件公共存储库的概念 ...
Apache Atlas管理Hive元数据
部署好Atlas服务后,重点是对Atlas的使用,这里对Atlas管理Hive元数据做简单总结. Hive元数据导入全量导入 bash /usr/hdp/2.6.4.0-91/atlas/hook- ...
Apache Atlas 数据治理-血缘关系工具
前言: 部门业务数据治理中字段血缘关系的实现,平台使用了工具Apache Atlas,简单查了些内容对自己进行科普,后续再深入以下摘自文章: 参考文章:https://blog.csdn.net/u ...
使用 Apache Atlas 进行数据治理
本文由网易云发布. 作者:网易/刘勋(本篇文章仅限知乎内部分享,如需转载,请取得作者同意授权.) 面对海量且持续增加的各式各样的数据对象,你是否有信心知道哪些数据从哪里来以及它如何随时间而变化?采用 ...
Apache Atlas 安装部署
Apache Atlas 安装部署 1.Atlas 原理及相关概念 2.安装前置条件 3.安装Hbase 4.安装Solr 5.安装kafka 6.编译Atlas 7.安装Atlas 8.集成hive ...

最新文章

热门文章