平安产险-大数据开发面经

1、hive接触过哪些文件存储类型，text的优劣、列式存储的好处、SequeceFile的好处、RCFile有没有用过
https://www.cnblogs.com/jiejiaobuleng/p/12906354.html
https://blog.csdn.net/qq_33813365/article/details/82864241

2、对mr的理解
3、内部表和外部表的区别，对应的应用场景
4、map join和reduce join的区别
5、写过最复杂的sql，场景是什么，工作中什么样的sql写的比较多
6、hive的数据倾斜，怎么解决
*
7、宽依赖和窄依赖的理解*
shuffle、stage，发生shuffle就会划分stage，产生宽依赖

8、日志数据、交易数据的数据量
9、数仓的理解，我从分层角度回答、元数据管理
10、数据治理，怎么监控数据是否跑错

11、对项目的理解，项目经历的职责

二面

1、Kafka的数据通知方式
2、Kafka的数据消费方式
3、hive的优化
4、hive几种join
5、hive算子、hive转换成mr的过程
6、map-join讲一讲
7、两张大表，join的key是有序的，怎么优化
8、数据如何拉通？设计上要注意哪些？
9、数据架构如何设计？数仓分层
10、拉链表是什么，解决了些什么问题，用来解决什么，应用场景

平安产险-大数据开发面经相关推荐

大数据开发面试题总结-超详细
1.文件上传: 总结: 客户端上传请求--->namenode检查,返回响应--->客户端真正的文件上传请求,包括文件名,文件大小--->namenode返回上传节点--->客 ...
双非硕士阿里大数据开发面经(已拿offer)
自我介绍感谢群主峰哥秋招过程中的帮助,在年底前对秋招做一个总结分享给其他同学.先说一下本人情况,本人本硕都是双非高校计算机专业,秋招拿了商汤科技.阿里等多个大数据offer,主要是想给来自双非高校计 ...
2021年超全超详细的最新大数据开发面试题，附答案解析
版本时间描述 V1.0 2020-12-18 创建 V1.2 2021-01-17 新增 spark 面试题 V1.3 2021-01-18 新增 kafka 面试题 V1.4 2021-01-2 ...
双非硕士阿里大数据开发面经(已拿offer)(建议收藏)
推荐阅读: #秋招失利,如何把握春招?(大四.研三) #大三.研二的秋招备战路线(Java.大数据) ------ 自我介绍感谢群主峰哥秋招过程中的帮助,在年底前对秋招做一个总结分享给其他同学.先说 ...
字节跳动大数据开发面试题-附答案
此面试题来自牛客网友分享的字节跳动应届一面,面试时长一小时. 网友情况:985 本硕. 参考答案由本公众号提供.如有错误,欢迎指正! 以下为面试过程中提问,岗位为大数据开发: 自我介绍+项目介绍为什 ...
2020网易大数据开发面试题整理 (提前批) (持续更新)
博主近期在整理各大厂面试题,每天会更新一点,没有答案的题目,表示博主也不知道,有答案的题目也不一定正确,希望各位同学自主判断,如果博主有写错的地方,欢迎在评论区补充 1.spark数据倾斜怎么引起的? ...
2023秋招—大数据开发面经—网易云音乐
一面 1.实习的工作内容是什么? 2.有写过UDF吗?如何实现UDF? 3.UDF要成为永久函数怎么做?如果不加temperory,函数下次还能用吗? 4.UDTF了解吗? 5.Hive的窗口函数有了 ...
2023秋招—大数据开发面经—多益网络
一面 hr面:问个人情况,问官网投递时回答的一些问题二面--技术面 1.实习的工作是什么? 2.SQL调优有哪些? 3.介绍一下项目,主要做什么工作?(项目介绍还不顺畅) 4.为什么学大数据? 5. ...
【面经】Thoughtworks 大数据开发面经
1.自我介绍 2.结对编程面试之前会给一个 GitHub 仓库,需要提前下载,配置环境,运行代码,熟悉代码. 2.1 讲一下代码是干什么的提前熟悉理解即可. 2.2 知道 TDD 吗测试驱动开发 ...

平安产险-大数据开发面经

二面

平安产险-大数据开发面经相关推荐

最新文章

热门文章