hive中设置jobname
hive中设置jobname
hive> set mapred.job.name=test;
两种情况,
1,成功,end
2,失败报错,cannot modify mapred.job.name at runtime,it is not in list of params that are allowed to be modified at runtime
报错提示:不能在运行时修改map .job.name,它不在允许在运行时修改的参数列表中
hive> set hive.security.authorization.sqlstd.confwhitelist;
查看当前白名单允许运行时修改的配置,返回的信息中查看是否有mapred.job.name字段(这个根据版本不同,默认的配置也不一样,有的版本是有这个参数配置的),没有这个参数的话就去找到hive-site.xml文件,添加如下配置(如果还需要添加其他的配置,中间使用 | 隔开):
<property>
<name>hive.security.authorization.sqlstd.confwhitelist.append</name>
<value>map .job.name</value>
</property>
配置完成后重启hive的所有组件
参考博客https://blog.csdn.net/CPP_MAYIBO/article/details/88085414
https://blog.51cto.com/xiaolanlan/2374064?source=dra
以及QQ群534749847群主
hive中设置jobname相关推荐
- Hive 中的各种常用set设置
背景 平时在跑数据时,需要在查询语句前设置一些set语句,这些set语句中其中有一些是配置hive的各功能,另一些是可以达到优化的目的,本篇文章对一些常用的set语句进行总结 常用set设置 查询结果 ...
- hive中如何读取数组_hive解析json嵌套数组
hive怎么统计json中某一项的内容 Hive提供json抽取函数get_json_object,根据json_path来获取你所抽取的项 get_json_object函数第一个参数填写json对 ...
- hive中如何控制mapper的数量
参考文档:https://www.cnblogs.com/1130136248wlxk/articles/5352154.html 1. 决定map的数据的决定因素有: input的文件总个数,inp ...
- 061 hive中的三种join与数据倾斜
一:hive中的三种join 1.map join 应用场景:小表join大表 一:设置mapjoin的方式: )如果有一张表是小表,小表将自动执行map join. 默认是true. <pro ...
- Spark SQL来读取现有Hive中的数据
Spark SQL主要目的是使得用户可以在Spark上使用SQL,其数据源既可以是RDD,也可以是外部的数据源(比如Parquet.Hive.Json等). Spark SQL的其中一个分支就是Spa ...
- Hive中JOIN的使用入门
Hive中join的用法 Hive中Join的通常使用有以下几种: inner join 等值连接 left join right join full join left semi join cr ...
- 使用hive中beeline引擎来访问hive数据库
hive中beeline引擎连接hive访问hive引擎 注意,往下阅读前,必须先确保hive>能连接mysql数据库 我们知道: hive中的引擎有两个: hive> beeline&g ...
- python读取oracle数据到hvie parquet_关于sparksql操作hive,读取本地csv文件并以parquet的形式装入hive中...
说明:spark版本:2.2.0 hive版本:1.2.1 需求: 有本地csv格式的一个文件,格式为${当天日期}visit.txt,例如20180707visit.txt,现在需要将其通过spar ...
- hive中实现行转列_漫谈数据仓库之拉链表(原理、设计以及在Hive中的实现)
全文由下面几个部分组成: 先分享一下拉链表的用途.什么是拉链表. 通过一些小的使用场景来对拉链表做近一步的阐释,以及拉链表和常用的切片表的区别. 举一个具体的应用场景,来设计并实现一份拉链表,最后并通 ...
最新文章
- 《Effective Java》读书笔记--创建和销毁对象
- 支撑百亿级应用的 NewSQL——TiDB 在同程旅游的应用
- sql语句中`和'两个符号的区别
- 纪中B组模拟赛总结(2020.2.7)
- 谭浩强c语言规范化的指数形式,C语言程序设计谭浩强第四期末复习重点.docx
- Bitcoin-NG 可扩展的区块链协议
- Linux系统的头文件和库文件搜索路径
- 破解版的ABBYY FineReader OCR文字识别软件,真的好用吗?
- PHP连接MySQL 8.0报错的解决办法
- 泛微OA云桥 未授权任意文件读取
- HDS F900装机小结
- flutter shared_preferences 异步变同步
- PUN ☀️六、机器人基础设置:运动、相机、攻击与生命值
- zcu111解决DP时钟报错问题
- pwnable-passcode
- 我赢助手:视频不清晰很模糊,和原片差别很大该怎么办?作品零播放是怎么回事?
- 计算机文档里的圆圈,请问在WORD文档里怎样插入数字上的圆点?
- 台湾安格AG6202与CS5210参数差异与区别|HDMI转VGA方案比较|AG6202与CS5210电路设计差异
- 这件物品不能添加到您的库中,因为他在你所在的地区不可用
- 十一招解决:系统IE部分网页打不开怎么办(转载)