在创建Hive表时，一般我们会指定字段间的分隔符，如空格，\t，逗号等，这些是都单字符。那么，如果我们想要按照多个字符分隔，如##，|+|等，这时候就要用到如下两种方式：

MultiDelimitSerDe解决多字符分隔

创建表

0: jdbc:hive2://node03:10000> create table test1 (id string, name string)
. . . . . . . . . . . . . . > row format serde 'org.apache.hadoop.hive.contrib.serde2.MultiDelimitSerDe'
. . . . . . . . . . . . . . > with serdeproperties ('field.delim'='##');
No rows affected (0.172 seconds)

准备测试数据test1.txt

[hadoop@node03 data]$ vi /home/hadoop/hive/data/test1.txt
1##liubei
2##guanyv
3##zhangfei

插入测试数据

0: jdbc:hive2://node03:10000> load data local inpath '/home/hadoop/hive/data/test1.txt' overwrite into table test1;

查询表

0: jdbc:hive2://node03:10000> select * from test1;
+-----------+-------------+--+
| test1.id  | test1.name  |
+-----------+-------------+--+
| 1         | liubei      |
| 2         | guanyv      |
| 3         | zhangfei    |
+-----------+-------------+--+

RegexSerDe解决多字符分隔

创建表

0: jdbc:hive2://node03:10000> create table test2(id int, name string)
. . . . . . . . . . . . . . > row format serde 'org.apache.hadoop.hive.serde2.RegexSerDe'
. . . . . . . . . . . . . . > with serdeproperties ('input.regex'='^(.*)\\#\\#(.*)$');
No rows affected (0.117 seconds)

准备测试数据test2.txt

[hadoop@node03 data]$ vi /home/hadoop/hive/data/test2.txt
1##liubei
2##guanyv
3##zhangfei

插入测试数据

0: jdbc:hive2://node03:10000> load data local inpath '/home/hadoop/hive/data/test2.txt' overwrite into table test2;

查询表

0: jdbc:hive2://node03:10000> select * from test2;
+-----------+-------------+--+
| test2.id  | test2.name  |
+-----------+-------------+--+
| 1         | liubei      |
| 2         | guanyv      |
| 3         | zhangfei    |
+-----------+-------------+--+

【Hive】多字符分隔相关推荐

Hive多字符列分割
Hive多字符分割列 1 简介此手册应用于hive建表时指定列按照多字段分割的情景. 2 准备 2.1 环境说明 hive版本: 1.1.0-cdh5.4.7 3 使用 3.1 使用说明方法一)通 ...
mysql拆分英文数字_MySQL中的REGEX仅显示由连字符分隔的数字。
让我们首先创建一个表-create table DemoTable ( Code varchar(100) ); 使用插入命令在表中插入一些记录-insert into DemoTable value ...
sql截去最后一位_SQL截取最后一个由字符分隔的字符串
SQL如果一个字符串由某个字符分隔,例如:"火锅>中餐>极品美食"."10*20*300",怎么得到字符最后一个字符串("极品美食&quo ...
excel减法函数_Excel公式练习35：拆分连字符分隔的数字并放置在同一列中
学习Excel技术,关注微信公众号: excelperfect 导语:这个案例仍来自于excelxor.com,没有办法,太有才了,不得不佩服这些人,竟然能把Excel公式与函数玩成这个样子!认真研究 ...
Hive建表时指定分隔符或使用多字符分隔
不知道你是否会有会这样的苦恼,就是从hdfs或者file中导入数据到Hive建数仓的时候,因为数据是数据流前段的小GG用特殊符号分隔的,然后导致你导入数据时一脸蒙圈? 这篇教程可能会帮到你. 首先我们 ...
hive中文字符乱码解决方法【转】
一.个人初始开发环境的基本情况以及Hive元数据库说明 ①hive的元数据库改成了mysql(安装完mysql之后也没有进行其它别的设置) ②hive-site.xml中设置元数据库对应的配置为 j ...
hive 中文字符过滤_hive中文字符乱码解决方法【转】
一.个人初始开发环境的基本情况以及Hive元数据库说明 ①hive的元数据库改成了mysql(安装完mysql之后也没有进行其它别的设置) ②hive-site.xml中设置元数据库对应的配置为 j ...
hive 中文字符过滤_0650-6.2.0-通过UDF实现HiveImpala的中文拼音排序
作者:余枫 1.问题重现测试环境: 1.RedHat7.2 2.CDH6.2.0 3.使用root进行操作 1.在Hive中创建一个表,并导入数据如下 2.对s2字段进行排序 select * fr ...
mysql按固定字符进行切割_MySQL:SQL按特定字符分隔切割或删除特定字符
1,先建表 DROP TABLE IF EXISTS `gongzi`; CREATE TABLE `gongzi` ( `id` int(11) NOT NULL AUTO_INCREMENT, ` ...

【Hive】多字符分隔

MultiDelimitSerDe解决多字符分隔

RegexSerDe解决多字符分隔

【Hive】多字符分隔相关推荐

最新文章

热门文章