使用hive计算每一年的最大气温的日期+温度

数据解析：
比如：2010012325表示在2010年01月23日的气温为25度。
需求：现在要求使用hive，计算每一年的最大气温的日期+温度。效果如下：

20010105        29
20070109        99
20080103        37
20100103        17
20120107        32
20130109        29
20140103        17
20150109        99

原始数据如下

create table if not exists temperature(
data string
)
row format delimited fields terminated by '\t'
lines terminated by '\n';
load data local inpath './data/temperature' into table temperature;

答案粘贴处:

with a as (select substr(data, 0, 8)  `dt`,substr(data, 9, 10) `temp`from temperature),b as (select dt,temp,rank() over (distribute by substr(dt,0,4) sort by temp desc) `rn`from a)
select *
from b
where b.rn=1;

运行结果

+--------+----+--+
|dt      |temp|rn|
+--------+----+--+
|20010105|29  |1 |
|20070109|99  |1 |
|20080103|37  |1 |
|20100103|17  |1 |
|20120107|32  |1 |
|20130109|29  |1 |
|20140103|17  |1 |
|20150109|99  |1 |
+--------+----+--+

或者如下写法也是可以的

select t.dt,t.temp from(select substr(data,0,8) `dt`,substr(data,9,10) `temp`,rank() over(partition by substr(data,0,4) order by substr(data,9,10) desc)  `rn`  from temperature) t
where t.rn=1;

注意

select substr(data, 0, 8)  `dt` from temperature;
--20140101select substring(data,0,8) from temperature;
--20140101 substring 和substr从效果上看没啥区别

select year(substr(data, 0, 8))  `dt` from temperature;
--null 无法识别
select substr(data,0,4) `dt` from temperature;
-- 2008 只能这样把年份提取出来
select year('20200102');
-- null 无法识别
select year('2020-01-02');
-- 2020 用-分割的字符串这种事可以识别的,其他分隔符的不行

使用hive计算每一年的最大气温的日期+温度相关推荐

Hive计算两个经纬度坐标的直线距离
-- Hive计算两个经纬度坐标直线距离(单位:公里) -- 公式 -- ASIN( -- SQRT( -- POWER(SIN((lat1-lat2)*ACOS(-1)/360),2) + -- C ...
hive left outer join 子查询临时表_基于历史数据的用户访问次数，每天新老用户，日活，周活，月活的hive计算...
最近有一个需求,统计每天的新老用户,日活,周活,月活. 我们每天的增量数据会加入到hive历史数据表中,包含用户访问网站的一些信息,字段有很多,包括用户唯一标识guid. 当然了日活,周活,月活就是一 ...
Hive计算引擎大PK，万字长文解析MapRuce、Tez、Spark三大引擎
Hive从2008年始于FaceBook工程师之手,经过10几年的发展至今保持强大的生命力.截止目前Hive已经更新至3.1.x版本,Hive从最开始的为人诟病的速度慢迅速发展,开始支持更多的计算引擎 ...
分析函数hive计算均值_hive常用函数及优化
常用函数 1.数学函数 round(double a,int d ) 四舍五入 floor(double a)对给定数据进行向下舍入最接近的整数.例如floor(21.8),返回21. ceil(do ...
Hive 计算用户留存率（次日，3日，N日）
文章目录什么是用户留存率? 创建数据源计算留存率计算 N 日的留存率什么是用户留存率? 用户留存率是指在特定时间段内,用户在使用某个产品或应用程序后,再次使用该产品或应用程序的比例. 它可以帮 ...
hive计算周是一年的第几周
函数 weekofyear 可以直接计算当前周属于年的第几周对于跨年周,以当前周所在年天数多的年为准.即一周大于等于4天时间在上一年,则为上一年的最后一周,否则为新年的第一周查询语句查询结果附 ...
每天新老用户，日活，周活，月活的hive计算
Hive系列文章 Hive表的基本操作 Hive中的集合数据类型 Hive动态分区详解 hive中orc格式表的数据导入 Java通过jdbc连接hive 通过HiveServer2访问Hive Sp ...
hive计算航班某型号个数_机型分配就是把航班集合按照机型分割成子集。（）...
[填空题]Fill in the blanks with appropriate prepositions or adverbs, noticing the verbs that go with th ...
hive 计算个人的累计金额占比
SELECT 会员id,sales, Row_Number() OVER (ORDER BY sales desc ) rank1 ,-按照金额降序给个序号分组就加 partition by sal ...

使用hive计算每一年的最大气温的日期+温度

注意

使用hive计算每一年的最大气温的日期+温度相关推荐

最新文章

热门文章