hive6:字符串和日期的转换常用函数

Posted 2023-03-23

参考技术A 用到from_unixtime和unix_timestamp两种函数：
from_unixtime：时间戳转日期函数
用法：from_unixtime(bigint unixtime[, stringformat])
返回值: string

substr(from_unixtime(unix_timestamp()),1,10)

结果为：2017-01-03

select from_unixtime(unix_timestamp('20180905','yyyymmdd'),'yyyy-mm-dd')
from dw.ceshi_data
结果如下：
2018-09-05

2018-09-05转成20180905
select from_unixtime(unix_timestamp('2018-09-05','yyyy-mm-dd'),'yyyymmdd')
from dw.ceshi_data
结果如下：
20180905

用法:unix_timestamp(string date)
注意：里面格式必须是yyyy-MM-dd HH:mm:ss，如果不是会返回null值
返回值: bigint

from dw.ceshi_data;
结果如下：
1536120063

获取当前日期的时间戳：
select unix_timestamp()
from dw.ceshi_data;
结果如下：
1536126324

hive表中，存放着无法直接识别的字符串格式的时间，如'20170728102031',要计算两个时间相差的秒数。

1、先将字符串调整为hive可以识别的格式，即将形如'20170728102031' 转成 '2017-07-28 10:20:31'。 因为hive的 regexp_replace 不支持子语句，没法一次转换，只能用万能的 substr 和拼接函数来写了

select concat(substr('20170728102031',1,4),'-',

substr('20170728102031',5,2),'-',

substr('20170728102031',7,2),' ',

substr('20170728102031',9,2),':',

substr('20170728102031',11,2),':',

substr('20170728102031',13,2))

select unix_timestamp(concat(substr('20170728102031',1,4),'-',substr('20170728102031',5,2),'-',

substr('20170728102031',7,2),' ',

substr('20170728102031',9,2),':',

substr('20170728102031',11,2),':',

substr('20170728102031',13,2))) - unix_timestamp(concat(substr('20170728112031',1,4),'-',

substr('20170728112031',5,2),'-',

substr('20170728112031',7,2),' ',

substr('20170728112031',9,2),':',

substr('20170728112031',11,2),':',

substr('20170728112031',13,2)))

hive > select create_time ,datediff(from_unixtime(unix_timestamp(),’yyyy-MM-dd HH:mm:ss’), create_time) from test;

结果：当前时间是2017-11-16 与create_time的11-10之间差了6天，输出6；

hive >select datediff(’2012-12-08′,’2012-05-09′) from dual;
213

日期时间转日期函数: to_date语法: to_date(string timestamp) 返回：string
hive> select to_date(’2011-12-08 10:03:01′) from dual;
2011-12-08

2011

以下可以取到 month，hour，minute，second 用法和上面的一样

日期转周函数: weekofyear语法: weekofyear (string date) 返回值: int 说明: 返回日期在当前的周数。

hive> select weekofyear(’2011-12-08 10:03:01′) from dual;
49

日期增加函数: date_add语法:
date_add(string startdate, int days)
返回值: string
说明: 返回开始日期startdate增加days天后的日期
举例：
hive> select date_add(’2012-12-08′,10) from dual;
2012-12-18

日期减少函数: date_sub语法: date_sub (string startdate, int days)
返回值: string
说明: 返回开始日期startdate减少days天后的日期。
举例：
hive> select date_sub(’2012-12-08′,10) from dual;
2012-11-28

所以我们利用其中的hour和datediff来获取create_time与当前时间的小时差：
hive> select create_time,

(hour(from_unixtime(unix_timestamp(),'yyyy-MM-dd HH:mm:ss'))-

hour(create_time)+(datediff(from_unixtime(unix_timestamp(),

'yyyy-MM-dd HH:mm:ss'), create_time))*24) as hour_dValue