通过表名和时间查看hive分区表的数据

Posted coding2018

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了通过表名和时间查看hive分区表的数据相关的知识,希望对你有一定的参考价值。

[linux-]$  /home/script/listHive.py  ta_name_1002_user_search_log_day  20180626

技术分享图片
#!/usr/bin/env python
# -*- coding: utf-8 -*-
##########################################
# 通过表名和时间查看hive分区表的数据 
# len(sys.argv)--输入参数个数
# sys.argv[1] -- 表名
# sys.argv[2] -- 时间 
# 创建者:df    
# 创建日期:2018年06月25日
###############################################
import os
import sys

ll = len(sys.argv)
def pri(com):
    print("command: ‘%s‘" % com)
    os.system(com)
    sys.exit(0) 

if ll < 2:
    print(no parameter !)
    print(Please enter the format !)
    print("./l_hive.py tableName  [date]")
    sys.exit(1)
#获取表名
v_tablename = sys.argv[1]
command = "hadoop fs -ls  /apps/hive/warehouse/*/%s" % v_tablename
if ll == 2:
    pri(command)

v_time = sys.argv[2]
if ll > 2:
    # 获取时间长度
    len = len(v_time)
    if len <4:
        pri(command)
    else:
        num = len / 2 - 3 + 1
        for i in range(num):
            sublen = 6 + i * 2
            command = "%s/*=%s" % (command, v_time[0:sublen]) 
        pri(command)
else:
    print(Please enter the format !)
    print("./l_hive.py tableName  [date]")
    sys.exit(1)
View Code

 

以上是关于通过表名和时间查看hive分区表的数据的主要内容,如果未能解决你的问题,请参考以下文章

hive中怎样删除分区

hive中怎么删除表中的部分数据

hive中怎么删除表中的部分数据

Hadoop Hive:使用Bash脚本生成表名和属性名

Hive学习笔记 --- 用中文创建表名和字段

hive表分区的修复