python远程访问hive

Posted

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了python远程访问hive相关的知识,希望对你有一定的参考价值。

#!/usr/bin/python
import sys
sys.path.append(‘/home/zhoujie/Downloads/hive-0.7.0-cdh3u0/lib/py‘)
from hive_service import ThriftHive
from hive_service.ttypes import HiveServerException
from thrift import Thrift
from thrift.transport import TSocket
from thrift.transport import TTransport
from thrift.protocol import TBinaryProtocol


hive_server_ip=‘127.0.0.1‘
hive_server_port=10000
#hive_sql=‘select count(*) from ssp_factbids‘
hive_sql="select count(*) from ssp_factbids where logdate_id=‘20121101‘"


def hiveExe(sql):
    try:
        transport = TSocket.TSocket(hive_server_ip, hive_server_port)
        transport = TTransport.TBufferedTransport(transport)
        protocol = TBinaryProtocol.TBinaryProtocol(transport)
        client = ThriftHive.Client(protocol)
        transport.open()

        client.execute(sql)

        print "The return value is : "
        print client.fetchAll()
        print "............"
        transport.close()
    except Thrift.TException, tx:
        print ‘%s‘ % (tx.message)

if __name__ == ‘__main__‘:
    hiveExe(hive_sql)

以上是关于python远程访问hive的主要内容,如果未能解决你的问题,请参考以下文章

hive的(ql)hql使用和基于UDF的用法;以及java对hive的远程访问

本地IDEAspark程序远程读取hive数据

本地IDEAspark程序远程读取hive数据

本地IDEAspark程序远程读取hive数据

八hive3.1.2 安装及其配置(本地模式和远程模式)

如何从远程连接访问 python http 服务器?