impala-kudu

Posted jason-dong

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了impala-kudu相关的知识,希望对你有一定的参考价值。

kkudu 提供了自己的api来对kudu进行操作,但是有的开发人员习惯用jdbc来操作数据库,这里我们采用impala 来实现该功能,

impala 安装积配置,请百度,我们的集群采用kerberos认证。

1.jdbc:impala 连接(impala 官方建议连接方式)

官网下载cloudera-connector zip 

zip 中的其他jar包我们的集群已经有了,所以只加了ImpalaJDBC41.jar依赖

提交代码所在用户的 principal 是:impala/[email protected]

连接代码如下:

    import java.sql.DriverManager
    val driverName = "com.cloudera.impala.jdbc41.Driver"
    val url = "jdbc:impala://host:21050;AuthMech=1;KrbRealm=EXAMPLE.COM;KrbHostFQDN=host;KrbServiceName=impala"
    Class.forName(driverName)
    val conn = DriverManager.getConnection(url)
    val prst = conn.prepareStatement("select * from database.movieas limit 10")
    val rs = prst.executeQuery()
    while(rs.next()){
      println(rs.getString(1))
    }

2.jdbc:hive2 连接

hive-jdbc 下载 我用的是org.apache.hive  hive-jdbc

示例代码

    val driver = "org.apache.hive.jdbc.HiveDriver"
    val url = "jdbc:hive2://host:21050/;principal=impala/[email protected]"
    Class.forName(driver)
    val conn = DriverManager.getConnection(url)
    val prst = conn.prepareStatement("select * from database.movieas limit 10")
    val rs = prst.executeQuery()
    while(rs.next()){
      println(rs.getString(1))
    }

 

官方说明文档

 

以上是关于impala-kudu的主要内容,如果未能解决你的问题,请参考以下文章

CDH impala安装

微信小程序代码片段

VSCode自定义代码片段——CSS选择器

谷歌浏览器调试jsp 引入代码片段,如何调试代码片段中的js

片段和活动之间的核心区别是啥?哪些代码可以写成片段?

VSCode自定义代码片段——.vue文件的模板