无法使用 Spring 的 hbase 模板从 Hbase 查询

Posted 2023-04-18

【中文标题】无法使用 Spring 的 hbase 模板从 Hbase 查询

【英文标题】：Unable to query from Hbase using Spring's hbase template

【发布时间】：2013-01-30 14:48:00

【问题描述】：

我正在尝试使用 Spring Data 模块中的 HbaseTemplate 通过 zookeeper 连接到我的 HBase 集群。会话建立发生得很好，但 find 方法永远不会返回值。它永远挂在那里。

我正在附加配置文件和测试用例。任何帮助表示赞赏。

弹簧配置：

<?xml version="1.0" encoding="UTF-8"?>
<beans xmlns="http://www.springframework.org/schema/beans"
    xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xmlns:context="http://www.springframework.org/schema/context"
    xmlns:hdp="http://www.springframework.org/schema/hadoop" xmlns:p="http://www.springframework.org/schema/p"
    xsi:schemaLocation="http://www.springframework.org/schema/beans http://www.springframework.org/schema/beans/spring-beans.xsd
        http://www.springframework.org/schema/context http://www.springframework.org/schema/context/spring-context-3.1.xsd
        http://www.springframework.org/schema/hadoop http://www.springframework.org/schema/hadoop/spring-hadoop-1.0.xsd">


    <bean id="hbaseTemplate" class="org.springframework.data.hadoop.hbase.HbaseTemplate"
        p:configuration-ref="hbaseConfiguration" />

        <hdp:configuration>


        </hdp:configuration>


    <hdp:hbase-configuration zk-quorum="hadoop-host-2" zk-port="2181" delete-connection="true">
    </hdp:hbase-configuration>

</beans>

Junit 测试类：

import java.util.List;

import org.apache.hadoop.hbase.client.HTableInterface;
import org.apache.hadoop.hbase.client.Put;
import org.apache.hadoop.hbase.client.Result;
import org.apache.hadoop.hbase.util.Bytes;
import org.junit.Test;
import org.junit.runner.RunWith;
import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.data.hadoop.hbase.HbaseTemplate;
import org.springframework.data.hadoop.hbase.RowMapper;
import org.springframework.data.hadoop.hbase.TableCallback;
import org.springframework.test.context.ContextConfiguration;
import org.springframework.test.context.junit4.SpringJUnit4ClassRunner;

@RunWith(SpringJUnit4ClassRunner.class)
@ContextConfiguration("file:src/main/webapp/WEB-INF/spring/hbase/hbase-config.xml")
public class HBaseConnectionTest 

    @Autowired
    private HbaseTemplate hbaseTemplate;

    @Test
    public void testConnection() 

        List<String> list = hbaseTemplate.find("testTab",
                "testcf:testCol", new RowMapper<String>() 

                    @Override
                    public String mapRow(Result result, int arg1)
                            throws Exception 

                        return result.toString();

                    
                );

        System.out.println(list);

    

输出：

INFO : org.apache.hadoop.hbase.zookeeper.RecoverableZooKeeper - 这个进程的标识符是 8916@WINDOWS-8KV8O4B 信息：org.apache.zookeeper.client.ZooKeeperSaslClient - 客户端不会进行 SASL 身份验证，因为找不到默认的 JAAS 配置部分“客户端”。如果您不使用 SASL，则可以忽略这一点。另一方面，如果您希望 SASL 能够工作，请修复您的 JAAS 配置。 信息：org.apache.zookeeper.ClientCnxn - 与 iaps-hadoop-host-2/192.168.111.242:2181 建立的套接字连接，正在启动会话 信息：org.apache.zookeeper.ClientCnxn - 服务器 hadoop-host-2/192.168.111.242:2181 上的会话建立完成，sessionid = 0x13c8bcf1cd7000a，协商超时 = 60000

【参考方案1】：

这失败了，因为我们的 hadoop 集群中的一些主机无法从我的客户端访问。添加主机名和 ips 可以正确解决问题。

这可能对某人有帮助。

干杯 普拉文

【讨论】：

细节？您需要在哪里添加它们？