无法使用Spring的hbase模板从Hbase查询

时间:2013-01-30 14:48:01

标签: hbase spring-data

我正在尝试使用Spring Data模块中的HbaseTemplate通过zookeeper连接到我的HBase集群。会话建立发生得很好但是find方法永远不会返回值。它永远挂在那里。

我正在附加配置文件和测试用例。任何帮助表示赞赏。

Spring config:

<?xml version="1.0" encoding="UTF-8"?>
<beans xmlns="http://www.springframework.org/schema/beans"
    xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xmlns:context="http://www.springframework.org/schema/context"
    xmlns:hdp="http://www.springframework.org/schema/hadoop" xmlns:p="http://www.springframework.org/schema/p"
    xsi:schemaLocation="http://www.springframework.org/schema/beans http://www.springframework.org/schema/beans/spring-beans.xsd
        http://www.springframework.org/schema/context http://www.springframework.org/schema/context/spring-context-3.1.xsd
        http://www.springframework.org/schema/hadoop http://www.springframework.org/schema/hadoop/spring-hadoop-1.0.xsd">


    <bean id="hbaseTemplate" class="org.springframework.data.hadoop.hbase.HbaseTemplate"
        p:configuration-ref="hbaseConfiguration" />

        <hdp:configuration>


        </hdp:configuration>


    <hdp:hbase-configuration zk-quorum="hadoop-host-2" zk-port="2181" delete-connection="true">
    </hdp:hbase-configuration>

</beans>

Junit测试类:

import java.util.List;

import org.apache.hadoop.hbase.client.HTableInterface;
import org.apache.hadoop.hbase.client.Put;
import org.apache.hadoop.hbase.client.Result;
import org.apache.hadoop.hbase.util.Bytes;
import org.junit.Test;
import org.junit.runner.RunWith;
import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.data.hadoop.hbase.HbaseTemplate;
import org.springframework.data.hadoop.hbase.RowMapper;
import org.springframework.data.hadoop.hbase.TableCallback;
import org.springframework.test.context.ContextConfiguration;
import org.springframework.test.context.junit4.SpringJUnit4ClassRunner;

@RunWith(SpringJUnit4ClassRunner.class)
@ContextConfiguration("file:src/main/webapp/WEB-INF/spring/hbase/hbase-config.xml")
public class HBaseConnectionTest {

    @Autowired
    private HbaseTemplate hbaseTemplate;

    @Test
    public void testConnection() {

        List<String> list = hbaseTemplate.find("testTab",
                "testcf:testCol", new RowMapper<String>() {

                    @Override
                    public String mapRow(Result result, int arg1)
                            throws Exception {

                        return result.toString();

                    }
                });

        System.out.println(list);

    }

输出:

INFO:org.apache.hadoop.hbase.zookeeper.RecoverableZooKeeper - 此过程的标识符为8916 @ WINDOWS-8KV8O4B INFO:org.apache.zookeeper.client.ZooKeeperSaslClient - 客户端不会进行SASL身份验证,因为找不到默认的JAAS配置部分“客户端”。如果您不使用SASL,则可以忽略它。另一方面,如果您希望SASL工作,请修复您的JAAS配置。 INFO:org.apache.zookeeper.ClientCnxn - 建立到iaps-hadoop-host-2 / 192.168.111.242:2181的套接字连接,启动会话 INFO:org.apache.zookeeper.ClientCnxn - 在服务器上完成会话建立hadoop-host-2 / 192.168.111.242:2181,sessionid = 0x13c8bcf1cd7000a,协商超时= 60000

1 个答案:

答案 0 :(得分:0)

这是失败的,因为我们的hadoop集群中的某些主机无法从我的客户端访问。正确添加主机名和ips可以解决问题。

这可能对某人有帮助。

干杯 普利文