`
lirenjuan
  • 浏览: 69121 次
  • 性别: Icon_minigender_2
  • 来自: 北京
社区版块
存档分类
最新评论

HBase Java客户端编程

 
阅读更多

本文以Hbase-0.92.0为例,介绍如何在Windows系统,Eclipse IDE集成环境下,使用Java语言,进行HBase客户端编程,包含建立表、删除表、插入记录、删除记录、各种方式下的查询操作等。

1. 准备工作

1、下载后安装jdk包;

2、下载eclipse,解压到本地;

3、下载HBase包,解压安装包到本地(这里使用的是 Hbase-0.92.0)。

2. 搭建开发环境

1、运行Eclipse,创建一个新的Java工程“HBaseClient”,右键项目根目录,选择 “Properties”->“Java Build Path”->“Library”->“Add External JARs”,将HBase解压后根目录下的hbase-0.92.0.jar、hbase-0.92.0-tests.jar和lib子目录下所有jar 包添加到本工程的Classpath下。

2、按照步骤1中的操作,将自己所连接的HBase的配置文件hbase-site.xml添加到本工程的Classpath中,如下所示为配置文件的一个示例:

<configuration>
<property>
<name>hbase.rootdir</name>
<value>hdfs://hadoop-1:9000/hbase</value>
</property>
<property>
<name>hbase.cluster.distributed</name>
<value>true</value>
</property>
<property>
<name>hbase.zookeeper.quorum</name>
<value>hadoop-1,hadoop-2,hadoop-3,hadoop-4</value>
</property>
<property>
<name>zookeeper.session.timeout</name>
<value>60000</value>
</property>
<property>
<name>hbase.master</name>
<value>hadoop-1:60000</value>
</property>
<property>
<name>hbase.zookeeper.property.clientPort</name>
<value>21818</value>
</property>
</configuration>

 3、下面可以在Eclipse环境下进行HBase编程了。

 

3. HBase基本操作代码示例


import java.io.IOException;   
import java.util.ArrayList;   
import java.util.List;   
    
import org.apache.hadoop.conf.Configuration;   
import org.apache.hadoop.hbase.HBaseConfiguration;   
import org.apache.hadoop.hbase.HColumnDescriptor;   
import org.apache.hadoop.hbase.HTableDescriptor;   
import org.apache.hadoop.hbase.KeyValue;   
import org.apache.hadoop.hbase.MasterNotRunningException;   
import org.apache.hadoop.hbase.ZooKeeperConnectionException;   
import org.apache.hadoop.hbase.client.Delete;   
import org.apache.hadoop.hbase.client.Get;   
import org.apache.hadoop.hbase.client.HBaseAdmin;   
import org.apache.hadoop.hbase.client.HTable;   
import org.apache.hadoop.hbase.client.Result;   
import org.apache.hadoop.hbase.client.ResultScanner;   
import org.apache.hadoop.hbase.client.Scan;   
import org.apache.hadoop.hbase.client.Put;   
import org.apache.hadoop.hbase.util.Bytes;   
    
public class HBaseTest {     
       
    private static Configuration conf =null;
	 /**
	  * 初始化配置
	 */
	 static {
	     conf = HBaseConfiguration.create();
	 }
	 
    /**  
     * 创建一张表  
     */  
    public static void creatTable(String tableName, String[] familys) throws Exception {   
        HBaseAdmin admin = new HBaseAdmin(conf);   
        if (admin.tableExists(tableName)) {   
            System.out.println("table already exists!");   
        } else {   
            HTableDescriptor tableDesc = new HTableDescriptor(tableName);   
            for(int i=0; i<familys.length; i++){   
                tableDesc.addFamily(new HColumnDescriptor(familys[i]));   
            }   
            admin.createTable(tableDesc);   
            System.out.println("create table " + tableName + " ok.");   
        }    
    }   
       
    /**  
     * 删除表  
     */  
    public static void deleteTable(String tableName) throws Exception {   
       try {   
           HBaseAdmin admin = new HBaseAdmin(conf);   
           admin.disableTable(tableName);   
           admin.deleteTable(tableName);   
           System.out.println("delete table " + tableName + " ok.");   
       } catch (MasterNotRunningException e) {   
           e.printStackTrace();   
       } catch (ZooKeeperConnectionException e) {   
           e.printStackTrace();   
       }   
    }   
        
    /**  
     * 插入一行记录  
     */  
    public static void addRecord (String tableName, String rowKey, String family, String qualifier, String value)   
            throws Exception{   
        try {   
            HTable table = new HTable(conf, tableName);   
            Put put = new Put(Bytes.toBytes(rowKey));   
            put.add(Bytes.toBytes(family),Bytes.toBytes(qualifier),Bytes.toBytes(value));   
            table.put(put);   
            System.out.println("insert recored " + rowKey + " to table " + tableName +" ok.");   
        } catch (IOException e) {   
            e.printStackTrace();   
        }   
    }   
    
    /**  
     * 删除一行记录  
     */  
    public static void delRecord (String tableName, String rowKey) throws IOException{   
        HTable table = new HTable(conf, tableName);   
        List list = new ArrayList();   
        Delete del = new Delete(rowKey.getBytes());   
        list.add(del);   
        table.delete(list);   
        System.out.println("del recored " + rowKey + " ok.");   
    }   
        
    /**  
     * 查找一行记录  
     */  
    public static void getOneRecord (String tableName, String rowKey) throws IOException{   
        HTable table = new HTable(conf, tableName);   
        Get get = new Get(rowKey.getBytes());   
        Result rs = table.get(get);   
        for(KeyValue kv : rs.raw()){   
            System.out.print(new String(kv.getRow()) + " " );   
            System.out.print(new String(kv.getFamily()) + ":" );   
            System.out.print(new String(kv.getQualifier()) + " " );   
            System.out.print(kv.getTimestamp() + " " );   
            System.out.println(new String(kv.getValue()));   
        }   
    }   
        
    /**  
     * 显示所有数据  
     */  
    public static void getAllRecord (String tableName) {   
        try{   
             HTable table = new HTable(conf, tableName);   
             Scan s = new Scan();   
             ResultScanner ss = table.getScanner(s);   
             for(Result r:ss){   
                 for(KeyValue kv : r.raw()){   
                    System.out.print(new String(kv.getRow()) + " ");   
                    System.out.print(new String(kv.getFamily()) + ":");   
                    System.out.print(new String(kv.getQualifier()) + " ");   
                    System.out.print(kv.getTimestamp() + " ");   
                    System.out.println(new String(kv.getValue()));   
                 }   
             }   
        } catch (IOException e){   
            e.printStackTrace();   
        }   
    }   
       
    public static void  main (String [] agrs) {   
        try {   
            String tablename = "scores";   
            String[] familys = {"grade", "course"};   
            HBaseTest.creatTable(tablename, familys);   
                
            //add record zkb   
            HBaseTest.addRecord(tablename,"zkb","grade","","5");   
            HBaseTest.addRecord(tablename,"zkb","course","","90");   
            HBaseTest.addRecord(tablename,"zkb","course","math","97");   
            HBaseTest.addRecord(tablename,"zkb","course","art","87");   
            //add record  baoniu   
            HBaseTest.addRecord(tablename,"baoniu","grade","","4");   
            HBaseTest.addRecord(tablename,"baoniu","course","math","89");   
                
            System.out.println("===========get one record========");   
            HBaseTest.getOneRecord(tablename, "zkb");   
                
            System.out.println("===========show all record========");   
            HBaseTest.getAllRecord(tablename);   
                
            System.out.println("===========del one record========");   
            HBaseTest.delRecord(tablename, "baoniu");   
            HBaseTest.getAllRecord(tablename);   
                
            System.out.println("===========show all record========");   
            HBaseTest.getAllRecord(tablename);   
        } catch (Exception e) {   
            e.printStackTrace();   
        }   
    }   
}  
 

 

 

分享到:
评论

相关推荐

    HBase的Java客户端源码

    HBASE的java版本的客户端,运行代码需要设定环境变量且打包成jar文件运行

    hbase用于查询客户端工具

    2. **HBase REST Gateway**:REST(Representational State Transfer)接口使得非Java客户端能以HTTP协议与HBase通信,使用JSON格式交换数据。这使得Web应用、Python、Ruby等其他语言的客户端可以轻松地与HBase集成...

    最新版linux hbase-2.3.3-client-bin.tar.gz

    首先,HBase 2.3.3客户端提供了丰富的API,支持Java、Python、C++等多种编程语言,使得开发者可以方便地在各种应用中集成HBase功能。在Linux环境下,通常使用Java API进行开发,因为其具有完善的文档支持和强大的...

    nosql-实验三HBase管理工具和客户端.docx

    HBase 客户端是指通过编程语言来访问和操作 HBase 数据库的客户端。常见的 HBase 客户端有 Java 客户端、Python 客户端等。 在 Java 中,可以使用 HBase 的 Java API 来访问和操作 HBase 数据库。例如,用户可以...

    java从本地读文件并上传Hbase

    在Java编程环境中,将本地文件读取并上传到HBase是一项常见的任务,特别是在大数据处理和存储的场景下。HBase是一个分布式、版本化的NoSQL数据库,基于Apache Hadoop,适用于大规模数据存储。以下是一个详细的过程,...

    HBase 编程指南

    HBase的安装过程需遵循一定的步骤,首先确保满足硬件与软件的最低要求,例如Java环境、Hadoop集群等。接着选择适合的安装方式,包括单机模式、伪分布模式或全分布模式。配置阶段涉及HBase主配置文件(hbase-site.xml...

    java代码使用thrift2操作hbase示例

    你需要配置HBase的环境变量,并且需要编译Thrift2生成的HBase IDL文件,生成对应的Java客户端代码。 2. **建立连接**:使用`HBaseConfiguration.create()`创建一个配置对象,然后通过`ConnectionFactory.create...

    封装hbase以便java调用

    总的来说,封装HBase以便Java调用是一个常见的开发任务,它涉及到对HBase API的理解,接口设计,以及对Java编程和项目管理的综合运用。封装后的库不仅提高了代码的可读性和可维护性,也使得应用与数据存储的交互更加...

    hbase 的java代码 集合 hbase 0.96

    在Java中,我们通过HBase客户端API与HBase交互,这些API包括了`HBaseAdmin`、`HTable`、`Put`、`Get`、`Scan`等核心类。 1. **连接HBase**:在Java代码中,我们使用`HBaseConfiguration.create()`来创建一个配置...

    simple-hbase-client:简单的 HBase 客户端

    这个客户端是用Java编写的,因此熟悉Java编程是使用它的前提。 首先,了解HBase的基本概念是必要的。HBase将数据存储在表中,每个表由行和列组成,而列又由列族和列限定符构成。行键是唯一的,用于标识每一行,列族...

    java操作Hbase之从Hbase中读取数据写入hdfs中源码

    在Java中操作HBase,我们需要使用HBase的Java客户端API。首先,确保引入了所有必要的jar包,这些包通常包括hbase-client、hbase-common、hadoop-client等。这些依赖可以使用Maven或Gradle等构建工具管理,或者直接在...

    在eclipse中开发HBase程序的方法

    然而,这一过程涉及到对Hadoop和HBase架构的深入了解,以及对Java编程的熟练掌握。以上提供的知识点涵盖了在Eclipse中设置HBase开发环境的步骤,以及如何编写和运行基本的HBase程序示例。这对于希望在实际项目中应用...

    Hbase Java API详解.pdf

    在HBase Java API使用方面,HBaseConfiguration对象是每个HBase客户端都需要使用的,它代表了HBase的配置信息。可以通过默认构造函数来创建HBaseConfiguration对象,它会尝试从类路径中的hbase-default.xml和hbase-...

    java 通过thrift-0.9.1读取hbase表数据

    3. **编写Java代码**:使用生成的Java客户端代码,创建HBase连接,实例化Thrift客户端,然后调用其提供的方法来访问HBase表。通常包括以下步骤: - 连接Thrift服务器:通过`TSocket`或`TFramedTransport`建立与...

    hbase的表结构及客户端依赖.zip

    4. Java API:HBase的主要编程接口是Java API,提供了Table、Get、Put、Scan等对象,方便进行增删改查操作。同时,HBase也支持非Java的客户端,如Python、C++、Ruby等,这些客户端通常通过Thrift或REST接口与HBase...

    hbase-client

    HBase客户端是连接HBase服务器并与之交互的重要工具,它使得开发者能够在各种编程语言环境下与HBase进行通信,执行数据的读写操作。本文将深入探讨HBase客户端的功能、使用方法以及相关知识点。 一、HBase客户端...

    java 连接远程hbase 数据库

    1. **引入依赖**: 标签中的"java habse"暗示我们需要Java的HBase客户端库。描述中提到的"所有jar"通常指的是这些库。在Java项目中,这些依赖可以通过Maven或Gradle等构建工具管理。例如,在Maven的`pom.xml`文件中,...

    java链接hbase数据示例代码

    在Java编程环境中,HBase是一种分布式、高性能的NoSQL数据库,常用于大数据处理。本示例代码主要展示了如何使用Java API连接HBase数据库,并执行基本的CRUD(创建、读取、更新、删除)操作,同时也包括了批量操作的...

    多线程 hbase

    2. **HBase客户端API**:HBase提供了Java客户端API,支持线程安全的`HTablePool`,这个池可以管理多个`HTable`实例,每个实例对应一个HBase表,允许多线程共享和复用这些实例,减少创建和销毁HTable对象的开销。...

Global site tag (gtag.js) - Google Analytics