0 0

关于hbase列之间的数据范围0

类似传统数据库,根据时间范围的查找。
比如是2012-12-12到2013-01-23日之间的数据,在hbase中如何实现。
我在hbase有一个列为date,存日期。
2013年8月12日 13:56

2个答案 按时间排序 按投票排序

0 0

采纳的答案

可以用hbase的filter实现,如下面的代码:

				FilterList filter = new FilterList();
        if (timeFrom != null) {
            String sDate = String.valueOf(timeFrom.getTime());
            SingleColumnValueFilter scvf = new SingleColumnValueFilter(Bytes.toBytes("CF"), Bytes.toBytes("Date"), CompareOp.GREATER_OR_EQUAL,
                    Bytes.toBytes(String.valueOf(sDate)));
            filter.addFilter(scvf);
        }

        if (timeTo != null) {
            String sDate = String.valueOf(timeTo.getTime());
            SingleColumnValueFilter scvf = new SingleColumnValueFilter(Bytes.toBytes("CF"), Bytes.toBytes("Date"), CompareOp.LESS_OR_EQUAL,
                    Bytes.toBytes(String.valueOf(sDate)));
            filter.addFilter(scvf);
        }

2013年8月12日 14:59
0 0

http://www.cnblogs.com/end/archive/2012/08/23/2652455.html,结合CompareOp.GREATER_OR_EQUAL,CompareOp.LESS_OR_EQUAL就可以了

2013年8月12日 15:34

相关推荐

    HBASE数据库.docx

    总的来说,HBase是一个适用于大数据分析和实时读写的列式存储数据库,尤其适用于处理半结构化数据,如日志、物联网传感器数据等。它的设计目标是通过横向扩展,即添加更多廉价服务器,来增加处理能力和存储容量。...

    hbase与hive数据同步共4页.pdf.zip

    Sqoop可以将HBase表导入到Hive,通过定义HBase表的扫描范围和列族,将其转换为Hive表。 - Hive到HBase:当Hive完成了计算和分析,可能需要将结果回写到HBase以供实时查询。这通常通过自定义MapReduce任务实现,将...

    HBase学习利器:HBase实战

    每个Region包含一定范围的行键,并且可以在不同的RegionServer之间迁移,以实现负载均衡。 **3. 数据压缩与缓存**:HBase支持多种数据压缩算法,可以显著减少存储空间的需求。同时,通过缓存机制提高数据读取速度,...

    Hbase 组件 、架构

    HBase中的Region分割(Region Split)是一个关键特性,它允许HBase在表数据量增大时,自动将一个Region分割成两个,从而保证每个Region的大小都保持在一个合理的范围。这是实现HBase高扩展性和高性能的关键机制之一...

    hbase-1.1.2-bin.tar.gz

    通过水平扩展,HBase可以处理PB级别的数据,并且能够在大量节点之间实现数据的快速读写。 在HBase中,数据被组织成表,每个表由行和列组成。行由行键(Row Key)唯一标识,列则由列族(Column Family)和列限定符...

    thrift操作Hbase数据库

    Hbase是基于Apache Hadoop的分布式列式数据库,适合处理大规模数据。在本项目中,我们将关注如何使用C#语言通过Thrift2来操作Hbase数据库,实现数据的增、删、改、查(CRUD)功能。 1. **Thrift2与Hbase的交互** ...

    hbase指南 英文

    HBase 是一个分布式的、面向列的开源数据库,它旨在为结构化数据提供高效的随机读/写访问。HBase 的设计受到了 Google Bigtable 论文的影响,并且是 Apache Hadoop 生态系统中的一个重要组成部分。HBase 提供了类似 ...

    大数据HBASE考题材料

    - 面向列:HBase是基于列族的数据库,这意味着数据存储和查询都是按列族进行的。 - 分布式:HBase是为大规模数据存储而设计的分布式数据库。 - NoSQL数据库:HBase属于NoSQL数据库的一种,它不使用传统的SQL语言...

    hbase的shell操作

    这里会扫描`people`表中`info`列族且行键范围在`rk0001`到`rk0003`之间的所有数据。 ### 高级查询 除了基本的查询外,HBase Shell还支持更高级的查询方式: - **按值过滤**: ```sh get 'people', 'rk0001', {...

    HIVE和HBASE区别

    HBASE的特点是支持四种主要的操作:增加或者更新行,查看一个范围内的cell,获取指定的行,删除指定的行、列或者是列的版本。版本信息用来获取历史数据(每一行的历史数据可以被删除,然后通过HBASE compactions就...

    一种基于json的Hbase到mysql的数据抽取方法.pdf

    此外,用户还需定义抽取策略,例如选择要抽取的数据范围、时间戳等条件,以及清洗规则和转换规则。清洗规则用于处理数据集中的错误、不完整或不一致的数据,而转换规则则用于将Hbase中的非结构化数据转换为MySQL能...

    thrift1 查询hbase

    在IT领域,尤其是在大数据处理和分布式系统中,HBase是一个重要的NoSQL数据库,它基于Apache Hadoop并提供了高性能、列式存储、可扩展的实时读写能力。而Thrift是一种跨语言的服务框架,由Facebook开发,它允许不同...

    Hbase-GUI-1.2.3.zip

    5. **Scanning机制**:HBase提供了扫描器(Scanner)功能,可以按行或列范围遍历表中的数据,适用于大数据分析场景。 6. **HBase GUI**:HBase图形用户界面(GUI)是为了简化数据库的管理和监控。它可以提供以下...

    java代码使用thrift2操作hbase示例

    4. **添加数据**:HBase的数据以行键(Row Key)的形式存储。使用`Put`对象表示一条插入记录,指定行键和列族(Column Family),然后将`Put`对象添加到`Table`对象的批处理操作中。调用`table.put(Put[])`提交所有...

    hbase的学习

    HBase 是一个分布式、列式存储的开源数据库,基于 Google BigTable 的设计理念,专为处理大规模结构化和半结构化数据而设计。它运行在 HDFS(Hadoop 分布式文件系统)之上,提供高可靠性和高性能的存储,尤其适合...

    基于spring boot 的spring-boot-starter-hbase自动注解实现

    7. **事务处理**: 虽然HBase本身不支持ACID事务,但`HbaseTemplate`提供了一些方法,如`doInTransaction`,允许你在多个操作之间维护一致性。 8. **性能优化**: 可以通过调整HBase客户端配置来优化性能,比如设置...

    hbase-0.94.7-security.tar.gz

    HBase的数据模型基于列族,每个表由行和列族组成,列族下可以有任意多的列,这种设计使得HBase在大数据场景下具有出色的查询性能。 2. **版本化与时间戳** 每个HBase中的单元格(cell)都有一个时间戳,这使得系统...

    HBase在小米中的应用实践

    - **Column Family**:列族是HBase中的基本数据组织单位,每一个列族都存储在一个文件中。 - **Column Qualifier**:列族下面的列名。 - **Timestamp**:时间戳用来区分同一行同一列的不同版本的数据。 #### 架构 -...

    hbase和hive常用命令记录总结

    - 扫描`D_GPSINFO`表所有数据,但只返回`i`列族的数据,并且时间范围在1426040085276到1426040135656之间。 ```sql scan 'D_GPSINFO',{TIMERANGE=>[1426040085276,1426040135656]} ``` #### 获取特定行数据 ...

Global site tag (gtag.js) - Google Analytics