2013-06-06 14:58:43,131 INFO org.apache.hadoop.hbase.regionserver.SplitTransaction: Starting split of region TestTable,8WXEKLMO72,1370431726449.974515d502b3876142181e57e3d4a74e.
2013-06-06 14:58:43,131 DEBUG org.apache.hadoop.hbase.regionserver.SplitTransaction: regionserver:60020-0x13f13f3aa5b002b Creating ephemeral node for 974515d502b3876142181e57e3d4a74e in SPLITTING state
2013-06-06 14:58:43,134 DEBUG org.apache.hadoop.hbase.zookeeper.ZKAssign: regionserver:60020-0x13f13f3aa5b002b Attempting to transition node 974515d502b3876142181e57e3d4a74e from RS_ZK_REGION_SPLITTING to RS_ZK_REGION_SPLITTING
2013-06-06 14:58:43,137 DEBUG org.apache.hadoop.hbase.zookeeper.ZKAssign: regionserver:60020-0x13f13f3aa5b002b Successfully transitioned node 974515d502b3876142181e57e3d4a74e from RS_ZK_REGION_SPLITTING to RS_ZK_REGION_SPLITTING
2013-06-06 14:58:43,139 DEBUG org.apache.hadoop.hbase.regionserver.HRegion: Closing TestTable,8WXEKLMO72,1370431726449.974515d502b3876142181e57e3d4a74e.: disabling compactions & flushes
2013-06-06 14:58:43,139 DEBUG org.apache.hadoop.hbase.regionserver.HRegion: waiting for 1 compactions to complete for region TestTable,8WXEKLMO72,1370431726449.974515d502b3876142181e57e3d4a74e.
2013-06-06 14:58:43,772 INFO org.apache.hadoop.hbase.regionserver.StoreFile: NO General Bloom and NO DeleteFamily was added to HFile (hdfs://dw35.kgb.sqa.cm4:54310/hbasess/TestTable/974515d502b3876142181e57e3d4a74e/.tmp/e8d0069c50e140f39b688601a27e38e5)
2013-06-06 14:58:43,774 INFO org.apache.hadoop.hbase.regionserver.StoreFile: NO General Bloom and NO DeleteFamily was added to HFile (hdfs://dw35.kgb.sqa.cm4:54310/hbasess/TestTable/974515d502b3876142181e57e3d4a74e/.tmp/e8d0069c50e140f39b688601a27e38e5)
2013-06-06 14:58:43,774 INFO org.apache.hadoop.hbase.regionserver.HRegion: compaction interrupted by user
java.io.InterruptedIOException: Aborting compaction of store info in region TestTable,8WXEKLMO72,1370431726449.974515d502b3876142181e57e3d4a74e. because user requested stop.
at org.apache.hadoop.hbase.regionserver.Store.compactStore(Store.java:1680)
at org.apache.hadoop.hbase.regionserver.Store.compact(Store.java:1078)
at org.apache.hadoop.hbase.regionserver.HRegion.compact(HRegion.java:1339)
at org.apache.hadoop.hbase.regionserver.compactions.CompactionRequest.run(CompactionRequest.java:251)
at java.util.concurrent.ThreadPoolExecutor$Worker.runTask(ThreadPoolExecutor.java:886)
at java.util.concurrent.ThreadPoolExecutor$Worker.run(ThreadPoolExecutor.java:908)
at java.lang.Thread.run(Thread.java:662)
2013-06-06 14:58:43,774 INFO org.apache.hadoop.hbase.regionserver.HRegion: Running close preflush of TestTable,8WXEKLMO72,1370431726449.974515d502b3876142181e57e3d4a74e.
2013-06-06 14:58:43,774 DEBUG org.apache.hadoop.hbase.regionserver.HRegion: Started memstore flush for TestTable,8WXEKLMO72,1370431726449.974515d502b3876142181e57e3d4a74e., current region memstore size 251.5m
2013-06-06 14:58:43,775 DEBUG org.apache.hadoop.hbase.regionserver.HRegion: Finished snapshotting TestTable,8WXEKLMO72,1370431726449.974515d502b3876142181e57e3d4a74e., commencing wait for mvcc, flushsize=263694480
2013-06-06 14:58:43,775 INFO org.apache.hadoop.hbase.regionserver.compactions.CompactionRequest: aborted compaction: regionName=TestTable,8WXEKLMO72,1370431726449.974515d502b3876142181e57e3d4a74e., storeName=info, fileCount=10, fileSize=2.7g (1.4g, 340.4m, 113.5m, 96.9m, 113.4m, 113.4m, 113.5m, 156.5m, 113.6m, 140.8m), priority=9, time=6209901276081328; duration=59sec
相关推荐
### HBase开启审计日志详解 #### 一、概述 HBase是一款分布式列式存储系统,基于Google的Bigtable论文实现。它具有高可靠性、高性能、面向列、可伸缩的特点,非常适合处理海量数据。在大数据领域,HBase被广泛用于...
hadoop、hbase、zookeeper错误日志及相关应对措施 本文将对hadoop、hbase和zookeeper的错误日志进行总结和分析,并提供相关的应对措施,以帮助读者更好地理解和解决这些错误。 Hadoop-0.20.2 & hbase-0.90.1 集群...
本使用kafka,spark,hbase开发日志分析系统。 ![architecture](/docs/images/architecture.png "architecture") ### 软件模块 * Kafka:作为日志事件的消息系统,具有分布式,可分区,可冗余的消息服务功能。...
本项目"java基于spark streaming和kafka,hbase的日志统计分析系统"提供了一个高效的数据处理框架,用于实时处理大规模日志数据。以下是关于这个系统的详细介绍,以及涉及的技术栈的核心知识点。 1. **Spark ...
在大数据技术领域,Flume和HBase是两个关键的组件,它们在日志数据的采集、传输和存储中发挥着重要作用。本篇文章将详细介绍这两个工具的使用及其在实际应用中的结合。 首先,让我们来理解Flume。Apache Flume是一...
基于kafka和spark streaming和hbase的日志统计分析系统.zip基于kafka和spark streaming和hbase的日志统计分析系统.zip基于kafka和spark streaming和hbase的日志统计分析系统.zip基于kafka和spark streaming和hbase的...
在IT行业中,尤其是在大数据处理领域,HBase是一个广泛使用的分布式、高性能、列式存储的NoSQL数据库。HBase是建立在Hadoop文件系统(HDFS)之上,为处理大规模数据提供了一个高效的数据存储解决方案。而Spring Data...
本科毕业设计项目,基于spark streaming+flume+kafka+hbase的实时日志处理分析系统 基于spark streaming+flume+kafka+hbase的实时日志处理分析系统 本科毕业设计项目,基于spark streaming+flume+kafka+hbase的...
3,ERROR: org.apache.hadoop.hbase.MasterNotRunningException: Retried 7 times 4,ERROR: org.apache.hadoop.hbase.MasterNotRunningException: Retried 7 times 这是我亲自遇到过的错误及解决过程,希望对大家...
基于HBASE分布式存储的通用海量日志系统设计方法研究涉及的关键技术主要包括分布式存储系统HBASE和REDIS分布式缓存技术,以及海量日志数据的高效存储与查询处理。以下详细解析了文章中提到的关键知识点。 HBASE...
7. **监控和故障排查**:如何通过HBase的仪表盘和日志进行监控,以及在遇到问题时的排查方法。 8. **复制和备份**:HBase支持数据复制以提高可用性,文档会解释如何配置复制和进行数据备份与恢复。 9. **安全与...
HBase是一种分布式、基于列族的NoSQL数据库,由Apache软件基金会开发并维护,是Hadoop生态系统中的重要组件。这份“HBase官方文档中文版”提供了全面深入的HBase知识,帮助用户理解和掌握如何在大数据场景下有效地...
总结来说,这个系统构建了一个完整的数据流处理链路,从数据采集(Flume)、中间缓存(Kafka)、实时处理(Spark-Streaming)到数据存储(HBase),实现了高效、实时的日志分析和异常检测。这样的架构在现代大数据...
- **大规模数据存储**:适合于需要存储和检索大量数据的应用场景,如日志分析、用户行为追踪等。 - **实时数据分析**:由于HBase提供了低延迟的随机读写能力,因此非常适合于需要实时处理数据的应用场景。 - **高...
搭建pinpoint需要的hbase初始化脚本hbase-create.hbase
使用HBase的Compaction和Split机制,保持Region的平衡;并考虑使用二级索引提高查询效率。 六、总结 通过SpringBoot搭建的HBase可视化系统,使得非技术人员也能便捷地管理和操作HBase,降低了使用门槛,提高了工作...
搭建Hadoop集群,并使用flume+kafka+storm+hbase实现日志抓取分析,使用一个主节点master、两个slave节点
如果出现错误提示,例如 Master 启动失败的情况,可以通过检查日志文件找到具体的错误信息。例如: ```bash 2015-02-02 03:25:33,639 ERROR [main] master.HMasterCommandLine: Master exiting java.lang....