`
moxpeter
  • 浏览: 35782 次
  • 来自: 北京
文章分类
社区版块
存档分类
最新评论

HBase与Hadoop配置

 
阅读更多

这里直接cloudera了

如果从apache的服务器上下载,hbase 与hadoop的版本需要匹配,

版本不匹配会出现n种问题,如master起不来,连不上zookeeper之类的

yum install hbase

会提示安装hadoop和zookeeper, y回车

配置hadoop

core-site.xml

hdfs-site.xml

mapred-site.xml

环境变量添加HADOOP_HOME 我的系统是f16,yum安装之后在/usr/lib/hadoop

hbase-site.xml

<configuration>
<property>
  <name>dfs.replication</name>
  <value>1</value>
</property>
<property>
  <name>hbase.cluster.distributed</name>
  <value>true</value>
</property>

<property>
  <name>hbase.rootdir</name>
  <value>hdfs://localhost:9000/hbase</value>
</property>
</configuration>

其中

hbase.rootdir中的hdfs://localhost:9000 需要和hadoop的配置文件core-site.xml中的fs.default.name一致

hadoop和hbase配置完成后

cd $HADOOP_HOME/bin

sh start-all.sh

cd $HBASE_HOME/bin

sh start-hbase.sh start

hbase shell

status


that's all ,over.


分享到:
评论

相关推荐

    Hbase和Hadoop JMX监控实战

    HBase与Hadoop的结合,使得HBase可以在Hadoop的分布式环境中高效地处理大规模数据。 JMX允许开发者在Java应用中定义管理对象(MBeans),这些对象可以暴露有关应用状态的信息,并提供操作来改变应用的行为。对于...

    hadoop+hbase+zookeeper集群配置流程及文件

    提供的文档`hadoop_zookeeper_hbase集群配置.docx`应包含详细的步骤和配置示例,而`配置文件.rar`则可能包含了预设的配置模板,可以作为配置参考。在实际操作时,务必根据具体环境调整配置,确保所有节点之间的网络...

    hbase-hadoop+database系统入门书籍

    根据提供的文件信息,我们可以总结出以下关于HBase与Hadoop结合使用的大数据系统入门的关键知识点: ### HBase简介 HBase是一种分布式、可扩展的列式存储系统,它基于Google的Bigtable论文设计并实现。HBase是...

    hbase-0.90.5.tar.gz与hadoop0.20.2版本匹配

    在本场景中,我们讨论的是HBase的0.90.5版本与Hadoop的0.20.2版本的兼容性。 标题提及的“hbase-0.90.5.tar.gz”是一个压缩文件,包含了HBase的0.90.5版本的所有源码、编译后的二进制文件、配置文件以及相关的文档...

    较全面的Hbase与hadoop分析报告.doc

    HBase 利用 Hadoop 的分布式存储能力,实现了对大规模数据的高效管理和查询,而 Hadoop 则通过 HDFS 提供了可靠的数据存储和计算平台。理解这两个组件的工作原理和相互关系对于优化大数据环境中的数据管理和分析至关...

    hadoop-common-2.7.1-bin-master.zip+hbase-2.0.0-bin.tar.gz Hbase与Hadoop版本对应

    本文将深入探讨Hadoop Common 2.7.1与HBase 2.0.0之间的关系,以及在Windows环境下如何正确安装和配置这两个组件。 Hadoop是Apache软件基金会开发的一个开源框架,主要用于处理和存储大规模数据集。Hadoop Common是...

    hadoop+zookeeper+hbase集群搭建配置说明

    在搭建HBase集群时,我们需要配置HBase的主RegionServer(Master)、RegionServer实例以及与Zookeeper的连接。此外,还要设置表和列族的属性,如块大小、缓存设置等,以优化性能。 在实际搭建过程中,首先,你需要...

    hadoop-2.7.2-hbase-jar.tar.gz

    这个过程可能涉及到配置Hadoop的环境变量,如HADOOP_CLASSPATH,以及修改HBase的配置文件,如hbase-site.xml,以指定HDFS的地址和端口。 此外,HBase的JAR包也包含了一些核心组件,如RegionServer(负责数据存储和...

    Hadoop和Hbase 配置文件-完整好的

    4. `zoo.cfg`: 虽然HBase使用ZooKeeper作为协调服务,但ZooKeeper的配置通常与Hadoop共享,这里可能包含ZooKeeper服务器列表、会话超时时间等。 在使用这些配置文件时,你需要确保所有主机名正确,并且文件路径与你...

    hbase安装与使用

    3. **配置 HBase 环境变量**:修改配置文件 `/usr/hbase/hbase-0.98.3-hadoop2/conf/hbase-env.sh`,设置正确的 JDK 路径,并开启 HBase 自带的 ZooKeeper 管理服务。 ```bash # 设置 JDK 路径 export JAVA_HOME...

    hadoop2.6及hbase0.96伪分布式安装配置文件

    3. **Hadoop整合**:确保HBase知道Hadoop的配置,可以通过在`hbase-site.xml`中设置`hbase.rootdir`指向HDFS的路径,如`hdfs://localhost:9000/hbase`,并拷贝Hadoop的配置文件到HBase的conf目录。 4. **初始化...

    搭建hadoop单机版+hbase单机版+pinpoint整合springboot.zip

    搭建一个完整的Hadoop单机版、HBase单机版以及Pinpoint与SpringBoot的整合环境,需要对大数据处理框架和微服务监控有深入的理解。在这个过程中,我们将涉及到以下几个关键知识点: 1. **Hadoop单机版**:Hadoop是...

    windows10 搭建最新的 hadoop 3.1.3 和 hbase 2.2.2 测试环境 配置文件

    在Windows 10环境下搭建Hadoop 3.1.3和HBase 2.2.2测试环境是一项技术性较强的任务,涉及到多个组件的安装、配置以及相互间的协同工作。以下将详细介绍如何进行这一过程,以及相关的配置文件作用。 首先,我们需要...

    HadoopHbaseZookeeper集群配置

    【Hadoop Hbase Zookeeper集群配置】涉及到在Linux环境下搭建分布式计算和数据存储系统的流程,主要涵盖以下几个关键知识点: 1. **集群环境设置**:一个基本的Hadoop Hbase Zookeeper集群至少需要3个节点,包括1个...

    Hadoop3.1.1集成hbase2.1.1

    1. Hadoop3.1.1与HBase2.1.1集成的基本步骤包括: - 下载HBase2.1.1的压缩包并解压到Hadoop的安装目录下。 - 配置环境变量,添加HBase的安装路径到系统的PATH中,以及设置HBASE_HOME指向HBase的安装目录。 - 修改...

    hbase+hadoop下载(linux中的tar包)

    了解并掌握Hadoop和HBase的安装、配置、使用及优化,对于在大数据环境中构建高效、可靠的存储和分析系统至关重要。在Linux环境下,这需要对操作系统、网络、文件系统有深入理解,并具备一定的编程能力。

    Hadoop+HBase+Java API

    Java API使得这个过程变得方便,因为它提供了与Hadoop和HBase交互所需的类和方法。 具体使用Java API开发时,首先需要配置Hadoop和HBase的相关环境,包括设置HADOOP_CONF_DIR和HBASE_HOME环境变量。然后,开发者...

    [Doker+HBASE+HADOOP+Zookeeper]全分布式环境搭建

    [Doker+HBASE+HADOOP+Zookeeper]全分布式环境搭建

Global site tag (gtag.js) - Google Analytics