`
chenlb
  • 浏览: 696037 次
  • 性别: Icon_minigender_1
  • 来自: 杭州
社区版块
存档分类
最新评论

Hadoop 快速入门(二)--Fully-Distributed Mode

阅读更多
上一篇记录了本机模式我虚拟分布模式。http://www.blogjava.net/chenlb/archive/2008/08/11/221311.html

现我在虚拟机里开三台机子,分别命名为:master(172.16.249.210),slave-1(172.16.249.211),slave-2(172.16.249.212)。

master可以无密码登录到slave机。
每台机子都匹配ip对应名。
127.0.0.1       localhost       localhost

172.16.249.210  master
172.16.249.211  slave-1
172.16.249.212  slave-2

修改conf/masters文件和conf/slaves文件。
conf/masters文件:
master

conf/slaves文件:
slave-1
slave-
2

格式化后可以启动了:
[chenlb@master hadoop-0.17.1]$ bin/start-all.sh 


参考资料:
http://hadoop.apache.org/core/docs/r0.17.1/quickstart.html
http://hadoop.apache.org/core/docs/r0.17.1/cluster_setup.html
分享到:
评论

相关推荐

    hadoop单节点配置

    Hadoop 支持三种模式:Local(Standalone)Mode、Pseudo-Distributed Mode 和 Fully-Distributed Mode。在单节点模式下,Hadoop 默认情况下运行于 Local Mode,作为一个单一的 JAVA 进程,多用于调试。 配置文件 ...

    hadoop2.7.2(window版本).zip

    Hadoop在Windows上的运行模式通常有本地模式(Local Mode)、伪分布式模式(Pseudo-Distributed Mode)和完全分布式模式(Fully-Distributed Mode)。对于初学者,本地模式最简单,它在单个Java进程中模拟整个Hadoop...

    Hadoop安装配置与部署运行

    - Fully-Distributed Mode:全分布式模式,真正的多节点集群环境。 3. 前提假设 - 您对Linux操作系统有一定的了解,因为Hadoop通常部署在Linux环境下。 - 您已经安装了Java开发环境(JDK)并设置了相应的环境变量。...

    Hadoop完全自学手册

    - **Fully-Distributed Mode**:生产环境使用的完全分布式模式,所有组件分布在多台机器上。 7. **配置HDFS**:在`core-site.xml`中设置默认文件系统,例如`<name>fs.defaultFS</name>`,指定Namenode的地址和端口...

    Hadoop-1.1.2上路 v1.0

    在Hadoop 1.1.2版本的集群部署中,可以选择单机模式(Single Node Setup)、伪分布式模式(Pseudo-Distributed Mode)或者完全分布式模式(Fully-Distributed Mode)。对于初学者,通常从单机模式开始,逐步过渡到更...

    Hadoop简介及Apache Hadoop三种搭建方式

    3. **完全分布式模式(Fully-Distributed Mode)**:这是Hadoop的真实部署模式,适用于生产环境。在这种模式下,Hadoop分布在多台物理或虚拟机上,每个组件都在不同的节点上运行,提供了高可用性和容错性。 在搭建...

    hadoop环境设置.pdf

    大数据前提:hadoop环境设置。 Hadoop 的安装方式有三种模式:单机模式(Standalone Mode)、伪分布式模式(Pseudo- Distributed Mode)、完全分布式模式(Fully-Distributed Mode)

    Hadoop面试100题.pdf

    - **知识点说明**:Hadoop支持三种运行模式:单机模式(Local Mode)、伪分布模式(Pseudo-Distributed Mode)和全分布模式(Fully Distributed Mode)。每种模式都有其特定的用途和应用场景。 2. **单机(本地)...

    基于Hadoop的大数据处理系统.pdf

    - **Fully-Distributed Mode**:全分布式模式,适用于生产环境,多台机器组成真正的分布式集群,提供高可用性和扩展性。 【Hadoop生态系统】 Hadoop的生态系统非常丰富,包括Hive(用于数据仓库和SQL查询)、HBase...

    IT十八掌徐培成HADOOP笔记

    3. **完全分布模式(Fully Distributed Mode)**:这是Hadoop最常用的部署方式,其中各个Hadoop服务(如NameNode、DataNode、ResourceManager、NodeManager等)分布在不同的机器上。 为了使完全分布式模式下的...

    手把手教你Hadoop环境搭建、词频统计demo及原理

    Hadoop有三种运行模式:本地模式(Local Mode)、伪分布式模式(Pseudo-Distributed Mode)和完全分布式模式(Fully-Distributed Mode)。本地模式用于开发和测试,所有组件都在同一台机器上运行;伪分布式模式在...

    各个版本winutils-master

    4. **Hadoop的运行模式**:Hadoop可以在本地模式(Local Mode)、伪分布式模式(Pseudo-Distributed Mode)和完全分布式模式(Fully-Distributed Mode)下运行。在Windows上,通常使用伪分布式模式进行开发和测试。 ...

    Hadoop提交Job执行MR程序代码.zip

    3. **完全分布式模式(Fully-Distributed Mode)**:在多台机器上运行真正的Hadoop集群,适合处理大规模数据。 理解并熟练掌握这些知识点,对于编写和优化Hadoop MapReduce程序至关重要。在实际开发过程中,根据...

    HDFS部署与Shell命令使用

    3. **分布式模式(Fully Distributed Mode)**: - **定义**:这是HDFS最常用的部署模式,所有组件分别运行在不同的节点上。 - **特点**:支持高可用性和数据冗余,适用于生产环境中的大规模数据处理。 #### HDFS...

    Hadoop.docx

    3. Fully-Distributed Mode(完全分布式模式):在多台物理或虚拟机上部署,适合生产环境。 4. FDM HA(高可用完全分布式模式):在完全分布式基础上增加了HA机制,确保NameNode和ResourceManager等关键组件的冗余和...

    HBase的安装、配置、管理与编程

    true: fully-distributed with unmanaged Zookeeper Quorum (see hbase-env.sh) ``` 在conf/hbase-env.sh中,设置JAVA_HOME、HBASE_MANAGES_ZK以及HBASE_CLASSPATH。同时,将hadoop的hdfs-site.xml拷贝到hbase的...

    hive 三种启动方式及用途

    3. **完全分布式模式(Fully Distributed Mode)** 这是最常见的运行模式,适用于生产环境。在完全分布式模式下,Hive的服务会部署在Hadoop集群上,与HDFS、YARN等组件协同工作。MetaStore用于存储元数据,...

Global site tag (gtag.js) - Google Analytics