`
- 浏览:
64320 次
- 性别:
- 来自:
苏州
-
1. 准备机器:
总共三台机器
192.168.200.102 xen(namenode,jobtracker)
192.168.200.88 vps79(datenode,tasktracker)
192.168.200.88 vps78(datenode,tasktracker)
2. 修改hosts 文件
三台机器的hosts(/etc/hosts)添加如下内容
192.168.200.78 vps78
192.168.200.88 vps79
192.168.200.102 xen
3. 配置ssh
在三台机器上分别创建用户:useradd hadoop
在xen,vps78,vps79上执行以下操作:
执行命令切换用户:su – hadoop
执行命令生成.ssh文件夹: ssh-keygen –t rsa,全部直接回车
执行命令切换目录 cd /home/hadoop/.ssh
在xen上执行以下操作:
执行命令生成authorized_keys文件:cp id_rsa.pub authorized_keys
执行命令建立本身信任连接:ssh xen
在vps78,vps79上执行以下操作:
scp hadoop@xen:/home/hadoop/.ssh/* /home/hadoop/.ssh/
4. 设置环境变量
打开/etc/profile,添加如下变量并source生效
5.下载hadoop-0.21.0
6.安装hadoop-0.21.0
1) 在xen上将hadoop-0.21.0解压到/home/hadoop/下
2)打开/home/hadoop/hadoop-0.21.0/conf下面的hadoop-env.sh在export HADOOP_NAMENODE_OPTS前面添加export JAVA_HOME
3) 打开/home/hadoop/hadoop-0.21.0/conf下面的core-site.sh添加如下内容
4) 打开/home/hadoop/hadoop-0.21.0/conf下面的hdfs-site.sh添加如下内容
5) 打开/home/hadoop/hadoop-0.21.0/conf下面的mapred-site.sh,添加如下内容
6)在vps78,vps79/home/hadoop/下分别创建hadoop-0.21.0文件夹
7)将xen上的hadoop-0.21.0安装文件分别拷贝到vps78,vps79
Scp /home/hadoop/hadoop-0.21.0/* hadoop@vps78: /home/hadoop/hadoop-0.21.0
Scp /home/hadoop/hadoop-0.21.0/* hadoop@vps79: /home/hadoop/hadoop-0.21.0
8)格式化namenode
Hadoop namenode -format
9)启动
执行start-all.sh
注意事项:
机器的名字不能有下划线(_)
- 大小: 6 KB
- 大小: 13.9 KB
- 大小: 4.1 KB
- 大小: 6.5 KB
- 大小: 4.1 KB
分享到:
Global site tag (gtag.js) - Google Analytics
相关推荐
Hadoop-0.21.0分布式集群配置.doc
hadoop-0.21.0-raid.jar
hadoop-0.21.0-streaming.jar
安装和使用修复版hadoop-0.21.0-eclipse-plugin.jar的步骤通常包括: 1. **下载插件**:首先从可靠来源下载修复版的jar文件,即"hadoop-0.21.0-eclipse-plugin.jar"。 2. **导入Eclipse**:在Eclipse中,选择“Help...
hadoop-0.21.0-mrunit.jar
hadoop-0.21.0-eclipse-plugin.jar
Hadoop是一个分布式系统基础架构,由Apache基金会开发。用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力高速运算和存储。简单地说来,Hadoop是一个可以更容易开发和运行处理大规模数据...
hadoop-hdfs-test-0.21.0.jar
安装该插件通常通过Eclipse的“软件更新”功能来完成,或者手动下载jar包(如hadoop-0.21.0-eclipse-plugin.jar)后,将其复制到Eclipse的plugins目录下。配置过程中,需要指定Hadoop的安装路径,以便插件能够正确...
hadoop-0.21.0-datajoin.jar
hadoop-0.21.0-gridmix.jar
hadoop-0.21.0-mumak.jar
hadoop-0.21.0-index.jar
hadoop-0.21.0-capacity-scheduler.jar
hadoop-0.21.0-vaidya.jar
hadoop-0.21.0-vertica.jar