为了安装hadoop废了好大的劲才把esxi5.5给装好。
同时装了centos6.5,由于hadoop里面有个免密码登陆所以这里讲的就是免密码登陆。
看了大家的博客文章发现转发的一部分,写ubuntu的一部分,写centos的又有一部分。
可能自己理解的程度有限,现把解决的部分问题列出来,供大家参考:
1.我装好了centos却发现没有网卡了,大家记住检查下:
vi /etc/sysconfig/network-scripts/ifcfg-eth0 DEVICE=eth0 TYPE=Ethernet UUID=217b80bd-e082-4b3f-97b8-e73a0ebf2af1 ONBOOT=yes NM_CONTROLLED=yes BOOTPROTO=none IPADDR=192.168.2.201 PREFIX=24 GATEWAY=192.168.2.1 DNS1=192.168.2.1 DEFROUTE=yes IPV4_FAILURE_FATAL=yes IPV6INIT=no NAME="System eth0" HWADDR=00:0C:29:2D:B8:FD LAST_CONNECT=1393656069
2.在开启免登陆之前要关闭一些防火墙,参考(http://blog.cnwyhx.com/?p=313)
生成key的方法可参考(http://www.iteblog.com/archives/781)
3.记得做完这些之后重启一下就可以正常免密码登陆了
相关推荐
hadoop2.3 native centos6.5 x64
### CentOS6.5系统下Hadoop2.6.0完全分布式环境安装与配置知识点 #### 一、系统环境准备 **1.1 修改主机名** 为了确保主机名的一致性,首先需要更改主机名为“Master”: ```bash sudo vim /etc/sysconfig/...
几周前,我们发布了一个 Apache Hadoop 2.3 Docker 镜像(使用 CentOS 6.5 作为来宾操作系统)——这很快成为 DockerHadoop 镜像。 在我们基于 CentOS 的 Hadoop 2.3 Docker成功之后,我们收到的反馈和功能请求与 ...
- **版本选择**:根据 CentOS 6.5 系统选择合适的 Hadoop 版本(如 Hadoop 2.x)。 - **下载 Hadoop**:从官方网站下载 Hadoop 的 tar.gz 包。 **3.3 安装Hadoop** - **解压 Hadoop**:将下载的文件解压至 `/usr/...
- **安装过程**: 按照标准流程安装CentOS 6.5,并进行必要的配置(如网络配置、分区设置等)。 **2.5 设置CentOS 6.5** - **网络配置**: 确保网络配置正确,以便于后续操作。 - **hosts文件**: 在每个节点的hosts...
##### 2.3 Hadoop源配置 Hadoop源主要由CDH、CM、Impala三个部分组成。本教程使用Cloudera Manager(CM)来进行Hadoop集群的管理和部署。CM不仅可以简化部署过程,还能提供实时监控和管理服务。将下载的CDH、CM、...
本章节主要介绍如何在 CentOS 6.5 系统上搭建 Hadoop 2.2.0 的开发环境,并进行编译。 ##### 1.1 安装 JDK 在编译 Hadoop 前,首先需要安装 JDK 并配置其环境变量。这里以 jdk-7u79-linux-x64 版本为例: 1. **...
工作节点主要承担数据处理的任务,其建议配置包括两路Intel®至强处理器、8核/CPU、主频2.3GHz或以上、256GB内存、至少12个4TB的SATA硬盘用于数据盘(配置RAID1)、至少两个万兆网卡,以及2U机架式服务器尺寸。...
- **系统安装**:包括配置RAID、安装操作系统、安装英特尔®Hadoop发行版以及使用管理节点进行节点配置等步骤。 #### 二、系统要求 **2.1 硬件要求** - **CPU**:通常推荐使用最新的英特尔处理器,以获得最佳性能...
**3.3 解决 CentOS 6.5 中 SSH 登录时出现的警告信息** - **原因**: 当 SSH 连接首次建立时,会出现警告信息。 - **解决方案**: 忽略此警告,或通过修改 SSH 配置文件来禁用此警告。 #### 四、总结 本文详细介绍...
- **推荐操作系统**:为了确保与GBase UP版本的良好兼容性,建议使用CentOS 6.5作为基础操作系统。 - **安装模式**:选择“软件开发工作站”模式进行安装,以获得必要的软件开发工具和库。 - **RPM包数量**:安装...