1\在vmware中更改了虚拟机的网络类型,--->NAT方式,(虚拟交换机的ip可以从vmvare的edit-->vertual network editor看到)
2、根据这个交换机(网关)的地址,来设置我们的客户端windown7的ip(Vmnet8这块网卡)
3、启动linux主机,修改linux系统的ip地址(通过图形界面修改),修改完成之后在terminal(命令行终端)中切换到root用户执行命令重启网络服务来让ip生效
4/修改主机名: 在root身份下,用命令修改 vi /etc/sysconfig/network 把hostname改为 yun-10-1
5/添加主机名和ip的映射 在root身份下 vi /etc/hosts 添加一行 192.168.2.100 yun-10-1
6/讲hadoop这个用户添加到sudoers里面去 在root身份下 vi /etc/sudoers ,在文件中找到 root ALL=ALL ALL ,下面加一行hadoop的
7/停止防火墙服务 在root身份下 service iptables stop
8、关闭防火墙的自动启动 在root身份下 chkconfig iptables off
9、reboot
10/用ping命令检测一下windows主机和linux服务器之间的网络连通性
11、进入linux修改图形界面启动配置,不要再启动图形界面了,在root身份下, vi /etc/inittab 将其改为id:3:initdefault:
12/再次reboot,将不会启动到图形界面了
(当以后你想启动图形界面的时候可以在命令行下敲startx (init 5) ,在图形界面下你想关闭图形界面,敲命令init 3)
===========华丽的分割线=============================
1/用终端连接linux服务器进行软件的安装(用secureCRT来连接)
2/安装jdk
--用filezilla工具上传jdk的压缩包
--解压jdk的压缩包到一个专门的安装目录下 /home/hadoop/app
--在hadoop的主目录下敲命令 tar -zxvf jdk-7u65-linux-i586.tar.gz -C ./app
--配置java的环境变量 sudo vi /etc/profile
在文件的最后添加:
export JAVA_HOME=/home/hadoop/app/jdk1.7.0_65
export PATH=$PATH:$JAVA_HOME/bin
3/让配置生效, source /etc/profile
===========帅酷的分割线=============================
1/用filezilla工具上传hadoop的安装包
2/把hadoop解压到app目录中去 tar -zxvf hadoop-2.4.1.tar.gz -C ./app/
3/修改hadoop的5大配置文件,位置在 /home/hadoop/app/hadoop-2.4.1/etc/hadoop目录下
-- vi hadoop-env.sh 改其中的JAVA_HOME为我们安装jdk的路径JAVA_HOME=/home/hadoop/app/jdk1.7.0_65
-- vi core-site.xml
<configuration>
<property>
<name>fs.defaultFS</name>
<value>hdfs://yun-10-1:9000</value>
</property>
<property>
<name>hadoop.tmp.dir</name>
<value>/home/hadoop/app/hadoop-2.4.1/tmp</value>
</property>
</configuration>
-- vi hdfs-site.xml
<configuration>
<property>
<name>dfs.replication</name>
<value>1</value>
</property>
</configuration>
-- 先修改文件名 mv mapred-site.xml.template mapred-site.xml
在编辑 vi mapred-site.xml
<configuration>
<property>
<name>mapreduce.framework.name</name>
<value>yarn</value>
</property>
</configuration>
-- vi yarn-site.xml
<configuration>
<property>
<name>yarn.resourcemanager.hostname</name>
<value>yun-10-1</value>
</property>
<property>
<name>yarn.nodemanager.aux-services</name>
<value>mapreduce_shuffle</value>
</property>
</configuration>
4/配置一下hadoop的环境变量
sudo vi /etc/profile
=============优美的分割线====================
1/无密登陆的配置
首先在客户端生成密钥对 ssh-keygen -t rsa 紧接着一直回车
然后在客户端拷贝公钥到远程 ssh-copy-id desthost
=========完美的分割线========hadoop安装完成========
- 浏览: 6194 次
- 性别:
- 来自: 北京
最新评论
-
bitray:
计算为主还是挖掘为主,还是存储为主
初学Hadoop(一)
相关推荐
编写该手册的主要目的是为用户提供一个清晰、易懂的Hadoop安装和配置流程,确保用户能够顺利搭建Hadoop环境,从而开始大数据处理的学习和实践。 2. **安装前的准备** - **硬件环境**:Hadoop通常需要多台服务器或...
本环节重点在于让学生掌握Hadoop的安装配置流程以及基本使用方法,为后续的大数据分析任务打下坚实基础。通过实际操作加深对Hadoop分布式文件系统(HDFS)及MapReduce计算框架的理解。 ### 四、Hadoop的简单应用 #...
1. **熟悉Hadoop安装流程**:从环境准备、软件安装到配置调试,全面了解Hadoop部署的全过程。 2. **掌握基本操作**:学会如何通过Web界面等工具进行集群状态监控和管理。 #### 三、实验过程知识点详解 1. **SSH无...
根据给定的文件信息,以下是对Cloudera Hadoop安装指南中的关键知识点的详细解析。 ### 关于Cloudera Hadoop安装指南 Cloudera Hadoop安装指南是为那些希望在自己的环境中部署并运行Cloudera Hadoop软件的用户提供...
【Hadoop 完整安装流程】是一篇针对新手的指南,详细介绍了如何一步步安装Hadoop,文中虽然没有提供具体的步骤,但我们可以从标题和描述中推测出安装Hadoop的重要性,尤其是对于想要进入大数据领域的人来说。Hadoop...
本文将针对标题为“hadoop组件程序包.zip”的资源,深入解析其中包含的组件、安装流程以及对初学者的重要性,帮助初学者快速掌握Hadoop的核心知识。 一、Hadoop核心组件 1. HDFS(Hadoop Distributed File System...
Hadoop2.2.0安装配置手册!完全分布式Hadoop集群搭建过程 按照文档中的操作步骤,一步步操作就可以完全实现hadoop2.2.0版本的完全分布式集群搭建过程
### Hadoop 安装与配置详解 #### 一、概述 Hadoop 是一个能够对大量数据进行分布式处理的...以上步骤为 Hadoop 安装配置的基本流程,根据实际需求可进一步优化和扩展。希望这些内容能帮助您顺利安装和使用 Hadoop!
总的来说,这个压缩包提供的资料涵盖了大数据生态中的关键组件,包括数据存储、处理、分析和迁移的全过程。对于想要学习和实践Hadoop及相关技术的人来说,这是一个很好的起点。通过详细阅读和执行这些安装步骤,不仅...
### 使用VMware安装Hadoop全过程详解 #### 一、前言 随着大数据技术的发展,Hadoop作为处理海量数据的重要工具之一,在数据存储与处理领域占据了举足轻重的地位。为了更好地学习和掌握Hadoop平台,本文将详细介绍...
以上是Hadoop的基础安装与配置流程,实际应用中可能还需要根据具体需求调整配置,例如添加安全性设置、优化性能参数等。在大数据处理的道路上,理解并熟练掌握Hadoop的安装部署是至关重要的第一步。
以下是我根据自身经验总结的Hadoop HA安装流程,这个流程已经在实际工作中得到验证,可以确保稳定运行。 一、环境准备 1. 操作系统:通常选择CentOS或Ubuntu等Linux发行版,确保系统稳定可靠。 2. 软件依赖:安装...
总结来说,通过Ansible自动化安装Hadoop集群,可以极大地简化部署流程,减少手动操作出错的可能性,同时提高运维效率。了解并熟练运用Ansible的这一特性对于任何希望管理大规模Hadoop集群的IT专业人员都是极其重要的...