[root@hadoopmaster ~]# cat /etc/hosts
127.0.0.1 localhost localhost.localdomain localhost4 localhost4.localdomain4
::1 localhost localhost.localdomain localhost6 localhost6.localdomain6
192.168.1.50 hadoopmaster.jack hadoopmaster
192.168.1.51 hadoopslave1.jack hadoopslave1
192.168.1.52 hadoopslave2.jack hadoopslave2
[root@hadoopmaster ~]# cat /etc/sysconfig/network
NETWORKING=yes
HOSTNAME=hadoopmaster.jack
[root@hadoopmaster ~]# cat /etc/sysconfig/network-scripts/ifcfg-eth0
DEVICE="eth0"
BOOTPROT="static"
HWADDR="00:0c:29:fd:1f:b6"
IPADDR="192.168.1.50"
GATEWAY="192.168.1.1"
NETMASK="255.255.255.0"
ONBOOT="yes"
DNS1="202.96.128.166"
DNS2="192.168.1.1"
get new mac address
rm -rf /ect/udev/rule.d//70....net....xml
service iptables stop 临时关闭
chkconfig iptables off 永远关闭
关闭SELINUE
setenforce 0 临时生效
/etc/selinux/config SELINUE=disable 重启也生效
export SPARK_HOME=/opt/hadoop260/spark-1.3.1-bin-hadoop2.6
export SCALA_HOME=/software/scala-2.10.5
export HBASE_HOME=/opt/hadoop260/hbase-0.98.13-hadoop2
export HADOOP_HOME=/opt/hadoop260/hadoop-2.6.0
export PROTOC_HOME=/opt/protoc/
export HIVE_HOME=/opt/hadoop260/apache-hive-1.0.1-bin
export MAVEN_HOME=/software/maven/apache-maven-3.1.1/
export JAVA_HOME=/software/jdk/jdk1.7.0_75/
export CLASSPATH=.:$JAVA_HOME/lib:$HIVE_HOME/lib:$CLASSPATH
export PATH=$PATH:$JAVA_HOME/bin:$MAVEN_HOME/bin:$PROTOC_HOME/bin:$HADOOP_HOME/bin:$HIVE_HOME/bin:$HBASE_HOME/bin:$SCALA_HOME/bin:$SPARK_HOME/bin:.
umask 022
分享到:
相关推荐
eclipse连接远程hadoop集群开发时0700问题解决方案。修改源码,重新编译后hadoop-core-1.2.0
Title: Deep Learning with Hadoop Author: Dipayan Dev Length: 259 pages Edition: 1 Language: English Publisher: Packt Publishing Publication Date: 2017-03-06 ISBN-10: 1787124762 ISBN-13: 9781787124769 ...
Hadoop搭建步骤 Hadoop是一个大数据处理框架,环境搭建是学习Hadoop的第一步,但要成功搭建一个分布式环境,还是颇费些周折的。以下是Hadoop搭建步骤的详细讲解。 一、静态IP配置 在所有机器上手工设置静态IP,...
Hadoop 2.8 安装文档 Hadoop 是一个由 Apache 基金会开发的开源大数据处理框架,主要用于大规模数据存储和处理。下面是 Hadoop 2.8 安装文档,包括安装、配置和测试 Hadoop 集群。 安装 JDK 首先,需要安装 JDK,...
如果主机名不正确,可以通过修改"/etc/sysconfig/network"文件中的"HOSTNAME"来更改。同样,其他Slave节点也需要按照这个模板进行调整。 【Hadoop安装配置步骤】 安装Hadoop通常涉及以下步骤: 1. 安装Java开发...
Hadoop-2.2.0编译安装步骤 一,准备环境 1.1 分别设置三台节点ip地址(固定) 此步骤所有节点都要操作 vi /etc/sysconfig/network-scripts/ifcfg-eth0 1.2 修改三台节点主机名 此步骤所有节点都要操作 vi /...
在IT行业中,Hadoop是一个广泛使用的开源框架,用于存储和处理大规模数据集。本文将详细介绍如何从零开始安装和部署Hadoop 2.5.2版本。以下是详细步骤: 1. **先决条件** 在开始Hadoop的安装之前,确保你有一台或...
- **`vim /etc/sysconfig/network`**:编辑此文件可以设置主机名等相关信息。 - **`vim /etc/hosts`**:编辑此文件可以添加主机映射,例如: - `192.168.117.132 cmaster` - `192.168.117.133 slave0` - `192.168...
在`/etc/network/interfaces`文件中编辑配置,根据网络环境调整。 ### SSH无密登录 在所有节点间配置SSH无密登录,简化操作。在`hadoop`用户的家目录下,使用`ssh-keygen`生成公钥和私钥,然后将公钥复制到其他...
A team of machines are interconnected via a very fast network and provide better scaling and elasticity, but that is not enough. These clusters have to be programmed. A greater number of machines, ...
大数据集群 Hadoop HBase Hive Sqoop 集群环境安装配置及使用文档 在本文档中,我们将详细介绍如何搭建一个大数据集群环境,包括 Hadoop、HBase、Hive 和 Sqoop 的安装配置及使用。该文档将分为四部分:Hadoop 集群...
根据给定的文件标题、描述、标签以及部分内容,本文将详细介绍如何进行Hadoop 2.4.1集群的部署步骤。对于初次接触Hadoop集群搭建的学习者来说,本指南将提供一个全面且易于理解的过程。 ### 一、准备工作 #### 1. ...
### Hadoop安装与配置知识点详解 #### 一、Hadoop简介及核心组件 **Hadoop** 是Apache软件基金会旗下的一款开源分布式计算平台,其主要功能是处理和存储大规模数据集。Hadoop的核心组件包括 **Hadoop分布式文件...
4. **配置IP地址和hostname**:编辑`/etc/sysconfig/network`和`/etc/hosts`文件,配置正确的IP地址和hostname。 5. **分发公钥到其他节点**:使用`ssh-copy-id node2`和`ssh-copy-id node3`命令将公钥复制到其他...
例如,vi /etc/sysconfig/network => HOSTNAME=hadoop01。 IP 信息的编辑 在 hadoop 安装过程中,需要编辑 IP 信息,以便将 IP 地址、子网掩码、网关、DNS 等信息配置到一起。例如,vi /etc/sysconfig/network-...