`
sunasheng
  • 浏览: 122624 次
  • 性别: Icon_minigender_1
  • 来自: 北京
文章分类
社区版块
存档分类
最新评论

Ubuntu下Hadoop的单机版的安装

阅读更多

UbuntuHadoop的单机版的安装

1,安装ssh

sudo apt-get install ssh

2,安装rsync

sudo apt-get install rsync

3,配置ssh免密码登录

ssh-keygen -t rsa -p '' -f ~/.ssh/id_rsa

cat ~/.ssh/id_rsa.pub >>~/.ssh/authorized_keys

验证是否成功

ssh localhost

4,配置JDK环境和下载hadoop 1.0.3

JDK 安装路径为~/home/app/jdk1.6.0_30

Hadoop 1.0.3路径为~/hadoop-1.0.3

5,修改hadoop配置文件,指定jdk安装路径

vi conf/hadoop-env.sh

export JAVA_HOME=/home/app/jdk1.6.0_30

6,修改hadoop核心配置文件core-site.xml,配置HDFS的地址和端口号

vi conf/core-site.xml

<configuration>

<property>

<name>fs.default.name</name>

<value>hdfs://localhost:9000</value>

</property>

</configuration>

7,修改HadoopHDFS配置,修改replication

vi conf/hdfs-site.xml

<configuration>

<property>

<name>dfs.replication</name>

<value>1</value>

</property>

</configuration>

8,修改HadoopMapReduce的配置文件,配置的是JobTracker的地址和端口

vi conf/mapred-site.xml

<configuration>

<property>

<name>mapred.job.tracker</name>

<value>localhost:9001</value>

</property>

</configuration>

9,格式化Hadoop的文件系统HDFS

bin/hadoop namenode -format

10,启动Hadoop

bin/start-all.sh

11,最后验证hadoop是否安装完成,打开浏览器分别输入以下网址:

http://127.0.0.1:50030     MapReduceweb界面

http://127.0.0.1:50070   HDFSweb界面

如果能够查看说明Hadoop安装成功

 

分享到:
评论

相关推荐

    Hadoop安装教程_单机/伪分布式配置_Hadoop2.7.1/Ubuntu 16.04

    本教程主要讲述了在 Ubuntu 16.04 环境下安装 Hadoop 2.7.1 的步骤,包括单机模式、伪分布式模式和分布式模式三种安装方式。以下是本教程的知识点总结: 1. 安装前的准备工作:创建 hadoop 用户,设置密码,增加...

    安装Hadoop(单机版和集群)步骤

    本教程将详细介绍如何在Ubuntu 12.10操作系统上安装Hadoop的单机版和集群版。首先,确保你已经在VMware虚拟机上安装了Ubuntu 12.10系统,并准备安装Hadoop稳定版1.0.4。 **单机版安装步骤:** 1. **下载与解压...

    Ubuntu11.10下安装Hadoop0.20.2(单机伪分布式)

    ### Ubuntu11.10下安装Hadoop0.20.2(单机伪分布式) #### 一、安装虚拟机VMware Workstation v7.1.4 在开始Hadoop的安装之前,首先需要在宿主机上安装虚拟机软件VMware Workstation v7.1.4。这一步主要是为了搭建...

    Ubuntu下搭建Hadoop单机模式环境

    本文主要介绍了在Ubuntu系统上Hadoop单机版测试环境的搭建过程。

    hadoop单机版安装教程

    下面将详细介绍Hadoop单机版的安装步骤及相关知识点。 1. **系统要求** 在开始安装前,确保你的操作系统是Linux或Windows,并且有足够的硬盘空间,至少8GB。推荐使用64位系统,因为Hadoop不支持32位。对于Linux,...

    Ubuntu下的Hadoop安装教程

    2. **使用虚拟光驱安装**:使用虚拟光驱软件(例如 Daemon Tools)打开 ISO 文件,并执行里面的 `wubi.exe` 程序来在 Windows 环境下安装 Ubuntu。 3. **配置参数并重启**:根据提示配置安装参数,完成安装后需要...

    ubuntu hadoop单机模式安装详解.docx

    总结来说,这个文档详细介绍了在Ubuntu 11.10上安装和配置Hadoop单机模式的步骤,包括Linux的安装、SSH服务的设置、Hadoop的安装与配置,以及启动和检查Hadoop服务的方法。对于初学者来说,这是一个很好的实践教程,...

    单机版hadoop安装(linux)

    单机版 Hadoop 安装(Linux) 单机版 Hadoop 安装是指在单台机器上安装 Hadoop 环境,以便快速入门 Hadoop 和了解 Hadoop 的基本原理和使用方法。在这个安装过程中,我们将创建 Hadoop 用户组和用户,安装 JDK,...

    Ubuntu 1.04搭建hadoop单机版环境.pdf

    在本文中,我们将详细探讨如何在Ubuntu 12.04上搭建Hadoop单机版环境。Hadoop是一个开源的分布式计算框架,主要用于处理和存储大量数据。在单机环境中搭建Hadoop,主要目的是学习和测试Hadoop的功能,而不涉及实际的...

    第一章 大数据安装教程(Virtual&ubuntu&hadoop单机)

    本教程将指导你通过VirtualBox虚拟机软件,在Ubuntu操作系统上进行Hadoop单机部署,逐步深入理解大数据框架的基础架构和组件原理。 首先,我们需要下载虚拟机软件VirtualBox。访问官方网站,根据你的操作系统选择...

    大数据云计算技术系列 hadoop单机版搭建图文详解(共14页).pdf

    【大数据云计算技术系列 hadoop单机版搭建图文详解】 在当今的数据时代,大数据处理和分析已经成为企业及研究机构的核心需求之一。Apache Hadoop 是一种开源的分布式计算框架,它允许在大规模集群上处理和存储海量...

    Ubuntu 1.04搭建hadoop单机版环境.docx

    在本文档中,我们将探讨如何在Ubuntu 12.04上设置Hadoop的单机版环境。Hadoop是一个开源的分布式计算框架,由Apache软件基金会维护,它允许在廉价硬件上处理和存储大量数据。这个过程涉及到安装JDK、配置机器名、...

    hadoop 单机安装

    对于初学者来说,了解如何在单机模式下安装Hadoop是非常有帮助的,因为这可以帮助他们更好地理解Hadoop的基本组件和工作原理。 本文将详细介绍如何在Linux环境下进行Hadoop单机模式的安装,并确保整个过程简单易懂...

    Hadoop安装教程_单机_伪分布式配置

    本文档将详细介绍如何在Ubuntu 14.04环境下安装配置Hadoop 2.6.0版本,包括单机模式和伪分布式模式。无论您是初学者还是有一定经验的技术人员,本教程都将帮助您顺利完成Hadoop的安装和配置。 #### 二、环境准备 1....

    ubuntu下搭建hadoop

    本文将详细介绍如何在 Ubuntu 操作系统下搭建 Hadoop 的单机版与伪分布式环境。 #### 2.1 Hadoop 的单机搭建 ##### 2.1.1 准备工作 1. **安装 Ubuntu 虚拟机**:首先,需要在虚拟机中安装 Ubuntu。推荐使用 ...

    hadoop单机配置

    三、在Ubuntu下安装JDK 安装JDK是hadoop单机配置的第三步。在这里,我们安装了JDK环境,可以参考相关的安装教程。 四、修改机器名 修改机器名是hadoop单机配置的第四步。在这里,我们修改了机器名为"s15",以便于...

    RedHatlinux9.0下Hadoop单机配置归类.pdf

    RedHat Linux 9.0 下 Hadoop 单机配置归类 ...本文档详细介绍了 Red Hat Linux 9.0 下 Hadoop 单机配置的步骤和要求,从 Hadoop 安装前提到 Hadoop 配置的详细步骤,帮助读者快速掌握 Hadoop 的安装和配置。

    用虚拟机在ubuntu上搭建hadoop平台的单机模式

    本文旨在详细介绍如何在虚拟机环境下,利用Ubuntu系统搭建Hadoop平台的单机模式。通过本教程,您可以掌握从安装虚拟机到配置Hadoop环境的全过程。本文不仅涵盖了安装步骤,还提供了可能遇到的问题及其解决方案。 ##...

    ubuntu14.04下Hadoop2.7.2安装.pdf

    【Ubuntu 14.04下Hadoop 2.7.2安装】 在Ubuntu 14.04操作系统中安装Hadoop 2.7.2是大数据处理的基础步骤,尤其对于学习和实验分布式计算环境至关重要。以下是详细的安装过程: ### 一、前提安装 1. **JDK安装**:...

Global site tag (gtag.js) - Google Analytics