`
wbj0110
  • 浏览: 1611052 次
  • 性别: Icon_minigender_1
  • 来自: 上海
文章分类
社区版块
存档分类
最新评论

Hadoop伪分布式配置文件

阅读更多

1. [代码]core-site.xml    

<?xml version="1.0"?>
<?xml-stylesheet type="text/xsl" href="configuration.xsl"?>

<!-- Put site-specific property overrides in this file. -->

<configuration>
    <property>
        <name>fs.default.name</name>
        <value>hdfs://localhost:9000/</value>
    </property>

    <property>
        <name>hadoop.tmp.dir</name>
        <value>/home/wangxing/hadoop-0.20.2/tmpdir</value>
    </property>
</configuration>

2. [代码]hdfs-site.xml    

<?xml version="1.0"?>
<?xml-stylesheet type="text/xsl" href="configuration.xsl"?>

<!-- Put site-specific property overrides in this file. -->

<configuration>
    <property>
        <name>dfs.replication</name>
        <value>1</value>
    </property>
    
    <property>  
        <name>dfs.name.dir</name>
        <value>/home/wangxing/hadoop-0.20.2/tmpdir/hdfs/name</value>  
    </property>  
    
    <property>  
        <name>dfs.data.dir</name>  
        <value>/home/wangxing/hadoop-0.20.2/tmpdir/hdfs/data</value>  
    </property>
</configuration>

3. [代码]mapred-site.xml   

<?xml version="1.0"?>
<?xml-stylesheet type="text/xsl" href="configuration.xsl"?>

<!-- Put site-specific property overrides in this file. -->

<configuration>
    <property>
        <name>mapred.job.tracker</name>
        <value>localhost:9001</value>
    </property>

    <property>  
        <name>mapred.local.dir</name>  
        <value>/home/wangxing/hadoop-0.20.2/tmpdir/mapred/local</value>  
    </property>  
    
    <property>  
        <name>mapred.system.dir</name>  
        <value>/home/wangxing/hadoop-0.20.2/tmpdir/mapred/system</value>  
    </property>

</configuration>
分享到:
评论

相关推荐

    hadoop伪分布式安装.pdf

    ### Hadoop伪分布式安装知识点详解 #### 一、Hadoop伪分布式概述 Hadoop是一种能够处理海量数据的大规模分布式计算框架。它通过将任务分解到多个计算机节点上并行处理来提高数据处理效率。Hadoop支持多种运行模式,...

    hadoop伪分布式配置教程.doc

    【Hadoop 伪分布式配置教程】 本教程详细指导如何在Ubuntu 14.04 64位系统上配置Hadoop的伪分布式环境。虽然教程是基于Ubuntu 14.04,但同样适用于Ubuntu 12.04、16.04以及32位系统,同时也适用于CentOS/RedHat系统...

    shell脚本配置Hadoop伪分布式.zip

    在这个"shell脚本配置Hadoop伪分布式.zip"压缩包中,包含了配置Hadoop伪分布式环境所需的所有资源和指南。伪分布式模式是在单个节点上模拟分布式环境,这对于学习和测试Hadoop功能非常有用,无需复杂的多节点集群...

    Linux下Hadoop伪分布式配置.pdf

    Linux 下 Hadoop 伪分布式配置 Hadoop 伪分布式模式是在单机上模拟 Hadoop 分布式,单机上的分布式并不是真正的伪分布式,而是使用线程模拟分布式。Hadoop 本身是无法区分伪分布式和分布式的,两种配置也很相似,...

    hadoop伪分布式配置详解

    hadoop伪分布式配置的详细步骤,文件类型为java,可以使用Ediplus打开

    Hadoop安装教程_单机_伪分布式配置

    ### Hadoop安装教程:单机与伪分布式配置详解 #### 一、引言 Hadoop是一种开源的大数据处理框架,广泛应用于数据存储和处理场景。本文档将详细介绍如何在Ubuntu 14.04环境下安装配置Hadoop 2.6.0版本,包括单机模式...

    Linux下Hadoop伪分布式配置及操作命令

    Linux下Hadoop伪分布式配置及操作命令详细知识点: 1. Hadoop伪分布式模式说明: Hadoop伪分布式模式是一种在单台计算机上模拟分布式环境的配置方式,它通过使用线程来模拟多个节点的分布式工作,但实际上所有的...

    hadoop伪分布式搭建.doc

    总结来说,Hadoop伪分布式环境的搭建涉及多步骤,包括环境准备、配置文件修改、服务启动和验证。只有熟练掌握这些步骤,才能顺利搭建出一个稳定的Hadoop环境,为后续的大数据处理打下坚实基础。

    hadoop 伪分布式环境配置

    "Hadoop 伪分布式环境配置" Hadoop 伪分布式环境配置是指在单机上模拟 Hadoop 分布式环境的配置过程。这种配置方式可以模拟分布式环境,方便开发者测试和调试 Hadoop 程序。下面是 Hadoop 伪分布式环境配置的详细...

    Hadoop伪分布式搭建配置文件

    我们将依据《如何搭建hadoop伪分布式》这篇文章,并结合提供的配置文件来探讨相关知识点。 首先,你需要下载Hadoop的安装包,推荐选择稳定版本,如Hadoop 2.x或3.x系列。下载完成后,解压到一个合适的目录,例如`/...

    Hadoop技术-Hadoop伪分布式安装.pptx

    Hadoop技术-Hadoop伪分布式安装 Hadoop技术是当前大数据处理和存储领域中最流行的技术之一,Hadoop伪分布式安装是Hadoop技术中的一个重要组件。本文将详细介绍Hadoop伪分布式安装的步骤和配置过程。 一、Hadoop伪...

    hadoop 2.X 伪分布式配置文件

    这个压缩包文件“hadoop 2.X 伪分布式配置文件”是为在单个机器上模拟Hadoop集群的伪分布式环境而设计的。这种环境对于学习、测试和调试Hadoop组件非常有用,因为它避免了实际分布式环境中的复杂性,同时保留了主要...

    hadoop伪分布式搭建(超级详细)

    在系统的环境变量配置文件中(如Linux系统的`~/.bashrc`或`~/.bash_profile`),添加Hadoop的路径。例如: ``` export HADOOP_HOME=/usr/local/hadoop-2.2.0 export PATH=$PATH:$HADOOP_HOME/bin:$HADOOP_HOME/...

    基于hadoop伪分布式hdfs系统完成的云盘项目源码+项目说明+sql数据库.zip

    基于hadoop伪分布式hdfs系统完成的云盘项目基于hadoop伪分布式hdfs系统完成的云盘项目源码+项目说明+sql数据库.zip基于hadoop伪分布式hdfs系统完成的云盘项目源码+项目说明+sql数据库.zip基于hadoop伪分布式hdfs系统...

    基于单机的Hadoop伪分布式运行模拟实现即其分析过程(完整版)

    ### 基于单机的Hadoop伪分布式运行模拟实现及其分析 #### 一、引言 随着大数据技术的发展,Hadoop已经成为处理大规模数据集的重要工具之一。为了更好地理解和掌握Hadoop的工作原理,通过在单机上模拟实现Hadoop伪...

    Linix下Hadoop的伪分布式配置

    配置Hadoop环境的关键步骤是编辑配置文件。进入`/usr/hadoop/hadoop-0.21.0/conf`目录,你需要修改`hadoop-env.sh`文件,设置`JAVA_HOME`指向你的JDK路径。例如,添加`export JAVA_HOME=/usr/java/jdk1.6.0_10`。 ...

    伪分布式hadoop的配置信息

    ### 伪分布式Hadoop的配置信息 在深入探讨伪分布式Hadoop配置之前,我们先来了解下何为伪分布式模式。伪分布式模式是指Hadoop集群的所有守护进程运行在同一台机器上,但它们仍然通过网络(通常是在不同的端口上)...

Global site tag (gtag.js) - Google Analytics