`
aijuans8
  • 浏览: 187207 次
社区版块
存档分类
最新评论

hadoop "File /user/<user>/input/conf/slaves could only be replicated to 0 nodes, instead of 1"问题及解决办

 
阅读更多

本文地址:http://blog.csdn.net/kongxx/article/details/6892675

安装hadoop的官方文档安装后,在伪分布式模式下运行

bin/hadoop fs -put conf input

出现以下异常

检查了一下发现是由于默认的hadoop.tmp.dir的路径为/tmp/hadoop-${user.name},而我的linux系统的/tmp目录文件系统的类型往往是Hadoop不支持的。所以这里就需要更改一下hadoop.tmp.dir的路径到别的地方,这里指定到hadoop的安装路径下的一个子目录。具体步骤如下:

1. 修改${HADOOP_HOME}/conf/core-site.xml文件,修改后文件内如如下:

2. 重新启动hadoop的daemon

3. 再次运行以下命令就不会再有异常出现了


另外也有些别的情况会导致这个问题,具体可以参考Hadoop:could only be replicated to 0 nodes, instead





分享到:
评论

相关推荐

    hadoop mapreduce wordcount

    &lt;groupId&gt;org.apache.hadoop&lt;/groupId&gt; &lt;artifactId&gt;hadoop-common&lt;/artifactId&gt; &lt;version&gt;2.7.2&lt;/version&gt; &lt;/dependency&gt; &lt;dependency&gt; &lt;groupId&gt;org.apache.hadoop&lt;/groupId&gt; &lt;artifactId&gt;hadoop-client&lt;/...

    029070-99999-1901.txt

    NCDC气象数据 1千条元数据。 数据例: 0029029070999991901010106004+64333+023450FM-12+000599999 mapreduce程序无法运行报以下错误时 [ERROR] /E:/eclipse/workspace/myhadoop/App.java:[3,30] 程序包org....

    hbase集群配置

    &lt;name&gt;hadoop.tmp.dir&lt;/name&gt; &lt;value&gt;/root/hadoopv3/tmp&lt;/value&gt; &lt;/property&gt; &lt;/configuration&gt; hdfs-site.xml &lt;configuration&gt; &lt;property&gt; &lt;name&gt;dfs.replication&lt;/name&gt; &lt;value&gt;3&lt;/value&gt; &lt;/property&gt; ...

    hadoop-centos配置.docx

    ` &lt;value&gt;/usr/hadoop/hadoop-2.6.4/dfs/name&lt;/value&gt;` ` &lt;/property&gt;` ` &lt;property&gt;` ` &lt;name&gt;dfs.datanode.data.dir&lt;/name&gt;` ` &lt;value&gt;/usr/hadoop/hadoop-2.6.4/dfs/data&lt;/value&gt;` ` &lt;/property&gt;` ` &lt;property&gt;` ...

    Ubuntu_Hadoop分布部署.docx

    &lt;value&gt;$HADOOP_MAPRED_HOME/share/hadoop/mapreduce/*:$HADOOP_MAPRED_HOME/share/hadoop/mapreduce/lib/*&lt;/value&gt; &lt;/property&gt; &lt;/configuration&gt; 5. 配置`yarn-site.xml`文件。在`yarn-site.xml`文件中,添加...

    Hadoop2.7.3安装文档

    &lt;value&gt;file:/home/trs/hadoop/hadoop-2.7.3/tmp&lt;/value&gt; &lt;/property&gt; &lt;property&gt; &lt;name&gt;io.file.buffer.size&lt;/name&gt; &lt;value&gt;4096&lt;/value&gt; &lt;/property&gt; &lt;/configuration&gt; ``` - **mapred-site.xml**:此...

    安装hadoop集群三台虚拟机

    &lt;value&gt;hadoop-cluster1&lt;/value&gt; &lt;/property&gt; &lt;property&gt; &lt;name&gt;dfs.namenode.secondary.http-address&lt;/name&gt; &lt;value&gt;192.168.116.10:50090&lt;/value&gt; &lt;/property&gt; &lt;property&gt; &lt;name&gt;dfs.namenode.name.dir&lt;/...

    idea开发spark程序的环境搭建.docx

    &lt;mirrorOf&gt;central&lt;/mirrorOf&gt; &lt;/mirror&gt; 在 pom.xml 文件中,我们需要加入 Spark 环境所需要的一些依赖包。以下是 pom.xml 文件的部分内容: &lt;project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi=...

    hadoop2.7.5环境配置.rar

    &lt;value&gt;/home/user/hadoop/hdfs/namenode&lt;/value&gt; &lt;/property&gt; &lt;property&gt; &lt;name&gt;dfs.data.dir&lt;/name&gt; &lt;value&gt;/home/user/hadoop/hdfs/datanode&lt;/value&gt; &lt;/property&gt; &lt;/configuration&gt; ``` 5. **配置...

    Hadoop3.0版本分布式搭建

    &lt;value&gt;file:///opt/hadoop/hadoop3/tmp&lt;/value&gt; &lt;/property&gt; ``` 这里的 `192.168.10.21` 是第一台节点 IP,即 NameNode 的 IP 地址。 **3.3 配置 hdfs-site.xml** 编辑 `hdfs-site.xml` 文件,在 `...

    Hadoop安装教程_伪分布式配置_CentOS6.4_Hadoop2.61

    &lt;value&gt;1&lt;/value&gt; &lt;/property&gt; &lt;property&gt; &lt;name&gt;dfs.name.dir&lt;/name&gt; &lt;value&gt;/usr/local/hadoop_store/hdfs/namenode&lt;/value&gt; &lt;/property&gt; &lt;property&gt; &lt;name&gt;dfs.data.dir&lt;/name&gt; &lt;value&gt;/usr/local/...

    Hadoop伪分布式及生态圈组件搭建新手指导文档

    &lt;value&gt;1&lt;/value&gt; &lt;/property&gt; &lt;property&gt; &lt;name&gt;dfs.namenode.name.dir&lt;/name&gt; &lt;value&gt;file:/usr/local/hadoop/data/nn&lt;/value&gt; &lt;/property&gt; &lt;property&gt; &lt;name&gt;dfs.datanode.data.dir&lt;/name&gt; &lt;value&gt;file:...

    第3集-Hadoop环境搭建 - linux(centos7) - 安装配置hadoop2.7.7.pdf

    &lt;value&gt;1&lt;/value&gt; &lt;/property&gt; &lt;property&gt; &lt;name&gt;dfs.namenode.name.dir&lt;/name&gt; &lt;value&gt;file:/home/hadoop/hadoop-2.7.7/tmp/dfs/name&lt;/value&gt; &lt;/property&gt; &lt;property&gt; &lt;name&gt;dfs.datanode.data.dir&lt;/name&gt; ...

    hadoop集群环境的搭建

    &lt;value&gt;/hadoop/name&lt;/value&gt; &lt;/property&gt; 再次,需要修改 hadoop 目录下的 conf/hdfs-site.xml 文件,修改成以下内容: &lt;property&gt; &lt;name&gt;dfs.replication&lt;/name&gt; &lt;value&gt;3&lt;/value&gt; &lt;/property&gt; &lt;property&gt; ...

    Hadoop2.X集群安装与配置

    &lt;value&gt;file:///app/hadoop/data/namenode&lt;/value&gt; &lt;/property&gt; &lt;property&gt; &lt;name&gt;dfs.datanode.data.dir&lt;/name&gt; &lt;value&gt;file:///app/hadoop/data/datanode&lt;/value&gt; &lt;/property&gt; ``` 3. 修改`etc/hadoop/yarn-...

    Hadoop_windows运行解决办法

    &lt;value&gt;1&lt;/value&gt; &lt;/property&gt; &lt;property&gt; &lt;name&gt;dfs.name.dir&lt;/name&gt; &lt;value&gt;file:///C:/hadoop/data/name&lt;/value&gt; &lt;/property&gt; &lt;property&gt; &lt;name&gt;dfs.data.dir&lt;/name&gt; &lt;value&gt;file:///C:/hadoop/data/...

    Hadoop_Hbase集群安装部署手册

    &lt;value&gt;/data/hadoop/hdfs/namenode&lt;/value&gt; &lt;/property&gt; &lt;property&gt; &lt;name&gt;dfs.datanode.data.dir&lt;/name&gt; &lt;value&gt;/data/hadoop/hdfs/datanode&lt;/value&gt; &lt;/property&gt; ``` - `mapred-site.xml`: 指定MapReduce...

    hadoop2.x 安装文档

    &lt;name&gt;dfs.namenode.rpc-address.wang.nn1&lt;/name&gt; &lt;value&gt;master:8020&lt;/value&gt; &lt;/property&gt; &lt;property&gt; &lt;name&gt;dfs.namenode.rpc-address.wang.nn2&lt;/name&gt; &lt;value&gt;slave1:8020&lt;/value&gt; &lt;/property&gt; ...

    hadoop集群搭建(超级详细)

    &lt;value&gt;file:/home/user/hadoop/dfs/name&lt;/value&gt; &lt;/property&gt; &lt;property&gt; &lt;name&gt;dfs.datanode.data.dir&lt;/name&gt; &lt;value&gt;file:/home/user/hadoop/dfs/data&lt;/value&gt; &lt;/property&gt; ``` 四、Zookeeper安装 1. ...

    配置】单机伪分布式hadoop.zip

    hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-examples-&lt;version&gt;.jar wordcount input output ``` 以上就是配置单机伪分布式Hadoop的基本步骤,这将帮助你理解Hadoop的工作原理,并为更复杂的分布式环境...

Global site tag (gtag.js) - Google Analytics