安装Hadoop(2.7.1)_单机模式

一,
   ubuntu-14.04.3-desktop-amd64(32位的总是报不能识别系统的jvm等错误)
   至少1G内存 
   相关链接
   http://www.tuicool.com/articles/bmeUneM

二,
  安装JDK http://fulndon.iteye.com/blog/2276974
  安装ssh和无密码登录
   http://blog.csdn.net/hackerwin7/article/details/28109073

  使用shell下载
   wget http://mirrors.hust.edu.cn/apache/hadoop/core/stable/hadoop-2.7.1.tar.gz
   tar -zxvf hadoop-2.7.1.tar.gz

三,对hadoop2.7.1/etc/hadoop下的相关配置文件进行配置
  
    一  core-site.xml
   

<configuration>
     <property>
          <name>hadoop.tmp.dir</name>
          <value>file:/home/sijiu/program/hadoop/tmp</value>
          <description>Abase for other temporary directories.</description>
     </property>
     <property>
           <name>fs.defaultFS</name>
           <value>hdfs://localhost:9000</value>
     </property>
</configuration>
    

    二  mapred-site.xml.template
   

<configuration>
     <property>
           <name>mapred.job.tracker</name>
           <value>localhost:9001</value>
     </property>
</configuration>
    

   三  hdfs-site.xml
  

<configuration>
      <property>
           <name>dfs.replication</name>
           <value>1</value>
      </property>
      <property>
           <name>dfs.namenode.name.dir</name>
           <value>file:/home/sijiu/program/hadoop/tmp/dfs/name</value>
      </property>
      <property>
           <name>dfs.datanode.data.dir</name>
           <value>file:/home/sijiu/program/hadoop/tmp/dfs/data</value>
      </property>
</configuration>

三, 运行
    1.初始化HDFS系统
      在hadop2.7.1目录下使用如下命令：
      bin/hdfs namenode -format
    2.开启 NameNode 和 DataNode 守护进程
      使用如下命令开启：
      sbin/start-dfs.sh，
      若启动时报找不到JAVA_HOME的错误,将JAVA_HOME的真实路径替换掉hadoop-env.sh中的${JAVA_HOME}
    3.查看进程信息
      使用如下命令查看进程信息
      jps，正常可以看到namenode,datanode,secondarynamenode,jps四个进程
     遇到的问题:查看日志启动正常,但看到的进程不全,解决:重新格式化hdfs,切换到root用户(我曾用root用户启动过)结束hadoop运行
    44.查看Web UI
       在浏览器中输入 http://机器ip:50070