编写不易，转载请注明（http://shihlei.iteye.com/blog/2082625）！
一安装概述
Hadoop 安装的三种模式：
1）单机模式（standalone）
单机模式是Hadoop的默认模式。当首次解压Hadoop的源码包时，Hadoop无法了解硬件安装环境，便保守地选择了最小配置。在这种默认模式下所有3个XML文件均为空。当配置文件为空时，Hadoop会完全运行在本地。因为不需要与其他节点交互，单机模式就不使用HDFS，也不加载任何Hadoop的守护进程。该模式主要用于开发调试MapReduce程序的应用逻辑。
2）伪分布模式（Pseudo-Distributed Mode）
伪分布模式在“单节点集群”上运行Hadoop，其中所有的守护进程都运行在同一台机器上。该模式在单机模式之上增加了代码调试功能，允许你检查内存使用情况，HDFS输入输出，以及其他的守护进程交互。
3）全分布模式（Fully Distributed Mode）
Hadoop守护进程运行在一个集群上。
二 程序版本
hadoop-2.3.0-cdh5.0.1.tar.gz
三 单机搭建
1）解压：tar -xvf hadoop-2.3.0-cdh5.0.1.tar.gz
2）配置环境变量：vi ~/.bashrc
# hadoop cdh5
export HADOOP_HOME=/home/zero/hadoop/hadoop-2.3.0-cdh5.0.1
export PATH=$PATH:$HADOOP_HOME/sbin:$HADOOP_HOME/bin
source ~/.bashrc
3）运行wordcount
hadoop jar $HADOOP_HOME/share/hadoop/mapreduce2/hadoop-mapreduce-examples-2.3.0-cdh5.0.1.jar wordcount $HADOOP_HOME/etc/hadoop /tmp/out
说明：
- 该模式不使用hdfs，hadoop fs -ls / 浏览的是本地文件系统
- 该模式没有修改配置文件，中间临时数据等存放于默认路径/tmp/hadoop-${user}
四 伪分布式搭建
（一）规划
1）启动进程：
- namenode
- datanode
- resourcemanager
- nodemanager
- historyserver
2）管理页面列表：
- NameNode ：http://8.8.8.10:50070/dfshealth.html（使用IP默认打开该页面，个人比较习惯使用jsp页面 http://8.8.8.10:50070/dfshealth.jsp）
- ResourceManager : http://8.8.8.10:8088
- MapReduce JobHistory Server : http://8.8.8.10:10998
（二）搭建过程
（1）准备
1）修改/etc/hosts添加映射：8.8.8.10 CentOS-StandAlone
2）关闭防火墙：root用户 ： service iptables stop
3）解压：tar -xvf hadoop-2.3.0-cdh5.0.1.tar.gz
4）配置环境变量：vi ~/.bashrc
# hadoop cdh5
export HADOOP_HOME=/home/zero/hadoop/hadoop-2.3.0-cdh5.0.1
export PATH=$PATH:$HADOOP_HOME/sbin:$HADOOP_HOME/bin
source ~/.bashrc
（2）安装HDFS
1）修改$HADOOP_HOME/etc/hadoop/core-site.xml
<configuration>
<property>
<name>fs.default.name</name>
<value>hdfs://CentOS-StandAlone:8020</value>
</property>
</configuration>
2）修改$HADOOP_HOME/etc/hadoop/hdfs-site.xml
<configuration>
<property>
<!--开启web hdfs-->
<name>dfs.webhdfs.enabled</name>
<value>true</value>
</property>
<property>
<name>dfs.replication</name>
<value>1</value>
</property>
<property>
<name>dfs.namenode.name.dir</name>
<value>/home/zero/hadoop/hadoop-2.3.0-cdh5.0.1/data/dfs/name</value>
<description> namenode 存放name table(fsimage)本地目录（需要修改）</description>
</property>
<property>
<name>dfs.namenode.edits.dir</name>
<value>${dfs.namenode.name.dir}</value>
<description>namenode粗放 transaction file(edits)本地目录（需要修改）</description>
</property>
<property>
<name>dfs.datanode.data.dir</name>
<value>/home/zero/hadoop/hadoop-2.3.0-cdh5.0.1/data/dfs/data</value>
<description>datanode存放block本地目录（需要修改）</description>
</property>
</configuration>
3）namenode 格式化： hdfs namenode -format
4）hdfs 启动：
hadoop-daemon.sh start namenode
hadoop-daemon.sh start datanode
5）验证：
进程：
[zero@CentOS-StandAlone hadoop]$ jps
3083 NameNode
3192 Jps
3158 DataNode
页面：8.8.8.10:50070
注：停止方法如下：
hadoop-daemon.sh stop namenode
hadoop-daemon.sh stop datanode
（3）安装Yarn
1）修改$HADOOP_HOME/etc/hadoop/mapred-site.xml
<configuration>
<property>
<name>mapreduce.framework.name</name>
<value>yarn</value>
</property>
</configuration>
2）修改$HADOOP_HOME/etc/hadoop/yarn-site.xml
<configuration>
<property>
<name>yarn.resourcemanager.hostname</name>
<value>CentOS-StandAlone</value>
</property>
<property>
<name>yarn.nodemanager.aux-services</name>
<value>mapreduce_shuffle</value>
</property>
</configuration>
3）启动：
yarn-daemon.sh start resourcemanager
yarn-daemon.sh start nodemanager
mr-jobhistory-daemon.sh start historyserver
4）验证：
进程
[zero@CentOS-StandAlone hadoop-2.3.0-cdh5.0.1]$ jps
1458 NodeManager
1131 DataNode
1634 Jps
1229 ResourceManager
1056 NameNode
1604 JobHistoryServer
页面：
注：停止方法如下：
yarn-daemon.sh stop resourcemanager
yarn-daemon.sh stop nodemanager
mr-jobhistory-daemon.sh stop historyserver
（4）运行wordcount
1）上传数据：
hadoop fs mkdir /in
hadoop fs -put $HADOOP_HOME/etc/hadoop/* in
2）执行：
hadoop jar $HADOOP_HOME/share/hadoop/mapreduce2/hadoop-mapreduce-examples-2.3.0-cdh5.0.1.jar wordcount /in /out
五 Hadoop本地文件系统使用配置
默认配置文件位置：
/hadoop-project-dist/hadoop-common/core-default.xml
/hadoop-project-dist/hadoop-hdfs/hdfs-default.xml
/hadoop-mapreduce-client-core/mapred-default.xml
/hadoop-yarn/hadoop-yarn-common/yarn-default.xml
1）core-site.xml
<property>
<name>io.seqfile.local.dir</name>
<value>${hadoop.tmp.dir}/io/local</value>
<description> sequence file机型marge合并时存临时数据目录（可默认）</description>
</property>
2）hdfs-site.xml
<property>
<name>dfs.namenode.name.dir</name>
<value>file://${hadoop.tmp.dir}/dfs/name</value>
<description> namenode 存放name table(fsimage)本地目录（需要修改）</description>
</property>
<property>
<name>dfs.namenode.edits.dir</name>
<value>${dfs.namenode.name.dir}</value>
<description>namenode粗放 transaction file(edits)本地目录（需要修改）</description>
</property>
<property>
<name>dfs.datanode.data.dir</name>
<value>file://${hadoop.tmp.dir}/dfs/data</value>
<description>datanode存放block本地目录（需要修改）</description>
</property>
3）mapred-site.xml
<property>
<name>mapreduce.cluster.local.dir</name>
<value>${hadoop.tmp.dir}/mapred/local</value>
<description>MapReduce的缓存数据存储在文件系统上的位置
</description>
</property>
<property>
<name>mapreduce.jobtracker.system.dir</name>
<value>${hadoop.tmp.dir}/mapred/system</value>
<description>MapReduce在HDFS上存储系统文件的位置
</description>
</property>
<property>
<name>mapreduce.jobtracker.staging.root.dir</name>
<value>${hadoop.tmp.dir}/mapred/staging</value>
<description>用户job相关文件中转区根目录（可默认）</description>
</property>
<property>
<name>mapreduce.cluster.temp.dir</name>
<value>${hadoop.tmp.dir}/mapred/temp</value>
<description>临时文件共享目录（可默认）</description>
</property>
4）yarn-site.xml
<property>
<name>yarn.resourcemanager.fs.state-store.uri</name>
<value>${hadoop.tmp.dir}/yarn/system/rmstore</value>
<description>resourcemanager 状态存放路径（需要修改）</description>
</property>
<property>
<name>yarn.nodemanager.local-dirs</name>
<value>${hadoop.tmp.dir}/nm-local-dir</value>
<description>一个Application执行时本地化文件的存放路径，本地话文件具体问题：
${yarn.nodemanager.local-dirs}/usercache/${user}/appcache/application_${appid}.（可默认）
</description>
</property>
相关推荐
1.版本：matlab2014/2019a/2024a 2.附赠案例数据可直接运行matlab程序。 3.代码特点：参数化编程、参数可方便更改、代码编程思路清晰、注释明细。 4.适用对象：计算机，电子信息工程、数学等专业的大学生课程设计、期末大作业和毕业设计。
铅酸电池失效仿真comsol
Java小程序项目源码，该项目包含完整的前后端代码、数据库脚本和相关工具，简单部署即可运行。功能完善、界面美观、操作简单，具有很高的实际应用价值，非常适合作为Java毕业设计或Java课程设计使用。 所有项目均经过严格调试，确保可运行！下载后即可快速部署和使用。 1 适用场景： 毕业设计 期末大作业 课程设计 2 项目特点： 代码完整：详细代码注释，适合新手学习和使用 功能强大：涵盖常见的核心功能，满足大部分课程设计需求 部署简单：有基础的人，只需按照教程操作，轻松完成本地或服务器部署 高质量代码：经过严格测试，确保无错误，稳定运行 3 技术栈和工具 前端：小程序 后端框架：SSM/SpringBoot 开发环境：IntelliJ IDEA 数据库：MySQL（建议使用 5.7 版本，更稳定） 数据库可视化工具：Navicat 部署环境：Tomcat（推荐 7.x 或 8.x 版本），Maven
Java小程序项目源码，该项目包含完整的前后端代码、数据库脚本和相关工具，简单部署即可运行。功能完善、界面美观、操作简单，具有很高的实际应用价值，非常适合作为Java毕业设计或Java课程设计使用。 所有项目均经过严格调试，确保可运行！下载后即可快速部署和使用。 1 适用场景： 毕业设计 期末大作业 课程设计 2 项目特点： 代码完整：详细代码注释，适合新手学习和使用 功能强大：涵盖常见的核心功能，满足大部分课程设计需求 部署简单：有基础的人，只需按照教程操作，轻松完成本地或服务器部署 高质量代码：经过严格测试，确保无错误，稳定运行 3 技术栈和工具 前端：小程序 后端框架：SSM/SpringBoot 开发环境：IntelliJ IDEA 数据库：MySQL（建议使用 5.7 版本，更稳定） 数据库可视化工具：Navicat 部署环境：Tomcat（推荐 7.x 或 8.x 版本），Maven
springboot124中药实验管理系统设计与实现，含有完整的源码和报告文档
解除劳动合同协议书
快速过滤图像融合Matlab代码.rar
强调图像中内核形状（例如直线）的过滤器Matlab代码.rar
在内网linux服务器安装redis 在Linux环境中离线安装Redis是常见的需求，尤其是在内网服务器上，由于无法直接访问公网，我们需要提前下载Redis的源码包并手动安装。下面将详细解释如何进行这一过程。
1.版本：matlab2014/2019a/2024a 2.附赠案例数据可直接运行matlab程序。 3.代码特点：参数化编程、参数可方便更改、代码编程思路清晰、注释明细。 4.适用对象：计算机，电子信息工程、数学等专业的大学生课程设计、期末大作业和毕业设计。
微信小程序StartKitw_xapp-startkit
座位选择微信小程序版本
机械臂代码_Mechanical_arm
图像分割测试视频river-light.mp4
前端分析-2023071100789
labview源码参考示例，可供参考学习使用
MPC跟踪轨迹圆形（以后轴为基准）
MATLAB代码：基于主从博弈的智能小区代理商定价策略及电动汽车充电管理 关键词：电动汽车 主从博弈 动态定价 智能小区 充放电优化 参考文档：《基于主从博弈的智能小区代理商定价策略及电动汽车充电管理》基本复现 仿真平台：MATLAB+CPLEX gurobi平台 优势：代码具有一定的深度和创新性，注释清晰，非烂大街的代码，非常精品 主要内容：代码主要做的是一个电动汽车充电管理和智能小区代理商动态定价的问题，将代理商和车主各自追求利益最大化建模为主从博弈，上层以代理商的充电电价作为优化变量，下层以电动汽车的充电策略作为优化变量，通过优化得出最优电价策略以及动态充电策略，代码出图效果非常好，店主已经对代码进行了深入的加工和处理，出图效果非常好，代码质量非常高，保姆级的注释以及人性化的模块子程序，所有数据均有可靠来源，联系后会直接发您资料，保证您学得会，用的起来，简直是萌新福利
springboot154基于Spring Boot智能无人仓库管理，含有完整的源码和报告文档
Matlab领域上传的视频是由对应的完整代码运行得来的，完整代码皆可运行，亲测可用，适合小白； 1、从视频里可见完整代码的内容 主函数：main.m； 调用函数：其他m文件；无需运行 运行结果效果图； 2、代码运行版本 Matlab 2019b；若运行有误，根据提示修改；若不会，私信博主； 3、运行操作步骤 步骤一：将所有文件放到Matlab的当前文件夹中； 步骤二：双击打开main.m文件； 步骤三：点击运行，等程序运行完得到结果； 4、仿真咨询 如需其他服务，可私信博主； 4.1 博客或资源的完整代码提供 4.2 期刊或参考文献复现 4.3 Matlab程序定制 4.4 科研合作