`
85977328
  • 浏览: 1904506 次
  • 性别: Icon_minigender_1
  • 来自: 北京
社区版块
存档分类
最新评论

hadoop-1.0.3单机版安装(Pseudo-Distributed Operation)

 
阅读更多
使用版本是
hadoop-1.0.3-bin.tar.gz

官方参考文档
http://hadoop.apache.org/common/docs/r1.0.3/single_node_setup.html

按照官方的文档安装,系统仍然无法启动,需要做额外的2件事情。

1)设置JAVA_HOME,即使在/etc/profile里设置仍然无效,需要在hadoop-1.0.3/conf/hadoop-env.sh设置JAVA_HOME.


2)添加额外的参数,默认的是在tmp中,权限有问题,同时重启文件会丢失
在hadoop-1.0.3/conf/core-site.xml中增加以下内容
<property>
    <name>hadoop.tmp.dir</name>
    <value>/home/develop/hadoop/tmp</value>
    <description>A base for other temporary directories</description>
</property>


3)起他注意事项
查看文件夹
[root@localhost bin]# hadoop-1.0.3/bin/hadoop fs -ls /
Found 1 items
drwxr-xr-x   - root supergroup          0 2012-08-08 20:05 /home

查看文件
[root@localhost bin]# hadoop-1.0.3/bin/hadoop fs -ls

如果使用JAVA客户端访问,则需要将配置文件中的localhost换成IP地址。


综上,以下2个才均可用
http://192.168.56.2:50030/
http://192.168.56.2:50070/
这也许是hadoop安装时候不太方便的地方,没有做到真正的快速安装伪集群版。
1
0
分享到:
评论
1 楼 jianfeihit 2012-08-30  
猫头哥又出手了~~

相关推荐

    hadoop-core-1.0.3.jar

    Exception in thread "main" java.io.IOException: Failed to ...解决方法是,修改/hadoop-1.0.3/src/core/org/apache/hadoop/fs/FileUtil.java文件 688-692行注释,然后重新编译源代码,重新打一个hadoop.jar的包。

    hadoop-eclipse-plugin-1.0.3.jar

    windows下hadoop 的 eclipse 插件,eclipse3.7版本测试通过,lib里面包含解决windows下连接linux权限问题的hadoop-core.jar文件。

    hadoop-1.0.3-API.chm

    Hadoop-1.0.3 API, 帮助用户查看Hadoop自身提供的接口调用

    hadoop-1.0.3 中文.chm

    hadoop-1.0.3 中文,资料都是来自apache,资料还是很齐全的,自己编译的,可以搜索,有些显示还是0.18版的,可能是文档没有更新过来。分数有点多,回复就会还你的。

    hadoop-1.0.3 eclipse插件

    hadoop-1.0.3 eclipse插件

    hadoop-1.0.3-eclipse-plugin.jar

    hadoop-1.0.3-eclipse-plugin.jar 插件 你懂的!

    hadoop-eclipse-plugin1.2.1 and hadoop-eclipse-plugin2.8.0

    在实际使用中,安装Hadoop-Eclipse-Plugin非常简单。只需将jar文件(如hadoop-eclipse-plugin-2.8.0.jar)复制到Eclipse的plugins目录下,然后重启Eclipse,即可在“New Project”中看到Hadoop相关的项目类型。在...

    hadoop-2.7.7单机win7或win10搭建完整包

    3.使用编辑器打开E:\apps\hadoop-2.7.7\etc\hadoop\hadoop-env.cmd,修改set JAVA_HOME=E:\apps\你的jdk目录名 4.把E:\apps\hadoop-2.7.7\bin\hadoop.dll拷贝到 C:\Windows\System32 5.设置环境变量,新建系统变量,...

    hadoop-eclipse-plugin-1.0.3.jar 插件

    4. **版本兼容性**:`hadoop-eclipse-plugin-1.0.3.jar`版本对应的是Hadoop 1.x系列,因此适用于使用该版本Hadoop集群的开发工作。需要注意的是,随着Hadoop的不断更新,有针对不同Hadoop版本的插件版本,如2.x和3.x...

    hadoop-3.3.4 版本(最新版)

    Apache Hadoop (hadoop-3.3.4.tar.gz)项目为可靠、可扩展的分布式计算开发开源软件。官网下载速度非常缓慢,因此将hadoop-3.3.4 版本放在这里,欢迎大家来下载使用! Hadoop 架构是一个开源的、基于 Java 的编程...

    flink-1.0.3-bin-hadoop27-scala_2

    标题中的“flink-1.0.3-bin-hadoop27-scala_2”揭示了我们讨论的是Flink的1.0.3版本,这个版本是针对Hadoop 2.7和Scala 2.11编译的二进制发行版。理解这一版本的特性对于开发者来说至关重要。 1. **Apache Flink**...

    hadoop-fuse-dfs安装.docx

    ### Hadoop-Fuse-Dfs 安装与配置详解 #### 一、概述 本文档旨在为读者提供关于在CDH(Cloudera Distribution Including Apache Hadoop)环境下安装和配置Hadoop-Fuse-Dfs的详细步骤及注意事项。通过本文档的学习,...

    hadoop-auth-2.5.1-API文档-中文版.zip

    包含翻译后的API文档:hadoop-auth-2.5.1-javadoc-API文档-中文(简体)版.zip; Maven坐标:org.apache.hadoop:hadoop-auth:2.5.1; 标签:apache、auth、hadoop、jar包、java、API文档、中文版; 使用方法:解压翻译...

    hadoop-eclipse-plugin-1.0.3

    然后,将下载的压缩包`hadoop-eclipse-plugin-1.0.3`解压到Eclipse的`plugins`目录下。这个步骤至关重要,因为Eclipse会自动检测并加载该目录下的插件。重启Eclipse后,你将在"New"菜单中看到Hadoop相关的新项目类型...

    hadoop-mapreduce-client-jobclient-2.6.5-API文档-中文版.zip

    包含翻译后的API文档:hadoop-mapreduce-client-jobclient-2.6.5-javadoc-API文档-中文(简体)版.zip; Maven坐标:org.apache.hadoop:hadoop-mapreduce-client-jobclient:2.6.5; 标签:apache、mapreduce、...

    hadoop-lzo-0.4.21-SNAPSHOT jars

    而Hadoop-LZO则是针对Hadoop优化的一种数据压缩库,旨在提高HDFS(Hadoop Distributed File System)上的数据压缩效率和读写性能。这个压缩库是由Groupon开发并维护的,它实现了LZO(Lempel-Ziv-Oberhumer)压缩算法...

    hadoop-eclipse-plugin三个版本的插件都在这里了。

    hadoop-eclipse-plugin-2.7.4.jar和hadoop-eclipse-plugin-2.7.3.jar还有hadoop-eclipse-plugin-2.6.0.jar的插件都在这打包了,都可以用。

Global site tag (gtag.js) - Google Analytics