- 浏览: 64634 次
- 性别:
- 来自: 上海
文章分类
最新评论
主要是这两篇文章:
http://varyall.iteye.com/blog/763886
http://hi.baidu.com/feng2211/blog/item/4ab8a2095eb1b9a42eddd48e.html
在我的实践过程中,按照前者的顺序,ant compile->ln -sf ... ->ant package
在ant package时会出现相当多的问题,如要求jdk5安装路径,apache forrest安装路径,等等
根据后一篇文章,其实是不需要全部package的,可以只编译打包eclipse-plugin的;
先compile,然后在build-contrib.xml里添加两行
<property name="version" value="$你的hadoop版本,比如0.20.2"/> <property name="eclipse.home" location="${你的eclipse安装路径}"/>
还要将hadoop-core-x.x.x.jar 拷贝到build文件夹下,然后再ant jar
最后会在build/contrib/eclipse-plugin下有一个jar,这样就可以用了
注意:
我当时是在ubuntu里编译的,而且这个hadoop是我做的虚拟集群中的一台,因为已经编译过了一次,导致我后来启动hadoop时,无法顺利启动,报的是
org.apache.hadoop.hdfs.server.datanode.DataNode: Incompatible build versions: namenode BV = ; datanode BV = 911707
这个错误,即namenode与datanode的hadoop版本不一致,namenode update也没有用,后来只有通过将原版的0.20.2包再解压覆盖才恢复正常的。
发表评论
-
centos7下安装hadoop2.6.4过程总结
2016-03-03 21:49 0linux是从ubuntu开始接触的,但听说做服务器的,而且 ... -
[转]Yahoo持续的Pig/Hadoop(MapReduce)工作流
2013-03-16 21:40 858传送门:http://blog.sina.c ... -
有关kvm
2013-03-16 21:15 1324有一台式机,希望能模拟一个三四台的小集群,因为装的ubun ... -
hadoop 源代码学习
2011-12-15 14:44 0根据《hadoop 源代码分析 完整版》 (四) 主 ... -
hadoop io机制 序列化与反序列化
2011-12-15 11:27 0原文: http://blog.csdn.net/asx20 ... -
MapReduce流程分析
2011-12-13 18:39 1256原文:http://blog.csdn.net/jackyda ... -
[转]Twitter首席工程师:如何“打败”CAP定理
2011-12-12 11:44 1890英文原文:How to beat the CAP theore ... -
mapper,reducer的个数
2011-12-07 13:10 0《实战Hadoop》中第3章有一节讨论reducer的个数,从 ... -
hadoop eclipse plugin 之二
2011-12-03 11:47 1735前面已经有一篇记述了hadoop-plugin for ecl ... -
HDFS常用操作与API
2011-11-22 11:16 0《Hadoop》实践Chap2 相应条目下给出命令与贴图(另 ... -
MapReduce:一个重大的倒退
2011-10-14 15:55 1130原文:http://apps.hi.baidu ... -
hbase单机终于跑起来了
2011-11-02 15:00 4173去看了日志文件 2011-11-01 23:44:06,99 ... -
hbase终于跑起来了 续
2011-11-02 15:09 885其实在前面还有一段,没有保存下当时的经历,现在将配置项保存一下 ... -
hbase终于跑起来了再续
2011-11-02 21:01 799java.lang.NoClassDefFoundError: ... -
eclipse plugin 终于有作用了
2011-11-05 16:19 1475前几天一直无进展,今天也弄了半天,但是出现了转机,不再是那个“ ... -
erlang重新开张
2011-11-16 13:39 917以此庆贺重拾erlang 重看《erlang程序设计》 ... -
hbase 索引记录
2011-11-16 21:15 1020根本目的是实时的查询速度 从两方面来看: 一、HBa ... -
yahoo论文:Benchmarking Cloud Serving Systems with YCSB
2011-11-16 21:16 1826摘要:针对大规模数据分析的mapreduce技术已被广泛意识和 ... -
YCSB%e6%b5%8b%e8%af%95hbase
2011-11-16 21:16 1168首先,ycsb放狗,第一个就是 https://github ... -
HDFS study
2011-11-16 21:18 974http://varyall.iteye.com/blog/7 ...
相关推荐
为了方便开发者在Eclipse或MyEclipse这样的集成开发环境中高效地进行Hadoop应用开发,Hadoop-Eclipse-Plugin应运而生。这个插件允许开发者直接在IDE中对Hadoop集群进行操作,如创建、编辑和运行MapReduce任务,极大...
Eclipse集成Hadoop2.10.0的插件,使用`ant`对hadoop的jar包进行打包并适应Eclipse加载,所以参数里有hadoop和eclipse的目录. 必须注意对于不同的hadoop版本,` HADDOP_INSTALL_PATH/share/hadoop/common/lib`下的jar包...
hadoop-eclipse-plugin-2.7.3和2.7.7的jar包 hadoop-eclipse-plugin-2.7.3和2.7.7的jar包 hadoop-eclipse-plugin-2.7.3和2.7.7的jar包 hadoop-eclipse-plugin-2.7.3和2.7.7的jar包
hadoop-eclipse-plugin-1.2.1hadoop-eclipse-plugin-1.2.1hadoop-eclipse-plugin-1.2.1hadoop-eclipse-plugin-1.2.1
《Hadoop-Eclipse-Plugin-2.6.4.jar:Eclipse中的Hadoop开发利器》 在大数据处理领域,Hadoop作为一个开源的分布式计算框架,因其高效、可扩展的特性而备受青睐。为了方便开发者在Eclipse环境中进行Hadoop应用程序...
Hadoop-Eclipse-Plugin-3.1.1是一款专为Eclipse集成开发环境设计的插件,用于方便地在Hadoop分布式文件系统(HDFS)上进行开发和调试MapReduce程序。这款插件是Hadoop生态系统的组成部分,它使得Java开发者能够更加...
《Hadoop-eclipse-plugin-2.7.2:在Eclipse中轻松开发Hadoop应用》 在大数据处理领域,Hadoop作为一个开源的分布式计算框架,因其高效、可扩展的特性而备受青睐。然而,对于开发者而言,有效地集成开发环境至关重要...
hadoop-eclipse-plugin-2.7.4.jar和hadoop-eclipse-plugin-2.7.3.jar还有hadoop-eclipse-plugin-2.6.0.jar的插件都在这打包了,都可以用。
Ubuntu虚拟机HADOOP集群搭建eclipse环境 hadoop-eclipse-plugin-3.3.1.jar
Hadoop-eclipse-plugin是Hadoop生态系统中的一个重要工具,它允许开发者使用Eclipse IDE直接在Hadoop集群上开发、测试和部署MapReduce程序。这个插件极大地简化了Hadoop应用程序的开发流程,使得Java开发者能够利用...
在实际的开发过程中,为了提高效率并减少错误,Hadoop提供了Eclipse插件,即本文讨论的`hadoop-eclipse-plugin-2.6.0.jar`。这个插件是针对Hadoop 2.6.0版本设计的,主要目标是集成Eclipse IDE,使得开发者可以在...
本文将深入探讨如何使用Eclipse IDE结合hadoop-eclipse-plugin-2.6.0.jar插件,实现在Windows环境下进行远程连接到Hadoop集群,尤其适用于64位操作系统。 首先,我们要理解Hadoop的核心概念。Hadoop是由Apache基金...
hadoop-eclipse-plugin-3.1.3,eclipse版本为eclipse-jee-2020-03
找不到与hadoop-2.9.2版本对应的插件,手动生成的hadoop-eclipse-plugin-2.9.2版本,
hadoop-eclipse-plugin-2.7.2.jar,编译环境win10-64,ant-1.9.6,eclipse-4.5.2(4.5.0可用,其他未测),hadoop-2.7.2
最新的hadoop-eclipse-plugin-2.7.4.jar 很好用的hadoop的eclipse插件。自己编译的。 经过测试,使用没有任何问题。 请各位放心使用
hadoop-eclipse-plugin.jar插件基于Ubuntu18.04和Hadoop-3.2.1编译的,最后可以在eclipse创建Map Reduce文件
hadoop-eclipse-plugin-2.6.0和hadoop-eclipse-plugin-2.7.3的jar包,亲测可用用。 将插件hadoop-eclipse-plugin-2.6.0.jar,从/data/hadoop3目录下,拷贝到/apps/eclipse/plugins的插件目录下。 cp /data/hadoop3...
hadoop-eclipse-plugin-2.7.1.jar插件,直接放在eclipse插件目录中
在实际使用中,将`hadoop-eclipse-plugin-2.6.0.jar`文件复制到Eclipse的`dropins`目录下,重启Eclipse后,插件会被自动识别并加载。然后,开发者可以在Eclipse的"New"菜单中找到Hadoop相关的项目模板,开始构建...