由于在linux下用eclipse操作起来确实没有习惯用window方便,简单。所以就迎着之前老window下eclipse获取linux的hadoop的连接不到的问题继续解决。也许我用虚拟机下5天的开发时间,我window下4天就可以搞定,那多出的一天何不解决这个问题呢,何况使用hadoop不一定就只用5天。
1.前提条件:
windows下的eclipse集成好hadoop插件。
eclipse版本:3.3.2
hadoop版本:0.20.2
2.配置hadoop:
用SecureCRT,putty或winSCP等远程软件可以连接到linux系统,Linux系统的网络类型最好是桥接或host-only。
然后配置haodoop location的ip,端口号和hdfs的详细信息
易出问题:
Cannot connect to the Map/Reduce location: hadoop
Call to localhsot/10.1.23.42:9001 failed on connection exception: java.net.ConnectException: Connection refused: no further information
解决方法:
hadoop目录conf/core-site.xml、mapred-site.xml、hdfs-site.xml中配置的value都用的localhost替换固定的ip(10.1.23.42),localhost 指的本机,对于外部访问的话,换成ip。
参考连接:
相关推荐
在Windows 7环境下,开发人员经常需要通过Eclipse IDE与远程Linux系统上的Hadoop集群进行交互,例如执行MapReduce任务。然而,由于操作系统和环境差异,可能会遇到一些问题。本文将详细阐述如何解决在Win7中使用...
本文将详细介绍如何在有限的资源条件下,利用Windows7作为主机,通过VMware虚拟化技术运行Fedora操作系统,并在此环境中搭建Hadoop和HBase的伪分布式环境,最后在Windows下的Eclipse中配置相应的开发环境以进行远程...
Windows环境下采用eclipse连接虚拟机中的Hadoop伪分布式集群-附件资源
标题提到的“hadoop 虚拟机 连接 dll”,这可能涉及到在Eclipse环境下配置Hadoop开发环境,特别是当涉及到本地Windows系统与Hadoop虚拟机之间的连接时,可能会遇到动态链接库(DLL)的问题。在Windows操作系统中,...
标题 "IDE直接和Hadoop集群连接" 描述的是如何利用集成开发环境(IDE)与Hadoop分布式文件系统(HDFS)以及MapReduce框架进行交互,从而实现直接在IDE内进行开发和测试的功能。Hadoop是一个开源的大数据处理框架,由...
在虚拟机中安装Ubuntu Kylin 16.04.4是常见的选择,因为这是一个稳定且支持Hadoop的Linux发行版。安装完成后,需要更新系统软件包管理器apt,确保所有依赖项都是最新的。接着,安装SSH服务并配置无密码登录,这对于...
这款插件在Hadoop生态系统中扮演着重要的角色,让开发者无需离开IDE就能完成对Hadoop项目的创建、部署和调试,简化了Hadoop项目开发的工作流程。 首先,我们需要理解Hadoop的核心概念。Hadoop是Apache基金会开源的...
本文是一篇关于Hadoop虚拟机集群搭建的详细教程,作者王志乾是黑龙江大学信息科学与技术学院的学生。由于作者在实践中发现许多书籍中的安装步骤存在一些问题,尤其是权限问题,所以作者根据个人的环境总结出了一套...
标题 "linux-32-eclipse-kepler-hadoop-1.1.2-eclipse-plugin.rar" 暗示了这是一个针对32位Linux系统、基于Eclipse Kepler版本的Hadoop 1.1.2插件的压缩包。描述中的内容与标题相同,进一步确认了这个压缩包的内容。...