论坛首页 Java企业应用论坛

Hadoop-0.20.1+Ubuntu9.10实战

浏览 4329 次
精华帖 (0) :: 良好帖 (0) :: 新手帖 (1) :: 隐藏帖 (0)
作者 正文
   发表时间:2009-11-20  
经过几个晚上的奋战,Hadoop-0.20.1+Ubuntu9.10实战终于出炉。

目录:
一、环境准备 1
二、安装JDK6 1
三、配置SSH 2
四、安装配置hadoop 4
4.1下载及安装 4
4.2配置 4
4.2.1配置$HADOOP_HOME/conf/hadoop-env.sh 4
4.2.2配置$HADOOP_HOME/conf/core-site.xml 4
4.2.3配置$HADOOP_HOME/conf/mapred-site.xml 5
4.2.4格式化namenode 5
4.3启动及验证 5
五、跑第一个wordcount例子 7
4.1准备工作 7
4.2运行例子 8
4.3看结果 11
4.4在eclipse中调试/运行 12
4.5分析代码 15
六、改进的wordcount例子 17
参考 23
FAQ 23
1、xxx is not in the sudoers file解决方法 23
2、/etc/sudoers is mode 0640, should be 0440怎么回事? 24
3、如何增加ubuntu的SWAP空间? 24
4、bin/hadoop dfs到底有哪些命令? 25


再次对javaeye的编辑器表示遗憾,ubuntu下openoffice编辑的文档,贴上来就是一堆浆糊。
另外也请大家对openoffice下编辑的文档多多包涵——确实不如word
   发表时间:2010-01-08  
不好意思,请教个问题,在Map中的public void map(LongWritable key, Text value,
OutputCollector<Text, Text> output, Reporter reporter)方法的使用log.debug("")打的日志在那查看,我怎么看不到,代码是怎么调试的,谢谢?
0 请登录后投票
   发表时间:2010-01-11  
文档里介绍了基于eclipse搭建开发调试环境的过程,可参考

我有时候为了偷懒,就直接System.out了,可以用log4j,配置下即可按需打印日志
0 请登录后投票
   发表时间:2010-01-12  
呵呵,很不错的东西,最近刚好在研究
弄下来看看
0 请登录后投票
   发表时间:2010-06-18  
看起来很不错啊。正需要这样详细的
0 请登录后投票
论坛首页 Java企业应用版

跳转论坛:
Global site tag (gtag.js) - Google Analytics