`
keren
  • 浏览: 1591258 次
  • 性别: Icon_minigender_1
  • 来自: 北京
社区版块
存档分类
最新评论

Hadoop必须知道的几个问题

 
阅读更多
1,master slaves文件只有 namenode secondnamenode jobtracker这3个机器需要知道,其他的datanode不需要知道,也就是说如果修改了这2个文件,那么只要同步以上提到的3个机器就可以了,而一般的开发测试环境,这3个机器是在同一个机器上。
2,需要的默认内存
datanode默认内存为2.8G
namenode默认内存为3G
secondnamenode默认内存为3G
3,M/R任务数
M/R任务数为datanode机器cpu的个数乘2或乘4,R的任务数要比M的任务数少。
增加任务数必须增加datanode的内存。
分享到:
评论

相关推荐

Global site tag (gtag.js) - Google Analytics