浏览 4996 次
锁定老帖子 主题:欢迎大家讨论hadoop性能优化
精华帖 (0) :: 良好帖 (0) :: 新手帖 (0) :: 隐藏帖 (0)
|
|
---|---|
作者 | 正文 |
发表时间:2011-04-06
大家知道hadoop这家伙是非常吃内存的。除了加内存哦! 如果大家有什么好的优化方法的话,欢迎一起来讨论。 声明:ITeye文章版权属于作者,受法律保护。没有作者书面许可不得转载。
推荐链接
|
|
返回顶楼 | |
发表时间:2011-04-06
hadoop先天不足的东西。优化什么呢?
|
|
返回顶楼 | |
发表时间:2011-04-06
呵呵!怎么说?你用过他很多地方么!
|
|
返回顶楼 | |
发表时间:2011-04-06
我倒是发现CPU吃的很多,
至于吃内存,应该看看是不是在map或者reduce任务里有创建新对象吧,不然效率很差! |
|
返回顶楼 | |
发表时间:2011-04-06
LS是指NN的内存消耗吗?呵呵。。。
|
|
返回顶楼 | |
发表时间:2011-04-06
可以设置mapred-site.xml。
|
|
返回顶楼 | |
发表时间:2011-04-07
horse88sky 写道 hadoop先天不足的东西。优化什么呢?
说说不足吧 |
|
返回顶楼 | |
发表时间:2011-04-08
现在hadoop多少米啊
|
|
返回顶楼 | |