501311837
- 浏览: 18382 次
- 性别:
- 来自: 北京
-
最新评论
-
明兜3号：
Cloudera Manager视频教程网盘地址：https: ...
离线搭建CDH5,ClouderaManager -
两个黄鹂鸣翠柳：
...
python也就这点事
文章列表
MapReduce的工作机制
- 博客分类：
- MapReduce
MapReduce作业的运行过程包含4个独立的实体：
1）Client:提交MapReduce作业.（2）JobTracker：协调作业的运行。（3）TaskTracker:运行作业划分后的Map任务或Reduce任务。（4）Shared FileSystem(一般为HDFS），用来在其他实体间共享作业文件。
...
配置zookeeper必须注意以下几点不然容易出错：
1.必须记得配上myid文件
2.必须关闭防火墙service iptables stop
3.必须要3台以上的机器。否则只有启动zookeeper的机器上有进程--->16683 QuorumPeerMain
2014-07-09 19:32:18,649 [myid:] - WARN [main:QuorumPeerConfig@287] - No server failure will be tolerated. You need at least 3 servers.
ssh配置
主机A：10.0.5.199
主机B：10.0.5.198
需要配置主机A无密码登录主机A，主机B
先确保所有主机的防火墙处于关闭状态。
在主机A上执行如下：
1. $cd ~/.ssh
2. $ssh-keygen -t rsa --------------------然后一直按回车键，就会按照默认的选项将生成的密钥保存在.ssh/id_rsa文件中。
3. $cp id_rsa.pub authorized_keys
这步完成后，正常情况下就可以无密码登录本机了，即ssh localhost，无需输入密码。
4. $sc ...