本月博客排行
-
第1名
龙儿筝 -
第2名
johnsmith9th -
第3名
wy_19921005 - zysnba
- sgqt
- lemonhandsome
年度博客排行
-
第1名
宏天软件 -
第2名
青否云后端云 -
第3名
龙儿筝 - gashero
- wallimn
- vipbooks
- benladeng5225
- wy_19921005
- fantaxy025025
- e_e
- zysnba
- ssydxa219
- sam123456gz
- javashop
- arpenker
- tanling8334
- kaizi1992
- xpenxpen
- wiseboyloves
- xiangjie88
- ranbuijj
- ganxueyun
- xyuma
- sichunli_030
- wangchen.ily
- jh108020
- lemonhandsome
- zxq_2017
- jbosscn
- Xeden
- luxurioust
- johnsmith9th
- lzyfn123
- zhanjia
- forestqqqq
- ajinn
- nychen2000
- wjianwei666
- hanbaohong
- daizj
- 喧嚣求静
- mwhgJava
- silverend
- kingwell.leng
- lchb139128
- lich0079
- kristy_yy
- jveqi
- java-007
- sunj
最新文章列表
hdfs之checkpoint
前提说明:研究的hadoop版本1.0.3
checkpoint的触发条件:
默认1小时进行一次merge;
edits的文件大小超过大致64M
以上两个条件,满足任意一个即可,每隔5分钟进行一次条件检查。
checkpoit流程:
在SNN(secondary namenode)服务器上检查fs.checkpoint.dir fs.checkpoint.edits ...
Hadoop 应用总结
参考网络众多资料,结合自己的实践,记录了hadoop hdfs应用的一些注意事项和知识点,希望对您有所帮助。
环境配置
1. 安装linux ubuntu系统
2. 安装开启openssh-server:$
sudo apt-get install openssh-server
3. 建立ssh 无密码登录
$ ssh-keyge ...