最新文章列表

hdfs之checkpoint

前提说明:研究的hadoop版本1.0.3 checkpoint的触发条件: 默认1小时进行一次merge; edits的文件大小超过大致64M 以上两个条件,满足任意一个即可,每隔5分钟进行一次条件检查。   checkpoit流程: 在SNN(secondary namenode)服务器上检查fs.checkpoint.dir  fs.checkpoint.edits ...
无尘道长 评论(0) 有3323人浏览 2014-03-24 23:00

Hadoop 应用总结

  参考网络众多资料,结合自己的实践,记录了hadoop hdfs应用的一些注意事项和知识点,希望对您有所帮助。   环境配置        1.  安装linux ubuntu系统        2. 安装开启openssh-server:$ sudo apt-get install openssh-server        3. 建立ssh 无密码登录 $ ssh-keyge ...
lxm63972012 评论(0) 有4221人浏览 2012-03-01 12:21

hadoop wordcount练习

今天下载安装、运行了下hadoop,跟着doc走,但有时也会出现一些问题,所以在这里记录一下:   1. 下载hadoop     我这里下载的是hadoop-0.21.0,之前在 ...
genggeng 评论(1) 有7029人浏览 2011-12-24 23:30

最近博客热门TAG

Java(141747) C(73651) C++(68608) SQL(64571) C#(59609) XML(59133) HTML(59043) JavaScript(54918) .net(54785) Web(54513) 工作(54116) Linux(50906) Oracle(49876) 应用服务器(43288) Spring(40812) 编程(39454) Windows(39381) JSP(37542) MySQL(37268) 数据结构(36423)

博客人气排行榜

    博客电子书下载排行

      >>浏览更多下载

      相关资讯

      相关讨论

      Global site tag (gtag.js) - Google Analytics