继续昨天问题:今天已经解决,调通了(hadoop 1.0.0)
2012-03-13 20:12:57,764 ERROR org.apache.hadoop.hdfs.server.namenode.FSNamesystem: FSNamesystem initialization failed.
原因是没有fomat namenode 执行如下命令
- bin/hadoop namenode -format
在这之前需要检查:是否有hadoop进程没有关闭
检查是否有hadoop运行
运行结果
输入
NameNode 'localhost:9000'
Started: |
Wed Mar 14 18:48:41 CST 2012 |
Version: |
1.0.1-SNAPSHOT, r |
Compiled: |
Wed Dec 28 11:13:26 CST 2011 by somo |
Upgrades: |
There are no upgrades in progress. |
Browse the filesystem
Namenode Logs
Cluster Summary
Safe mode is ON. The ratio of reported blocks 0.0000 has not reached the threshold 0.9990. Safe mode will be turned off automatically.
6 files and directories, 1 blocks = 7 total. Heap Size is 240.69 MB / 888.94 MB (27%)
Configured Capacity |
: |
0 KB |
DFS Used |
: |
0 KB |
Non DFS Used |
: |
0 KB |
DFS Remaining |
: |
0 KB |
DFS Used% |
: |
100 % |
DFS Remaining% |
: |
0 % |
Live Nodes |
: |
0 |
Dead Nodes |
: |
0 |
Decommissioning Nodes |
: |
0 |
Number of Under-Replicated Blocks |
: |
0 |
There are no datanodes in the cluster
NameNode Storage:
Storage Directory |
Type |
State |
/tmp/hadoop-somo/dfs/name |
IMAGE_AND_EDITS |
Active |
This is Apache Hadoop release 1.0.1-SNAPSHOT
查看JobTracker
http://localhost:50030/
上面页面显示,成功,不过集群没有Data Node
- 大小: 3.5 KB
分享到:
相关推荐
#### 二、为何选择学习Hadoop 1. **市场需求**:当前社会产生了大量的数据,例如每分钟Twitter上就有超过10万条消息发布,Facebook的浏览量达到600万次,而国内如淘宝等电商平台在特殊节日如双十一期间更是数据量...
### Hadoop 2.7.1 —— NFS 部署详解 #### 一、概述 随着大数据技术的发展,Hadoop作为主流的大数据处理框架之一,其分布式存储系统HDFS得到了广泛的应用。为了提高Hadoop集群的数据访问效率,通常会采用网络文件...
为何Hadoop是分布式大数据处理的未来?如何掌握Hadoop? Hadoop的历史 始于2002年的apache项目Nutch 2003年Google发表了关于GFS的论文 2004年Nutch的开发者开发了NDFS 2004年Google发表了关于MapReduce的...
hadoop 权威指南 第3版,很好的书本,希望大家喜欢。pdf
本压缩包“Hadoop高级编程——构建与实现大数据解决方案”将深入探讨如何利用Hadoop进行高效的数据操作,构建实际的大数据解决方案。 一、Hadoop概述 Hadoop是由Apache基金会开发的开源项目,主要由Hadoop ...
Hadoop——分布式文件管理系统HDFS 2. Hadoop——HDFS的Shell操作 3. Hadoop——HDFS的Java API操作 4. Hadoop——分布式计算框架MapReduce 5. Hadoop——MapReduce案例 6. Hadoop——资源调度器...
Hadoop课程实验和报告——Hadoop安装实验报告 Hadoop是一个开源的大数据处理框架,由Apache基金会开发和维护。它提供了一种可靠、可扩展、可高效的方法来存储和处理大规模数据。在本实验报告中,我们将介绍Hadoop的...
第1章 初识Hadoop 数据!数据! 数据存储与分析 与其他系统相比 关系型数据库管理系统 网格计算 志愿计算 1.3.4 Hadoop 发展简史 Apache Hadoop和Hadoop生态圈 第2章 关于MapReduce 一个气象数据...
在大数据领域,Hadoop生态圈是不可或缺的重要组成部分,它为海量数据的存储、处理和分析提供了高效可靠的...这份"最新Hadoop生态圈开发学习资料——尚硅谷"将是你学习过程中宝贵的资源,助你在大数据的世界中游刃有余。
第二代Hadoop包括两个版本,0.23.x和2.x。这两个版本相对于Hadoop 1.0,采用了一套全新的架构,包括HDFS Federation和YARN两个系统。2.x版本相较于0.23.x版本增加了NameNode HA(高可用性)和Wire-compatibility...
总结来说,Hadoop快速入门的第四章主要介绍了Zookeeper的安装和配置,这对于理解和实践Hadoop分布式计算至关重要。通过学习Zookeeper,你可以更好地理解分布式系统的协调机制,提升你在大数据领域的专业能力。
自己整理的hadoop学习笔记,很详尽 很真实。linux操作终端下遇到的各种Hadoop常见问题 解决方案
总的来说,《Hadoop权威指南》第二版和第四版都是学习Hadoop及其生态系统的重要参考资料。第二版适合初学者入门,了解Hadoop的基础概念和基本操作;而第四版则更深入地探讨了Hadoop的演进和新的技术趋势,对有经验的...
《Hadoop权威指南中文版(第二版)》与《Hadoop in Action》及《Pro Hadoop》这三本书是深入理解和掌握Hadoop生态系统的关键资源。Hadoop作为一个分布式计算框架,其核心是解决大规模数据处理的问题,它允许在廉价...
本文将深入探讨“Hadoop高级编程——构建与实现大数据解决方案”这一主题,旨在帮助读者掌握如何利用Hadoop构建实际的大数据项目。 首先,我们要理解Hadoop的基础架构。Hadoop由两个主要组件构成:Hadoop ...
Hive提供了一种基于SQL的查询语言——HQL(Hive Query Language),用于对存储在Hadoop上的大型数据集进行批处理分析。Hive将SQL语句转化为MapReduce任务执行,简化了大数据分析的工作。 【Pig】: Pig是高级数据...