第一天,配置hadoop,伪分布式,出现错误
按照教程:输入
bin/hadoop fs -get output output
结果出现如下错误:
ipc.Client: Retrying connect to server: localhost/127.0.0.1:9000. Already tried 0 time(s).
cat logs/hadoop-[用户名]-namenode-[机器名].log
2012-03-13 20:12:57,764 ERROR org.apache.hadoop.hdfs.server.namenode.FSNamesystem: FSNamesystem initialization failed.
org.apache.hadoop.hdfs.server.common.InconsistentFSStateException: Directory /tmp/hadoop-somo/dfs/name is in an inconsistent state: storage directory does not exist or is not accessible.
at org.apache.hadoop.hdfs.server.namenode.FSImage.recoverTransitionRead(FSImage.java:288)
at org.apache.hadoop.hdfs.server.namenode.FSDirectory.loadFSImage(FSDirectory.java:97)
at org.apache.hadoop.hdfs.server.namenode.FSNamesystem.initialize(FSNamesystem.java:386)
at org.apache.hadoop.hdfs.server.namenode.FSNamesystem.<init>(FSNamesystem.java:360)
at org.apache.hadoop.hdfs.server.namenode.NameNode.initialize(NameNode.java:276)
at org.apache.hadoop.hdfs.server.namenode.NameNode.<init>(NameNode.java:496)
at org.apache.hadoop.hdfs.server.namenode.NameNode.createNameNode(NameNode.java:1279)
at org.apache.hadoop.hdfs.server.namenode.NameNode.main(NameNode.java:1288)
上面错误显示,文件状态不一致,存储目录或者不可访问,
创建目录权限可写,然后执行如下语句
bin/hadoop namenode -fromat
仍然结果不对;明天期待解决
第二天解决的(下一遍文章摘要)
2012-03-13 20:12:57,764 ERROR org.apache.hadoop.hdfs.server.namenode.FSNamesystem: FSNamesystem initialization failed.
原因是没有fomat namenode 执行如下命令
- bin/hadoop namenode -format
在这之前需要检查:是否有hadoop进程没有关闭
检查是否有hadoop运行
运行结果
输入
分享到:
相关推荐
NULL 博文链接:https://ouyida3.iteye.com/blog/1144326
在Hadoop中,客户端(Client)负责提交任务、读写数据,而服务器端则包括NameNode、DataNode和TaskTracker等组件,它们处理客户端请求,管理数据存储和任务调度。 二、HDFS通信 1. 客户端与NameNode交互: 当...
向yarn提交任务时Retrying connect to server 0.0.0.0:8032异常
问题终于解决了,之前加上?wsdl的时候报如下错: - I/O exception (java.net.ConnectException) caught when processing ...在网上查了一天的时间终于得以解决 附件中包含测试类javaAxisCallnet.java和所需的jar包
分享一个我大晚上提交Hadoop作业到Yarn上因为一个小小小小错误解决了一晚上的问题! 报错:Exception in thread “main” java.net.ConnectException: Call From hdp-1/192.168.234.129 to hdp-1:8020 failed on ...
自己搭集群用的 centos7 minimal 问题一 防火墙 一开始没装vmtools 手动...INFO ipc.Client: Retrying connect to server: linden10004/192.168.174.104:43012. Already tried 0 time(s); retry policy is RetryUpToMa
2019-03-10 20:22:41,388 INFO ipc.Client: Retrying connect to server: c1/10.0.0.101:8020. Already tried 0 time(s); retry policy is RetryUpToMaximumCountWithFixedSleep(maxRetries=1, sleepTime=1000 ...
【Hadoop简介】 Hadoop是Apache软件基金会的一个开源项目,主要设计用于处理和存储大量数据。它是一个分布式文件系统(HDFS),同时包含了MapReduce计算框架,能够将大型数据集分布在大量的计算机节点上进行并行...
Retrying. --2017-03-27 22:54:49-- (try: 3) https://downloads.openwrt.org/sources/linux-3.10.49.tar.xz Connecting to downloads.openwrt.org (downloads.openwrt.org)|78.24.191.177|:443... failed: ...
Vue CLI v4.2.2 Failed to check for updates :sparkles: Creating project in /home/syw/demo
在Hadoop MapReduce框架中,Job的提交过程是整个分布式计算流程中的关键步骤。这个过程涉及到客户端、JobTracker(在Hadoop 2.x版本中被ResourceManager替代)和TaskTracker(在Hadoop 2.x版本中被NodeManager替代)...
这个压缩包文件`django_request_token-0.14.1-py3-none-any.whl`是针对Python开发的一个库,名为`django_request_token`,版本号为0.14.1。该库特别适用于那些使用Python和Django框架进行后端开发的项目。`whl`文件...
VCS双机启动的时候可能出现如下错误:VCS ERROR V-16-1-10600 Cannot connect to VCS engine 该文档是我在解决该错误的方法,希望能帮助到有需要的朋友!
client.Connect(new IPEndPoint(IPAddress.Parse("192.168.1.100"), 1234)); ``` 一旦连接建立,我们可以通过GetStream方法获取一个NetworkStream对象,该对象可以用来读取和写入数据。发送数据通常涉及使用...
Retrying (Retry(total=4, connect=None, read=None, redirect=None)) after connection broken by 'ReadTimeoutError(HTTPSConnectionPool(host='pypi.python.org', port=443): Read timed out. (read timeout=15)...
#WARNING: Retrying (Retry(total=0, connect=None, read=None, redirect=None, status=None)) after connection broken by 'SSLError(SSLCertVerificationError(1, '[SSL: CERTIFICATE_VERIFY_FAILED] certificate ...
client.Connect(serverAddress, serverPort); isConnected = true; } catch (Exception ex) { Console.WriteLine($"Failed to connect. Reason: {ex.Message}"); Thread.Sleep(5000); // Wait for 5 seconds ...
1. Guava-Retrying库简介 Guava-Retrying是一个基于Guava库的重试机制实现,提供了灵活的重试策略和监听机制,能够满足各种重试场景的需求。该库提供了多种重试策略,如固定间隔重试、指数退避重试等,能够满足不同...
如果你在安装过程中遇到任何错误,例如提示“Retrying (Retry(total=4, connect=None, read=None, redirect=None, status=None))”,这通常意味着网络问题导致下载失败。你可以等待一会儿,或者尝试多次执行安装命令...
我们在写爬虫的过程中,经常遇到爬取失败的情况,这个时候我们一般会通过try块去进行重试,但是每次都写那么一堆try块,真的是太麻烦,所以今天就来说一个比较pythonic的模块,retrying. 安装 retrying模块的安装很...