`
乡里伢崽
  • 浏览: 112036 次
  • 性别: Icon_minigender_1
  • 来自: 深圳
社区版块
存档分类
最新评论

hadoop的管理命令 dfsadmin

    博客分类:
  • hdfs
 
阅读更多
dfsadmin是一个多任务的工具,我们可以使用它来获取HDFS的状态信息,以及在HDFS上执行的一系列管理操作。

调用方式

例如:Hadoop dfsadmin -report

dfsadmin命令详解

-report:查看文件系统的基本信息和统计信息。

-safeadmin enter | leave | get | wait:安全模式命令。安全模式是NameNode的一种状态,在这种状态下,NameNode不接受对名字空间的更改(只读);不复制或删除块。NameNode在启动时自动进入安全模式,当配置块的最小百分数满足最小副本数的条件时,会自动离开安全模式。enter是进入,leave是离开。

-refreshNodes:重新读取hosts和exclude文件,使新的节点或需要退出集群的节点能够被NameNode重新识别。这个命令在新增节点或注销节点时用到。

-finalizeUpgrade:终结HDFS的升级操作。DataNode删除前一个版本的工作目录,之后NameNode也这样做。

-upgradeProgress status | details | force:请求当前系统的升级状态 | 升级状态的细节 | 强制升级操作

-metasave filename:  保存NameNode的主要数据结构到hadoop.log.dir属性指定的目录下的<filename> 文件中。

-setQuota <quota><dirname>……<dirname>: 为每个目录<dirname>设定配额<quota>。目录配额是一个长整形整数,强制设定目录树下的名字个数。

-clrQuota <dirname>……<dirname>: 为每个目录<dirname>清除配额设定。

-help : 这个命令就不多说了。

本篇文章来源于 Linux公社网站(www.linuxidc.com)  原文链接:http://www.linuxidc.com/Linux/2014-01/95387.htm
分享到:
评论

相关推荐

    hadoop shell命令

    而掌握Hadoop Shell命令是进行数据管理和操作的基础技能之一。 ### Hadoop Shell 命令详解 #### 1. **hadoop fs** `hadoop fs` 命令是访问HDFS(Hadoop分布式文件系统)的主要方式,提供了与文件和目录相关的各种...

    hadoop命令手册

    管理命令包括 dfsadmin、mradmin 等,用于管理 Hadoop 集群和 MapReduce 作业。 ### 用户命令 #### archive archive 命令用于创建 Hadoop 档案文件。用法:hadoop archive -archiveName NAME * 。其中,-...

    hadoop 命令大全

    ### Hadoop命令大全详解 #### 一、Hadoop配置与环境变量设置 **1....Hadoop的配置文件对于整个系统的稳定...以上就是Hadoop命令大全的主要内容,通过对这些命令的学习和掌握,可以帮助用户更好地管理和使用Hadoop集群。

    hadoop常用命令

    `hadoop dfsadmin`是管理员命令,例如`report`可以显示HDFS的总体状态,`safemode enter/leave`则用于进入或退出安全模式。 `hadoop jar`用于运行用户编写的MapReduce程序,例如`hadoop jar your-jar-file.jar your...

    Hadoop命令手册

    实际上,Hadoop命令还包括很多高级选项和参数,能够执行复杂的数据处理和集群管理任务。使用Hadoop时,熟悉这些命令能够帮助高效地处理大数据工作负载,并通过Hadoop命令行工具来执行各种集群操作。

    hadoop命令大全

    了解和熟练掌握Hadoop命令是大数据处理中的基础技能。下面我们将详细介绍一些重要的Hadoop命令及其应用场景。 1. **Hadoop Shell命令**: - `hadoop fs`:这是Hadoop文件系统的主要接口,用于执行文件操作,如创建...

    Hadoop命令使用手册中文版

    ### Hadoop命令使用手册中文版知识点详解 #### 一、Hadoop概述 Hadoop是一款开源软件框架,主要用于处理大规模数据集(通常在集群环境中)。它能够高效地存储和处理非常大的数据集,使得用户能够在相对较低成本的...

    hadoop的所有命令

    1. 列出所有Hadoop命令 Hadoop命令行通过执行`hadoop fs-help`命令来获取所有支持的命令列表。此命令输出了Hadoop文件系统(HDFS)的使用帮助信息。 2. 显示关于某个命令的详细信息 用户可以通过`hadoop fs-help ...

    hadoop基本命令

    Hadoop 提供了多种命令来管理和维护 Hadoop 集群,包括文件系统操作、作业管理、集群管理等。在本资源摘要信息中,我们将详细介绍 Hadoop 的基本命令。 文件系统操作 1. 列出所有 Hadoop Shell 支持的命令:`$ bin...

    Hadoop命令

    通过掌握这些基本的Hadoop命令,你可以有效地管理和操作Hadoop集群,进行大数据的存储和处理。实际工作中,还需要结合具体业务需求,学习如何编写MapReduce程序,优化性能,以及处理各种异常情况。希望这些信息对你...

    hadoop命令

    ### Hadoop 命令详解 #### 一、概述 Hadoop是一款开源软件框架,用于分布式存储和处理大型数据集。...以上是Hadoop命令的综合介绍,通过学习和掌握这些命令,可以帮助用户更加高效地管理和操作Hadoop集群。

    Linux下Hadoop伪分布式配置及操作命令

    管理命令则用于集群管理任务,如启动/停止守护进程(如daemonlog)、检查文件系统状态(如fsck)、提交作业(如job)、以及集群管理相关的命令(如balancer、datanode、dfsadmin、jobtracker、namenode、...

    Hadoop 管理

    2. **`hadoop dfsadmin`**:这个工具主要用于管理HDFS集群的管理员功能,例如格式化NameNode、报告集群状态、平衡数据块分布等。 - 示例:`[hduser@hsrv01 ~]$ hadoop dfsadmin` - `Usage: java DFSAdmin` #### ...

    Hadoop命令大全

    掌握Hadoop命令对于管理和操作Hadoop环境至关重要。以下是根据提供的文件信息整理的关键Hadoop命令及其功能概述。 #### 一、Hadoop Shell命令 1. **列出所有Hadoop Shell支持的命令** ``` $bin/hadoop fs -help ...

    hadoop大数据常用命令

    **Hadoop命令通用用法** - **命令**: `hadoop [--config confdir] [COMMAND] [GENERIC_OPTIONS] [COMMAND_OPTIONS]` - **作用**: 执行Hadoop的各种命令。 - **注意**: `-config`用于指定配置文件的位置。 **常规...

    hadoop2安装和常用shell命令

    ### Hadoop2安装与常用Shell...通过这些步骤,你可以成功地搭建起一个功能完备的Hadoop2集群,并利用各种命令来管理和监控这个集群。对于那些希望深入了解Hadoop集群部署和管理的人来说,这些信息将是极其宝贵的资源。

    hadoop-管理

    首先,当 Hadoop 的 DataNode 宕机时,管理员应定位到 Hadoop 的安装目录,通过执行 `./hadoop-daemon.sh start datanode` 命令来重启 DataNode。同时,TaskTracker 也需重启,因为它是 MapReduce 框架中的工作节点...

Global site tag (gtag.js) - Google Analytics