1.创建目录
hadoop fs -mkdir /park01
2.查看目录
hadoop fs -ls /
hadoop fs -lsR / 递归查看
3.上传文件
文件路径 hdfs目录路径,即将文件上传的hdfs上的哪个目录中
hadoop fs -put ./file /park01
4.下载文件
hdfs文件路径,下载位置路径,即将hdfs上的文件下载到哪个地址
hadoop fs -get /park01/1.txt ./
5.删除文件
hadoop fs -rm /park01/1.txt
6.删除目录
hadoop fs -rmdir /park02
删除非空目录
hadoop fs -rm -r /park01
7.查看文件内容
hadoop fs -cat /park01/1.txt
hadoop fs -tail /park01/1.txt
8.目录重命名
hadoop fs -mv /park02 /park03
9.移动文件
hadoop fs -mv /1.txt /park03
10.合并目录下文件内容
将 /park01 目录下的文件合并至3.txt文件内
hadoop fs -getmerge /park01 ./3.txt
11.创建空白文件
hadoop fs -touch /park03/3.txt
12.分区查看
hadoop fsck /park01/1.txt -files -blocks -locations -racks
13.进入安全模式
hadoop dfsadmin -safemode enter
安全模式下不允许进行修改
14.退出安全模式
hadoop dfsadmin -safemode leave
- 大小: 11.4 KB
- 大小: 21.5 KB
- 大小: 10.9 KB
- 大小: 10 KB
- 大小: 18.8 KB
- 大小: 7.5 KB
- 大小: 24.4 KB
- 大小: 9.4 KB
- 大小: 19.1 KB
- 大小: 24.8 KB
- 大小: 7.3 KB
- 大小: 24.7 KB
- 大小: 6 KB
- 大小: 22.4 KB
- 大小: 8.5 KB
分享到:
相关推荐
这些HDFS命令对于日常的数据操作至关重要,包括数据上传、下载、查看、权限管理等。熟悉并熟练使用这些命令能够大大提高Hadoop环境中的工作效率。在实际工作中,根据具体需求灵活运用这些命令,可以实现对HDFS的高效...
### hdfs命令大全知识点 #### 一、概述 HDFS(Hadoop Distributed File System)是Hadoop项目的核心子项目之一,旨在为海量数据提供存储。HDFS有着高容错性的特点,并且设计用来部署在低廉的硬件上;而且它提供高...
本实验报告主要关注HDFS的常用操作命令,这些命令是管理员和数据分析师日常工作中不可或缺的工具。 实验开始时,通过执行`start-dfs.sh`命令启动HDFS服务。这是在Hadoop集群中启动所有DataNode和NameNode节点的关键...
创建文件夹 传文件 下载文件 删除文件、文件夹 查看下HDFS的文件和目录
本文档将详细介绍如何使用Apache Sqoop工具将数据从本地数据库导入到HDFS,并提供具体的命令示例及操作步骤。 #### 一、Apache Sqoop简介 Apache Sqoop是一款开源工具,用于高效地在Hadoop和关系型数据库之间传输...
### Hadoop HDFS Shell 命令详解 #### 概述 Hadoop HDFS Shell 是一组用于与Hadoop分布式文件系统 (HDFS) 进行交互的命令行工具。通过这些命令,用户能够执行诸如创建、删除、移动文件以及设置文件权限等操作。本文...
### Hadoop与HDFS命令详解 #### 一、HDFS基本概念 Hadoop是一个能够对大量数据进行分布式处理的软件框架,它支持大规模数据集的分布式处理,是大数据技术领域的重要组成部分。Hadoop的核心组件之一是HDFS(Hadoop ...
实验2模板——HDFS环境搭建及基本命令的使用 实验目标: 本实验旨在帮助学生掌握Hadoop分布式文件系统(HDFS)的搭建过程,以及在HDFS环境中执行基本的文件操作命令。通过实践,学生将熟悉伪分布式环境的配置,学习...
创建密钥文件的命令如下: ktutil: add_entry -password -p nn/admin@psy.com -k 3 -e aes256-cts-hmac-sha1-96 ktutil: add_entry -password -p host/admin@psy.com -k 3 -e aes256-cts-hmac-sha1-96 ktutil: ...
### HDFS 命令原理介绍 #### HDFS 概述 HDFS(Hadoop Distributed File System)是一种专为大规模数据处理设计的分布式文件系统。它具有高度容错性、可扩展性和高吞吐率等特点,非常适合存储和处理大规模数据集。 ...
了解并熟练掌握这些HDFS命令对于进行大数据分析至关重要,因为它们提供了对HDFS文件系统的直接操作,包括读取、写入、管理文件和目录,以及监控存储资源。通过这些命令,数据工程师和分析师可以高效地管理和处理存储...
在Hadoop分布式文件系统(HDFS)的管理中,Shell命令是操作HDFS的基本工具,用于执行文件和目录的创建、查看、上传、下载、复制、移动、删除等操作。以下是对HDFS Shell命令的详细解释: 1. **创建文件夹**: 使用`...
HDFS命令 HDFS提供了多种命令来管理和维护HDFS文件系统,例如: 1. `hdfs dfs`:运行文件系统命令,例如查看文件列表、创建目录等。 2. `hdfs namenode -format`:格式化NameNode,创建文件系统的命名空间。 3. `...
HDFS基本命令 HDFS(Hadoop Distributed File System)是一种分布式文件系统,提供了对大规模数据的存储和管理能力。在HDFS中,基本命令是最基础也是最常用的命令,掌握这些命令是使用HDFS的基础。本节我们将详细...
#### 二、HDFS命令详解 HDFS提供了一系列的命令用于管理文件系统。这些命令类似于Unix/Linux系统中的命令,对于熟悉Linux命令行的用户来说非常友好。 ##### 1. 使用`usage`或`help`查看帮助 - **命令格式**: ``` ...
这款插件的主要功能可能包括浏览HDFS文件系统、上传/下载文件、执行HDFS命令以及查看文件内容等。 【Hadoop HDFS】Hadoop是Apache软件基金会的一个开源项目,提供了一个分布式文件系统,名为HDFS(Hadoop ...
4. **上传和下载**:HDFS Explorer Installer支持通过拖放或选择文件的方式进行上传和下载,省去了编写和执行HDFS命令的步骤,极大地提高了工作效率。 5. **权限管理**:对于具有不同访问权限的文件和目录,工具...
文档详细的讲述了Hadoop中HDFS文件操作命令和HDFS编程
在使用HDFS命令时,需要注意cmd前的“-”不能省略。 在实验中,我们学习了HDFS的基本操作,包括列表文件目录、创建文件夹、上传文件、下载文件、查看文件内容、统计目录下各文件的大小、删除文件或文件夹等操作。 ...
(3)hdfs dfs:跟 hadoop dfs 的命令作用一样,只能适用于 HDFS 文件系统。 一些常见的 HDFS 命令: * ls:查看当前目录结构 * lsr:递归查看目录结构 * du:统计目录下文件大小 * dus:汇总统计目录下文件大小 *...