我的CSDN博客地址:
http://blog.csdn.net/qidong7
基本文件命令
hadoop fs -cmd<args>
cmd的命令通常与unix的命令相同,如 hadoop fs -ls
查看列表
hadoop fs -ls /
查看目录结构
hadoop fs -lsr /
创建目录(root 是当前用户的目录)
hadoop fs mkdir /user/root
加入文件
hadoop fs put example.txt .
注意上面这个命令最后一个参数是(.)。这意味着我们把文件放入了默认的工作目录。
等价于
hadoop fs put example.txt /user/root/
删除
hadoop fs rm /user/root/example.txt //如果rm不行,用rmr
查看
hadoop fs -cat /user/root/example.txt
hadoop fs -cat hdfs://192.168.1.77:9002/user/root/example.txt
查看最后的一千个字节
hadoop fs -tail /user/root/example.txt
获取到本地,注意上面这个命令最后一个参数是(.)
hadoop fs -get /user/root/example.txt .
查看帮助,如查看ls帮助
hadoop fs -help ls
分享到:
相关推荐
### Linux常用的操作命令+hadoop安装指导 #### Linux用户与权限管理相关知识点 ##### 了解Linux用户与权限管理的重要性 在Linux系统中,用户管理和权限控制是确保系统安全性和稳定性的重要手段之一。通过合理地...
### Hadoop2安装与常用Shell命令详解 #### Hadoop2安装步骤 在开始Hadoop2的安装之前,首先需要确保所有节点的操作系统版本为CentOS/Red Hat Linux 6.4_x64,并且每台服务器都已完成基本的系统配置。 ##### 系统...
Hadoop HDFS分布式文件系统常用命令汇总 Hadoop HDFS分布式文件系统是大数据存储和处理的核心组件。作为一个分布式文件系统,HDFS提供了高可靠性、高可扩展性和高性能的存储解决方案。在使用HDFS时,经常需要执行...
实验二:“熟悉常用的HDFS操作”旨在帮助学习者深入理解Hadoop分布式文件系统(HDFS)在大数据处理中的核心地位,以及如何通过Shell命令和Java API进行高效操作。HDFS在Hadoop架构中扮演着存储大数据的核心角色,为...
4. chown命令:用于改变文件的所有者,命令格式为hadoop fs -chown [-R] [OWNER][:] [GROUP] URI [URI …]。例如,更改所有者和所属组: ``` hadoop fs -chown -R owner:group /user/hadoop/file ``` 仅超级用户...
以上知识点详细地阐述了在CentOS系统上配置Hadoop伪分布式环境的全过程,包括了环境准备、JDK安装、环境变量配置、Hadoop配置文件修改、SSH无密码登录配置、集群的启动和使用,以及常用命令的介绍。对于初学者来说,...
### Hadoop常用命令详解 Hadoop是一款开源软件框架,主要用于分布式存储与处理大规模数据集。在实际使用过程中,掌握一些常用的Hadoop命令对于管理和维护Hadoop集群至关重要。下面将详细介绍这些命令及其用法。 ##...
### Hadoop大数据常用命令知识点详解 #### 一、启动与关闭Hadoop集群 **启动Hadoop** - **步骤**: 进入HADOOP_HOME目录,然后执行`sh bin/start-all.sh`。 - **作用**: 启动Hadoop集群,包括DataNodes和NameNode。...
#### 二、常用Hadoop命令详解 **1. 查看支持的命令** 通过命令`$bin/hadoop fs -help`可以列出所有Hadoop Shell支持的命令及其简短的描述。 **2. 显示特定命令的帮助信息** 如果想要了解某个命令的具体使用方法...
Hadoop 和 HBase 常用 shell 命令 在大数据处理中,Hadoop 和 HBase 是两个非常重要的组件。Hadoop 是一个分布式计算框架,用于处理大规模数据,而 HBase 是一个基于 Hadoop 的分布式数据库,用于存储和处理大规模...
以下是一些基本的 Hadoop 命令: 1. **启动 Hadoop**:在安装了 Hadoop 的目录下启动 Hadoop 服务。 2. **创建目录**:在 HDFS 中创建目录。 - `hadoop fs -mkdir /user/yourusername/text`:在 HDFS 中创建名为 `...
下面介绍一些常用的Hadoop命令及其知识点: 1. hadoop fs -ls [URI]:这个命令用于列出HDFS(Hadoop Distributed File System)上的文件和目录。URI参数是指定HDFS路径的统一资源标识符。 2. hadoop fs -put ...
> hadoop jar test-1.0-SNAPSHOT-jar-with-dependencies.jar /user/test/input /user/test/out 2.运行Jar包指定类中的主函数 > java -cp test-1.0-SNAPSHOT-jar-with-dependencies.jar com.test.main.MainTest
启动Hadoop后,可以在HDFS中创建用户目录,并通过Hadoop命令如`hadoop fs -mkdir`创建目录,`hadoop fs -put`上传文件,`hadoop fs -ls`查看目录内容,以及`hadoop fs -get`将HDFS上的文件或目录下载到本地。...
### 二、Linux常用命令及操作 #### 常用命令介绍 - **打开终端**:使用快捷键`Ctrl+Alt+T`快速打开终端。 - **创建用户**:使用`sudouseradd-mhadoop-s/bin/bash`命令创建名为`hadoop`的新用户,并指定默认shell。...
该文档记录了在linux的shell环境下执行的hadoop的相关操作命令,包括多hafs文件的相关操作
hadoop的常用命令详解,并配有例子说明详细信息
2. 常用Hadoop命令 - `fs`:对文件系统进行操作,包括复制、移动、删除等文件操作命令。 - `fsck`:检查文件系统的健康状况,可以用来检查文件系统的错误。 - `jar`:运行Hadoop的jar文件,用于运行MapReduce作业...
这篇文档将详细介绍Hadoop的常用命令,以及如何在Windows环境下进行Hadoop的开发和操作。 首先,我们来了解一下Hadoop的基本命令。`hadoop fs`是Hadoop文件系统(HDFS)的交互接口,用于执行文件系统操作,如`ls`...
Hadoop-HDFS常用命令