`
扬州老鬼
  • 浏览: 305811 次
  • 性别: Icon_minigender_1
  • 来自: 苏州
社区版块
存档分类
最新评论

hadoop CLASSNAME命令使用注意点

阅读更多
Hadoop中可是使用hadoop CLASSNAME命令。这个CLASSNAME就是你写好的类名。hadoop CLASSNAME命令类似于java classname。
使用hadoop CLASSNAM之前,你需要设置HADOOP_CLASSPATH.
export  HADOOP_CLASSPATH=/home/hadoop/jardir/*.jar:/home/hadoop/workspace/hdfstest/bin/

其中/home/hadoop/jardir/包含了我所有的hadoop的jar包。
/home/hadoop/workspace/hdfstest/bin/就是我的开发class的所在目录,我使用eclipse写java开发,由于eclipse有自动编译的功能,写好之后,就可以直接在命令行运行hadoop CLASSNAME的命令:
hadoop FileSystemDoubleCat hdfs://Hadoop:8020/xstartup


你同样可以将你的工程打成runable jar包(将所有的jar包打包)。
然后运行hadoop jar jar包名 类型 参数1 。
每一次都要打成jar包,这对于测试来说极不方便的。。。




原创,转载请注明出处。
0
5
分享到:
评论

相关推荐

    Hadoop Shell命令大全

    例如,查看文件的内容,可以使用命令: ``` hadoop fs -cat hdfs://host1:port1/file1 ``` 成功执行将返回0,若失败则返回-1。 2. chgrp命令:用于改变文件的组属性,命令格式为hadoop fs -chgrp [-R] GROUP ...

    Hadoop命令使用手册中文版

    ### Hadoop命令使用手册中文版知识点详解 #### 一、Hadoop概述 Hadoop是一款开源软件框架,主要用于处理大规模数据集(通常在集群环境中)。它能够高效地存储和处理非常大的数据集,使得用户能够在相对较低成本的...

    Hadoop fs命令详解.docx

    Hadoop fs命令详解 Hadoop fs命令是Hadoop分布式文件系统(HDFS)的命令行接口,...本文详细介绍了Hadoop fs命令的使用方法和实践操作,希望能够帮助读者更好地理解和使用Hadoop fs命令,提高大数据处理和分析的效率。

    Hadoop Shell命令速查表.pdf

    下面是Hadoop Shell命令的具体知识点: 1. 列出目录内容:使用hadoop fs -ls命令,可以列出HDFS上的文件和目录信息,类似Unix系统中的ls命令。如果参数是一个文件,则会显示文件名、副本数、文件大小、修改日期和...

    Hadoop常用命令

    在实际使用过程中,掌握一些常用的Hadoop命令对于管理和维护Hadoop集群至关重要。下面将详细介绍这些命令及其用法。 #### 1. 启动与停止Hadoop集群 - **start-all.sh**: 这个脚本用于启动Hadoop集群中的所有服务,...

    Hadoop基础命令.docx

    使用命令"hadoop fs -ls"可以查看HDFS(Hadoop Distributed File System)的根目录下的内容。该命令将显示根目录下的所有文件和文件夹。"-ls"是列出文件和文件夹的命令,类似于Linux的"ls"命令。 上传文件 使用命令...

    hadoop shell命令

    - **`hadoop namenode -format`**:格式化Namenode,通常在初次启动HDFS时使用。 #### 6. **hadoop datanode** Datanode负责存储实际的数据块,并响应来自Namenode的指令。 #### 7. **hadoop secondarynamenode**...

    hadoop 命令大全

    - **使Datanode退役**:如果需要退役某个数据节点`datanodename`,可以使用命令`$bin/hadoop dfsadmin -decommission datanodename`。 - **查看所有支持的命令**:命令`$bin/hadoop dfsadmin -help`能够列出所有当前...

    windows 下执行hadoop命令的工具

    winutils windows hadoop 工具 模拟执行linux的几个命令用的。添加到 hadoop-2.2.0\bin下面就行了。

    hadoop命令大全

    这些命令只是Hadoop命令库的一部分,实际使用中还需要结合具体的业务场景和需求进行选择和组合。通过熟练掌握这些命令,可以更有效地管理和操作Hadoop集群,提高大数据处理的效率和准确性。在学习和实践中,应结合...

    Hadoop命令手册

    由于提供的内容中并没有具体的知识点描述,而只是对于“Hadoop命令手册”的标题和描述,以及一些特殊的符号,显然这些符号并不能转换为有价值的IT知识点。但是既然您需要详细的知识点,那么接下来,我会根据标题...

    hadoop的shell命令大全

    这里囊括了所有操作hadoop的shell命令,十分齐全,,。

    Hadoop常用命令.pdf

    > hadoop jar test-1.0-SNAPSHOT-jar-with-dependencies.jar /user/test/input /user/test/out 2.运行Jar包指定类中的主函数 > java -cp test-1.0-SNAPSHOT-jar-with-dependencies.jar com.test.main.MainTest

    hadoop常用命令

    这篇文档将详细介绍Hadoop的常用命令,以及如何在Windows环境下进行Hadoop的开发和操作。 首先,我们来了解一下Hadoop的基本命令。`hadoop fs`是Hadoop文件系统(HDFS)的交互接口,用于执行文件系统操作,如`ls`...

    hadoop命令手册

    用户可以把他们的 Map Reduce 代码捆绑到 jar 文件中,使用这个命令执行。用法:hadoop jar <jar> [mainClass] args...。 #### job job 命令用于和 Map Reduce 作业交互和命令。用法:hadoop job [GENERIC_OPTIONS...

    hadoop操作命令设置

    通过设置上述别名,不仅能够简化Hadoop操作命令,使其更加符合日常使用的习惯,还能有效提高工作效率。值得注意的是,在设置完别名后,需要执行`source /etc/profile`或相应的配置文件加载命令,以确保新设置的别名...

    win10下hadoop的使用

    然而,需要注意的是,Windows并不是Hadoop的最佳运行环境,生产环境中通常推荐使用Linux集群。此外,对于大数据的学习和实践,可以考虑使用虚拟机或Docker模拟Linux环境,以获得更接近实际生产环境的体验。

    hadoop常用命令详解,配有例子说明

    hadoop的常用命令详解,并配有例子说明详细信息

Global site tag (gtag.js) - Google Analytics