`
heipark
  • 浏览: 2097141 次
  • 性别: Icon_minigender_1
  • 来自: 北京
社区版块
存档分类
最新评论

hadoop获取当前正在运作job数量的代码

 
阅读更多

	// 我在这里只有一个Queue,名字叫做default,so,硬编码了。

	Configuration conf = new Configuration();
		conf.set("mapred.job.tracker", "YOUR_MAP_REDUCE_URL");
		JobClient client;
		try {
			client = new JobClient(new JobConf(conf));
			System.out.println(client.getQueues()[0].getQueueName());
			System.out.println(client.getJobsFromQueue(client.getQueues()[0].getQueueName()).length);
		} catch (IOException e) {
			throw new RuntimeException(e);
		}
 

-- end --

 

 

分享到:
评论

相关推荐

    Hadoop分析气象数据完整版源代码(含Hadoop的MapReduce代码和SSM框架)

    Hadoop分析气象数据完整版源代码(含Hadoop的MapReduce代码和SSM框架) 《分布式》布置了一道小作业,这是作业的所有代码,里面包含了Hadoop的MapReduce代码、和SSM框架显示数据的代码

    Hadoop Real-World Solutions Cookbook 源代码

    《Hadoop Real-World Solutions Cookbook 源代码》是一本针对Hadoop实际应用问题解决方案的实战指南,书中通过丰富的示例代码帮助读者理解和解决在大数据处理中遇到的各种挑战。源代码包含了书中各个章节的关键实现...

    win7下hadoop job提交

    在Windows 7环境下提交Hadoop作业(Job)是一项技术性的任务,涉及到多个步骤和概念。首先,我们需要了解Hadoop的基本架构。Hadoop是由Apache软件基金会开发的一个开源分布式计算框架,它允许在廉价硬件上处理和存储...

    hadoop源代码存档

    【Hadoop源代码存档详解】 Hadoop是Apache软件基金会的一个开源项目,它是一个分布式文件系统,旨在提高数据处理和存储的效率。这个"hadopp源代码存档"包含了Hadoop项目的完整源代码,供开发者深入理解其内部机制,...

    Hadoop提交Job执行MR程序代码.zip

    本文将详细解析标题为“Hadoop提交Job执行MR程序代码.zip”的内容,涵盖Hadoop MR程序代码、job提交流程以及MR程序的不同运行模式。 首先,Hadoop MapReduce(简称MR)是基于Google的MapReduce编程模型实现的,主要...

    Hadoop中单词统计案例运行的代码

    在大数据处理领域,Hadoop是一个不可或缺的开源框架,它主要用于分布式存储和计算。在这个"单词统计案例"中,我们将深入探讨Hadoop如何处理文本数据,进行简单的单词计数任务。这个任务是Hadoop初学者经常接触的经典...

    Hadoop 权威指南第四版 配套代码

    Hadoop圣经 Hadoop权威指南第四版 最新配套代码 Hadoop权威指南第四版 最新配套代码

    HaDoop权威指南中文版+示例代码

    《Hadoop权威指南》是了解和学习Apache Hadoop框架的重要参考资料,中文版的推出使得更多中文读者能够方便地掌握这一大数据处理的关键技术。Hadoop是一个开源的分布式计算框架,最初由Doug Cutting和Mike Cafarella...

    hadoop api 操作代码

    这个压缩包文件 "shizhan_03_hadoop" 很可能包含了一些示例代码,展示了如何使用Hadoop API进行数据操作。现在,我们将深入探讨Hadoop API的相关知识点。 1. **Hadoop框架概述**:Hadoop是由Apache软件基金会开发的...

    Hadoop实战+源代码

    《Hadoop实战+源代码》是一本深度探讨Hadoop技术的书籍,结合源代码提供了丰富的实践指导。Hadoop是Apache基金会开发的一个开源分布式计算框架,它允许在廉价硬件上处理和存储海量数据,是大数据处理领域的核心工具...

    hadoop权威指南源代码

    《Hadoop权威指南》是大数据领域的一本经典著作,它深入浅出地介绍了Apache Hadoop这一分布式计算框架的原理和应用。源代码是书中理论知识的实践体现,为读者提供了直观的学习材料。以下是对该书源代码的学习要点的...

    hadoop-2.0.4官方源代码

    这个【标题】"hadoop-2.0.4官方源代码"代表着Hadoop的2.0.4版本的原始代码,这是一次重要的发布,因为它引入了许多改进和新特性。【描述】"hadoop-2.0.4官方源代码"简洁明了地指出了该压缩包的内容,即Hadoop的源码...

    hadoop实战源代码Java

    本资源"hadop实战源代码Java"聚焦于利用Java编程语言与Hadoop Distributed File System (HDFS)进行交互,实现文件的上传、下载以及删除等核心功能。这里我们将深入探讨这些知识点。 首先,了解Hadoop的基本架构是...

    Hadoop实战.源代码

    通过实际运行这些代码,你可以更直观地理解Hadoop的运作机制,同时也可以动手实践,提升自己的编程技能。 源代码的学习对于理解Hadoop的工作流程至关重要,比如,你可以看到如何使用Hadoop API来读写HDFS上的数据,...

    云计算hadoop java写的源代码

    本资源是“云计算Hadoop Java写的源代码”,来自中国人民大学的教学实践,对于学习和理解Hadoop的运作机制以及Java在云计算环境下的应用具有极高的价值。 首先,我们需要了解Hadoop的基本架构。Hadoop主要由两个...

    Hadoop源代码分析

    《Hadoop源代码分析》是一本深入探讨Hadoop核心组件MapReduce的专著。Hadoop是Apache软件基金会的一个开源项目,旨在提供分布式存储和计算框架,以处理和存储大量数据。MapReduce是Hadoop的核心计算模型,它通过将大...

    hadoop之wordcount例程代码

    在Java代码中,这通常是通过`org.apache.hadoop.mapreduce.Job`类来实现的。你需要设置输入和输出路径、指定Mapper和Reducer类,以及其他的配置参数。 运行WordCount程序时,Hadoop会自动将数据分发到集群的各个...

    hadoop代码

    优化策略方面,Hadoop的优化通常包括数据本地性优化(确保数据与计算节点在同一台机器上)、YARN调度器优化、MapReduce参数调整(如map和reduce任务数量、内存分配等),以及HDFS的副本策略调整等。对于HBase,优化...

    hadoop权威指南代码(Hadoop: The Definitive Guide code)

    《Hadoop权威指南》是Hadoop领域的经典著作,其配套代码资源可以帮助读者深入理解Hadoop的内部机制和实际应用。这本书全面介绍了Hadoop生态系统,包括HDFS、MapReduce、YARN以及相关的工具和扩展。代码库`tomwhite-...

Global site tag (gtag.js) - Google Analytics