`
jiezhu2007
  • 浏览: 245467 次
  • 性别: Icon_minigender_1
  • 来自: 深圳
博客专栏
Cfa1f850-3fc3-3a36-9cd8-c3415c9610c6
hadoop技术学习
浏览量:144163
Group-logo
大数据产业分析
浏览量:2980
社区版块
存档分类
最新评论

hadoop发行商介绍:Hortonworks

阅读更多

Hadoop是开源的,但是企业版本其实是由几家大的公司把持,这个就类似linux的redhat和suse一样,提供hadoop发型版本的公司主要的有Hortonworks,Cloudera,mapR。

今天简单介绍Hortonworks:

先了解下Hortonworks的起源,Hortonworks公司,由Yahoo和Benchmark Capital于2011年7月联合创建,出身于名门Yahoo,Hortonworks拥有着许多Hadoop架 构师和源代码贡献者,这些源代码贡献者以前均效力于Yahoo,而且已经为Apache Hadoop项目贡献了超过80%的源代码。

Hortonworks的发版本框架如下:

 

 

简单介绍几个业界用得比较多的组件:

Apache Hive:Hive 基于 MapReduce 而构建,是一种数据仓库,通过用于存储在 HDFS 中的大型数据集的类 SQL 接口实现便利的数据汇总和临时查询。

Apache Mahout:Mahout 为 Hadoop 提供可扩展机器学习算法,帮助数据科技实现基于群集、分类和批处理的协作性筛选。

Apache HBase:一种面向列的 NoSQL 数据存储系统,为用户应用程序提供对于大数据的随机实时读/写访问权限。

Apache Storm:Storm 是一种分布式实时计算系统,用于处理快速、大型的数据流,为 Apache Hadoop® 2.x 带来可靠的实时数据处理功能

Apache Ambari:用于 Apache Hadoop 群集的一种开源安装生命周期管理、营运和监控系统。

Apache Oozie:Oozie Java Web 应用程序用于计划 Apache Hadoop 作业。Oozie 按顺序将多个作业组合至一个逻辑工作单位。

其他更详细的资料可以访问官网:http://zh.hortonworks.com/hadoop/

 

关于hadoop开源软件,大家要有以下认识:

  1. 开源并不等于免费,这些发行版公司通过收取服务费的方式赚钱。
  2. 开源软件,如果是企业级应用,自身没有足够的研发能力的话,还是要尽量选用发型版本,以获得技术支持。
  3. 开源软件往往不能满足需求,二次集成,二次开发的能力很重要,但凡有一定技术能力的公司应该立足在用的基础上,应该发展和锻炼自己的技术团队。
  4. 业界还有很多公司也给hadoop贡献源码,但是并不发行企业版本。国内如阿里巴巴,华为等等,这些公司贡献源码,主要是要使自己的代码能合入开源主干,这样修改的代码可以得到开源社区的力量继续发展。如果开发的东西不能合入开源主干的话,一两年之后就落后于开源社区。



 

  • 大小: 36.5 KB
  • 大小: 51.7 KB
0
0
分享到:
评论

相关推荐

    Hadoop生态圈介绍及入门

    - **Hortonworks Data Platform (HDP)**:这是Hortonworks提供的Hadoop发行版,同样包含了Hadoop核心组件和其他工具。 #### 四、基于Hadoop的企业级应用 Hadoop因其出色的处理能力而被广泛应用于各个领域,特别是...

    Hadoop 2017-07-08 report hadoop选型

    在2017年7月发布的这份报告中,我们深入探讨了当时市场上流行的Hadoop发行版及其相关的解决方案。该报告不仅提供了各厂商的详细目录,还列出了基于用户评价、产品对比次数、关注者数量等多个维度综合排名的前十名...

    HADOOP_适用初级.doc

    Cloudera和Hortonworks是两个重要的Hadoop发行版本提供商,它们在Hadoop的基础上提供了更多的企业级功能和服务。 【Hadoop发行版本】 1. **Apache Hadoop**:这是最原始的基础版本,适合初学者学习。它提供了核心...

    hadoop 介绍

    ### Hadoop介绍与核心组件详解 #### Hadoop概述 Hadoop是一种开源软件框架,主要用于分布式存储和处理大规模数据集。其设计目标是为了处理PB级别的数据,并且能够在数千台商用服务器组成的集群上运行。Hadoop的...

    hadoop生态圈.pptx

    - **版本发行商**:如Apache Hadoop、Cloudera、Hortonworks等,它们提供Hadoop的稳定版本和支持服务。 - **第三方管理软件提供商**:这类公司提供用于管理Hadoop集群的工具,帮助提高效率和简化操作。 - **Hadoop...

    尚硅谷大数据之Hadoop入门

    **2.3 Hadoop三大发行版本** - **Apache Hadoop**: 最原始的版本,适合入门学习。 - **Cloudera Hadoop**: 在大型互联网企业中应用较为广泛,提供了更多的功能和服务。 - **Hortonworks Hadoop**: 专注于提供开源...

    大数据之路选择Hadoop还是MaxCompute?Hadoop开源与MaxCompute对比材料

    此外,市场上还有几家知名的Hadoop发行商,如Cloudera Manager、HortonWorks和MapR,它们分别提供了各自特色的产品和服务。 - **Cloudera Manager**:提供了一个统一的管理界面,简化了Hadoop集群的部署和管理过程...

    hadoop笔记2.pdf

    Hadoop的三个主要发行版本包括Apache、Cloudera、Hortonworks。Apache版本是最初的开源版本,适用于学习。Cloudera成立于2008年,是最早将Hadoop商用化的公司之一,提供了CDH、Cloudera Manager和Cloudera Support等...

    bk_ambari-installation.pdf

    - **完全开源**:与市场上其他Hadoop提供商不同,Hortonworks将其所有代码贡献给了 **Apache Software Foundation**,这意味着HDP是100%开源的,并且采用Apache许可证。 - **技术支持与服务**:Hortonworks主要提供...

    大数据及Hadoop概述课件.pptx

    主要的发行版有Apache Hadoop、CDH(Cloudera Distributed Hadoop)和HDP(Hortonworks Data Platform)。CDH和HDP是商业化的发行版,提供更好的技术支持和稳定性,特别是CDH通常被推荐用于生产环境,因为它具有易...

    Hadoop集群

    Hadoop商业发行版也相继推出,如Cloudera、Hortonworks等,它们为Hadoop提供附加产品及技术支持。Cloudera是最早提供Hadoop商业解决方案的公司之一,其产品线涵盖CDH、Cloudera Manager和Cloudera Support等。CDH是...

    01-Hadoop介绍及CM安装部署.pdf

    最后,文档中提及的Cloudera主要发行商包括MapR、Hortonworks和Cloudera等。Cloudera是最早将Hadoop商用的公司,提供全面的Hadoop商用解决方案,包括Cloudera Manager的自动集群管理功能,并且拥有强大的合作伙伴...

    取代而非补充,Spark Summit2014精彩回顾

    所有主流的Hadoop发行商,包括Hortonworks、IBM、Cloudera、MapR和Pivotal都提供了Spark的包装和技术支持。伴随着Spark平台的发展,Spark Summit2014于6月30日在旧金山正式展开为期三天的峰会,也是有史以来最大的...

    1大数据技术之Hadoop(入门).doc

    Hadoop有三个主要的发行版本:Apache、Cloudera和Hortonworks。Apache版本是最原始的基础版本,适合初学者学习。Cloudera在大型互联网企业中应用广泛,提供了包括支持、咨询、培训在内的Hadoop商用解决方案,其产品...

    01 cms5.13.2和cdh5.13.2使用root用户安装教程.docx

    在本文档中,我们将探讨Apache Hadoop、Cloudera CDH以及Hortonworks HDP等几个主流Hadoop发行版,并重点介绍Cloudera CDH 5.13.2版本及其安装过程。 #### Hadoop发行版概览 - **Apache Hadoop**:这是最原始的...

    Hadoop发展趋势分析.docx

    根据 Gartner 的统计数据,领先的 Hadoop 供应商(亚马逊、Cloudera、Hortonworks 和 MapR Technologies)的 2017 年收入增长了 54%,达到 12 亿美元,占 DBMS 市场总量的 3.2%。许多客户每年在 Hadoop 软件上花费...

    大数据应用分析(Hadoop)45.pptx

    例如,Cloudera、Hortonworks、MapR 等公司提供的商业 Hadoop 发行版,增强了安全性、性能优化和管理工具。 【大数据行业应用分析】 大数据已广泛应用于政府、互联网、电信、金融等行业。政府利用大数据进行政策...

Global site tag (gtag.js) - Google Analytics