Thank you for registering for the Hortonworks Data Platform. Hortonworks Data Platform is designed to be installed by IT operations personnel using Linux-friendly installation tooling. For HDP v1.0, the following instructions should help you to prepare your cluster and get started:
Preparing your cluster for the install
- Select your target hosts and disable SELINUX, firewalls, and other security measures. Make sure each host can reach the Internet via HTTP, HTTPS, and FTP. (For local YUM installs, please read the detailed HMC User Guide)
- Prepare passwordless SSH (via authorized_keys) for root user on all target install hosts
- Create a text file with newline separated host entries (one per target host). Make sure to use fully-qualified domain names for each host. Make sure the DNS for each node works on all other nodes (both forward and reverse lookups). If you are not a DNS administrator, consider building up a consistent /etc/hosts file for all target nodes, listing all other nodes in the cluster by a fully-qualified domain name. NOTE: Without fully-qualified domain names, the install may or may not work but Hadoop will not run jobs properly after installation.
- Make sure the rpms listed below are either not installed or, if installed, are exactly these versions.
- Ruby 1.8.5-24.el5
- Puppet 2.7.9-2
- Ruby Rack 1.1.0-2.el5
- Passenger 3.0.12-1.el5.centos
- Nagios 3.0.12-1.el5.centos
- Nagios plug-ins 1.4.15-2.el5
- Nagios Common 2.12-10.el5
- MySQL v. 5.*
Installing the software via public repositories (REPO)
- Install the following public repos using rpm (just paste the command into your shell as root):
- rpm -Uvh http://public-repo-1.hortonworks.com/HDP-1.0.0.12/repos/centos5/hdp-release-1.0.0.12-1.el5.noarch.rpm (to install the HDP release repo)
- rpm -Uvh http://public-repo-1.hortonworks.com/HDP-1.0.0.12/repos/centos5/epel-release-5-4.noarch.rpm (to install the epel repo if not already installed)
- Run the following 2 YUM commands
- yum install php-pecl-json (this will install php prerequisites that HMC needs on the management host)
- yum install hmc (this will install HMC onto this host directly)
Starting HMC and installing HDP from HMC
- Lastly, start up HMC and install the rest of HDP.
- Service hmc start
- Point your browser at http://target_host_name/hmc/html/index.php
For more information
Please read the HMC User Guide if any of these instructions are unclear or if you would like alternative installation options. The User Guide will answer most questions you might have. If not, there are some additional resources at your disposal including the following:
- Online Documentation
- Knowledgebase
- Community Forums
- Apache Hadoop Training Courses (public, private and online courses)
- Expert Technical Support
相关推荐
总结来说,这个压缩包提供了搭建和管理Hadoop集群所需的核心组件,包括Ambari的源码以便于定制,HDP的RPM包用于快速部署,以及HDP-UTILS的实用工具集,以帮助用户更有效地管理和维护大数据环境。对于想要学习和使用...
HDP全称为Hortonworks Data Platform,是由 Hortonworks 公司提供的一个开源大数据处理平台,它包含了多种Apache项目,如Hadoop、Hive、HBase等。 描述 "离线安装ambari-2.7.4,之 HDP-UTILS-1.1.0.22-centos7.tar....
HDP(Hortonworks Data Platform)是一款基于Apache Hadoop的企业级大数据平台,提供了全面的大数据管理和分析解决方案。HDP不仅包含了Hadoop的核心组件,如HDFS(Hadoop Distributed File System)、MapReduce、...
HDP是一个基于Apache Hadoop的全面数据平台,它包含了多个大数据处理和分析组件,如HDFS、YARN、MapReduce、HBase、Hive、Zookeeper等。 描述中的 "HDP-GPL-3.1.4.0-centos7-gpl.tar.gz" 同样重申了文件名,意味着...
HDP(Hortonworks Data Platform)是 Hortonworks 公司提供的一个全面的大数据平台,它集成了多种开源组件,如Hadoop、Hive、Spark等。GPL(GNU General Public License)则表示这是一个遵循GNU通用公共许可协议的...
它提供了一套完整的工具和组件,包括Hadoop分布式文件系统(HDFS)、YARN资源管理器、MapReduce计算框架、Hive数据仓库、HBase分布式数据库等。HDP还支持其他开源工具和技术,如Apache Spark、Apache Kafka、Apache ...
本文档用于 Hadoop-Hdp的生产、测试环境部署。已成功部署超过20个节点的生产集群。支持HA高可用。
- 三台主机(主机名分别为hdp-hadoop1、hdp-hadoop、hdp-hadoop2),其中hdp-hadoop1作为Master节点,其余两台作为Slave节点。 - 用户名和密码统一为“administrator”和“Hadoop123”。 - 主机仅分了一个C盘,...
总的来说,Ambari和HDP的结合为大数据环境提供了一个全面的管理和运维平台,它简化了复杂的Hadoop生态系统管理,同时提供了企业级的稳定性和扩展性。这个压缩包是部署和管理大数据基础设施的关键组件,对于那些需要...
HDP是由 Hortonworks 提供的一个全面的数据平台,它包含了多个开源项目,如Hadoop、HBase、YARN、Spark等,为数据处理提供了一站式的解决方案。HDP-3.1.0.0是一个特定的版本,它可能包含了性能优化、新功能的引入...
目录:Hidataplus->hdp3.1.0 说明:里面还有ubutntu18和centos7两个版本的 按需使用
内容包括ambari-2.7.4.0-centos7.tar.gz,HDP-3.1.4.0-centos7-rpm.tar.gz,链接失效或者部署过程中遇到任何问题可以私信我,同时列举了几条之前项目环境部署过程中遇到过的问题及解决办法,有爱好大数据领域的同学...
包含集群部署所需的: ambari-2.7.5.0-centos7.tar.gz HDP-3.1.5.6091-centos7-rpm.tar.gz HDF-3.4.1.1-centos7-rpm.tar.gz HDP-GPL-3.1.5.0-centos7-gpl.tar.gz hdf-ambari-mpack-3.4.1.1-4.tar.gz HDP-UTILS-1.1....
Apache Ambari是一个开源工具,专门设计用于简化Hadoop生态系统的部署、管理和监控。这个压缩包"Ambari-2.7.4.0+HDP-3.1.4.0安装包-HDP安装包大全"包含了Ambari的2.7.4.0版本和Hortonworks Data Platform(HDP)的...
集成了hadoop3.2.4,hive3.1.3, spark3.2.1,kyuubi,ozone等组件,完全基于Apache版本使用Ambari2.7.6进行集成,支持centos系的国产操作系统,例如红旗等。同时支持x86和aarch64两种cpu架构,满足国产化改造的需要...
在IT行业中,自动化部署是提升效率的关键之一,尤其是在大规模集群管理中。Ansible作为一个流行的开源自动化工具,被广泛用于配置管理、应用部署和任务执行。本篇将详细讲解如何利用Ansible自动安装Hadoop集群。 ...
通过本文,你可以了解如何将Hadoop部署到Kubernetes平台上,并解决Hadoop在Kubernetes上的部署问题。 关键点: * Hadoop在Kubernetes上的部署需要深入了解Hadoop集群工作原理和Kubernetes的架构原理。 * Hadoop...
标题中的"CDH-HDP-MAPR-DKH-星环组件比较.docx"指的是对比了四大数据平台——Cloudera Data Hub (CDH), Hortonworks Data Platform (HDP), MapR, 以及中国的星环科技(Transwarp)提供的组件和服务。这个文档详细列举...
为了更好地管理和部署Hadoop集群,Hortonworks提供了HDP (Hortonworks Data Platform) 作为一站式解决方案。本文档主要介绍如何使用Ambari工具来安装HDP2.0版本,特别适用于移动互联网环境中,服务器无法直接访问...
Hadoop有三个大发行版本:Apache Hadoop、Cloudera CDH和Hortonworks HDP。Apache Hadoop提供基础版本。Cloudera CDH完全开源,比Apache Hadoop兼容性、安全性、稳定性有增强。Hortonworks HDP包括稳定版本的Apache ...