测试环境
- centos6.5 64bit
- ambari-2.0.1
作用
- ambari安装hadoop时默认是从官网在线下载安装包,安装包要3Gb左右大小,在线安装屡屡请求超时而失败,况且正式环境中hadoop集群主机多数是不能链接外网的,因此,配置一个本地数据源是多么的迫切和明智的,下面参考本地数据配置过程.ambari安装过程略过.
安装ambari
参考地址:https://cwiki.apache.org/confluence/display/AMBARI/Install+Ambari+2.0.1+from+Public+Repositories
接下来都是基于ambari-server安装成功基础之上制作本地repo:
下载repo文件
需要下载ambari.repo;hdp.repo;hdp-util.repo三个文件并存放到/etc/yum.repos.d/文件目录下:
[root@work ambari]# wget http://s3.amazonaws.com/public-repo-1.hortonworks.com/HDP-UTILS-1.1.0.20/repos/centos6/hdp-util.repo -P /etc/yum.repos.d/
[root@work ambari]# wget http://s3.amazonaws.com/public-repo-1.hortonworks.com/HDP/centos6/2.x/2.2-latest/hdp.repo -P /etc/yum.repos.d/
[root@work ambari]# wget http://s3.amazonaws.com/public-repo-1.hortonworks.com/ambari/centos6/2.x/updates/2.0.1/ambari.repo -P /etc/yum.repos.d/
安装httpd服务
安装基础包和httpd服务并配置启动
[root@work ambari]# yum -y install httpd yum-utils createrepo yum-plugin-priorities
编辑/etc/yum/pluginconf.d/priorities.conf,修改为如下:
[main]
enabled=1
gpgcheck=0
设置并启动httpd服务
chkconfig httpd on
service httpd start
启动后浏览器访问ip:80验证服务安装正常即可,其根目录在/var/www/目录下
同步源文件
[root@work ambari]# mkdir /var/www/html/ambari //创建ambari目录
[root@work ambari]# mkdir /var/www/html/hdp // 创建hdp目录
[root@work ambari]# cd /var/www/html/ambari/
[root@work ambari]# reposync -r Updates-ambari-2.0.1 // reposync同步ambari源文件到本地 版本好可以从刚同步的ambari.repo文件中查看,根据repo中不同的版本,同步不同的源文件即可,是个漫长的同步过程
[root@work hdp]# more /etc/yum.repos.d/hdp.repo
#VERSION_NUMBER=2.2.4.2-2
[HDP-2.2.4.2]
name=HDP Version - HDP-2.2.4.2
baseurl=http://public-repo-1.hortonworks.com/HDP/centos5/2.x/updates/2.2.4.2
gpgcheck=1
gpgkey=http://public-repo-1.hortonworks.com/HDP/centos5/2.x/updates/2.2.4.2/RPM-GPG-KEY/RPM-GPG-KEY-Jenkins
enabled=1
priority=1
[HDP-UTILS-1.1.0.20]
name=HDP Utils Version - HDP-UTILS-1.1.0.20
baseurl=http://public-repo-1.hortonworks.com/HDP-UTILS-1.1.0.20/repos/centos5
gpgcheck=1
gpgkey=http://public-repo-1.hortonworks.com/HDP/centos5/2.x/updates/2.2.4.2/RPM-GPG-KEY/RPM-GPG-KEY-Jenkins
enabled=1
priority=1
[root@work hdp]# reposync -r HDP-2.2.4.2 // 漫长等待同步
[root@work hdp]# reposync -r HDP-UTILS-1.1.0.20 // 漫长
生成本地repo
-生成hdp的repo
[root@work ~]# ceraterepo /var/www/html/hdp/centos6/HDP-2.2.4.2/ //生成hdp的repo
[root@work ~]# ceraterepo /var/www/html/hdp/centos6/HDP-UTILS-1.1.0.20/ //生成hdp-utils的repo
[root@work ~]# ceraterepo /var/www/html/ambari/centos6/Updates-ambari-2.0.1/ //生成ambari的repo
穿件repo成功后,可以从httpd的80端口看到如下目录:
ambari:
HDP:
HDP_UTILS:
*重启ambari-server
[root@work ~]# ambari-server restart
配置repo
如图所示:
安装的节点的配置内存要在8G+
不错:http://www.cnblogs.com/scotoma/archive/2013/05/18/3085040.html
相关推荐
大数据管理与监控:Ambari:Ambari安装与配置.docx
1. **统一的安装与配置**:Ambari 2.6.0提供了一套完整的安装流程,支持Hadoop、Spark等多个组件的自动化安装和配置。 2. **监控与管理**:提供了丰富的监控功能,包括资源使用情况、服务状态等,并且可以通过Web...
### Ambari安装详解 #### 一、安装前的准备工作 Ambari是Apache软件基金会下的一个开源项目,主要用于简化Hadoop集群的部署、管理和监控。本文档将详细介绍如何在三台CentOS 7服务器上安装Ambari,并对整个过程...
### Ambari安装详解 #### 一、Ambari简介 Ambari是Apache基金会下的一个开源项目,它提供了一套便捷的方式来部署、管理和监控Hadoop集群。Ambari简化了Hadoop集群的管理,使得用户能够更加专注于数据处理任务而非...
Ambari 安装及搭建 Hadoop 大数据集群 Ambari 是一个基于 Apache 的开源项目,提供了一个简洁的 Web 界面来管理和监控 Hadoop 集群。下面是使用 Ambari 安装和搭建 Hadoop 大数据集群的详细步骤。 一、安装环境...
2. 配置 Ambari 服务:在安装 Ambari 服务之后,需要配置 Ambari 服务,以便便捷地管理 Hadoop 集群。 搭建 HDP 集群 1. 安装 HDP 组件:可以通过使用 Ambari 的安装脚本来安装 HDP 组件。 2. 配置 HDP 组件:在...
Ambari会根据你的配置和定义文件,在每个节点上安装和配置Solr。 8. **验证安装**:安装完成后,可以通过Ambari的监控功能检查Solr服务是否正常运行,以及执行一些基本的搜索操作来验证功能。 9. **维护与更新**:...
该平台提供了一个端到端的解决方案,包括安装、操作、修改配置和监控集群中的所有节点。使用 Ambari 的 Web UI 和 REST API,可以在服务中心部署、操作和监控集群中的所有节点。 在搭建 Hadoop 集群环境之前,需要...
Ambari 2.7.4 版本是该工具的一个稳定版本,支持多种 Hadoop 组件的安装、配置和管理。而 Hue 是一个开源的 Hadoop 用户界面系统,它允许用户通过浏览器进行数据处理和分析,如执行 HDFS 操作、MapReduce 任务、Hive...
### Ambari安装文档知识点详解 #### 一、概述 Ambari是一个开源项目,用于简化Apache Hadoop集群的部署、管理和监控。它提供了一个直观的Web界面来管理Hadoop集群,支持各种Hadoop组件(如HDFS、YARN、Hive、Spark...
Red Hat 7.3环境下,通过局域网使用Ambari安装大数据平台是一项复杂的工程任务,涉及到网络配置、系统配置、服务安装与配置等多个步骤。以下是根据提供的文件内容,详细解析在这一过程中会用到的知识点: 1. 静态IP...
Apache Ambari 是一个用于管理和监控Hadoop集群的开源工具,它提供了直观的Web界面和RESTful API,使得安装、配置、管理Hadoop生态系统变得更加简单。Flume是Apache的一个开源项目,用于收集、聚合和移动大量日志...
完整的Ambari离线安装教程,从环境的基本配置到Ambari-Server的设置
Apache Ambari 是一个用于管理和监控 Hadoop 生态系统的服务,它提供了一个用户友好的 Web 界面和 REST API,简化了集群的部署、配置和管理。在本篇中,我们将探讨如何集成 Flink 1.9.3 版本到 Ambari 中,以便在 ...
在这个详细的Ambari安装文档中,我们将深入理解如何在公司环境中设置大数据集群,首先从操作系统级别的配置开始。 1. **用户与权限管理** - 在Linux环境下,为了安全起见,我们通常不使用root用户进行日常操作。...
Ambari是由Apache软件基金会开发的一款开源项目,主要用于简化Hadoop集群的安装、配置和管理。它通过提供直观的Web UI和RESTful API,使得管理员能够轻松地执行常见的集群操作,如添加或删除节点、查看日志和监控...