`
heipark
  • 浏览: 2094703 次
  • 性别: Icon_minigender_1
  • 来自: 北京
社区版块
存档分类
最新评论

搭建cloudera yum私服

 
阅读更多

一、安装Cloudera yum仓库

1. 下载仓库rpm包

  centos6

    wget http://archive.cloudera.com/cdh4/one-click-install/redhat/6/x86_64/cloudera-cdh-4-0.x86_64.rpm 
  centos 5

    wget http://archive.cloudera.com/cdh4/one-click-install/redhat/5/x86_64/cloudera-cdh-4-0.noarch.rpm

 

2. 安装rpm到yum本地仓库

sudo yum --nogpgcheck localinstall cloudera-cdh-4-0.x86_64.rpm
sudo rpm --import http://archive.cloudera.com/cdh4/redhat/6/x86_64/cdh/RPM-GPG-KEY-cloudera

 

二、创建Cloudera yum私服

 

1. 安装createrepo
  sudo yum install yum-utils createrepo


2. 下载cloudera-cdh4官方仓库rpm包

  reposync -r cloudera-cdh4
  执行完后会下载远程rpm包,下载路径为当前路径,目前路径为”  /data/localyum/cloudera-cdh4/RPMS/ “

 

3. 将rpm配置到apache服务器
  mkdir -p /var/www/html/cdh/4
  cd /var/www/html/cdh/4/
  ln -s /data/localyum/cloudera-cdh4/RPMS RPMS
  ll /var/www/html/cdh/4/RPMS/noarch/  (应该可以看到很多rpm包)

  打开浏览器:http://xxx.xxx.xxx.xxx/cdh/4/RPMS/
  cd /var/www/html/cdh/4/
  createrepo .

 

4. 修改本地cloudera仓库为私服(需要分发repo到集群所有机器
  vi /etc/yum.repos.d/cloudera-cdh4.repo
 修改 " baseurl=http://xxx.xx.xx.xxx/cdh/4/"

--end

 

分享到:
评论

相关推荐

    Cloudera安装部署集群搭建+yum本地源+数据库操作实例

    ### Cloudera安装部署集群搭建+yum本地源+数据库操作实例 #### 一、Hadoop集群搭建概述 本文档详细介绍了如何在四台闽商云服务器上构建一个Hadoop集群,并且涵盖了yum本地源的配置及数据库操作实例等内容。本案例...

    Cloudera大数据平台环境搭建傻瓜式说明指导书.docx

    Cloudera大数据平台环境搭建傻瓜式说明指导书 Cloudera大数据平台环境搭建是大数据时代的不二之选,它提供了一个统一的数据管理平台,可以对海量数据进行存储、处理和分析。然而,搭建Cloudera大数据平台环境需要...

    Cloudera大数据平台环境搭建傻瓜式说明书样本.docx

    "Cloudera大数据平台环境搭建傻瓜式说明书样本" Cloudera大数据平台环境搭建是当前大数据处理和存储的主要解决方案之一。该平台提供了一个完整的解决方案,用于处理和存储大量的数据。为了搭建Cloudera大数据平台...

    Cloudera大数据平台环境搭建(CDH5.13.1)傻瓜式使用说明.pdf

    Cloudera大数据平台环境搭建(CDH5.13.1)傻瓜式使用说明 在大数据时代,Cloudera大数据平台环境搭建是很多企业和个人所需掌握的重要技能之一。本文档旨在为读者提供一个傻瓜式的使用说明,帮助读者快速搭建Cloudera...

    Cloudera平台搭建1

    【Cloudera平台搭建1】 Cloudera Manager是一款强大的集群管理工具,专为简化Apache Hadoop及相关的数据处理和分析工作而设计。它提供了一种自动化的方式,用于部署、管理和监控Cloudera的企业级大数据平台,包括...

    ubuntu完全分布式搭建CDH集群(Cloudera Manager)

    ### Ubuntu 完全分布式搭建 CDH 集群(Cloudera Manager) #### 搭建环境概述 本文档旨在详细介绍如何在 Ubuntu 14.04.3 系统下构建一个完整的 Cloudera Manager (CM) 管理的 CDH 集群。该集群将使用三台物理...

    cloudera manager 安装cdh 搭建大数据集群,详细讲解核心

    Cloudera Manager 安装 CDH 搭建大数据集群核心知识点 一、Cloudera Manager 安装方法 Cloudera Manager 安装 CDH 集群有多种方法,主要分为 Server 端和 Agent 端安装。 1. Server 端安装: * 使用 yum 安装 cm...

    Cloudera Impalad分布式群集部署(yum本地源+代码实例)

    ### Cloudera Impalad分布式集群部署详解 #### 一、概述 Cloudera Impala 是一款用于查询存储在 ...通过遵循这些步骤,可以顺利地完成 Cloudera Impala 集群的搭建,并为其后续的数据分析和处理任务提供强大的支持。

    YUM 源搭建

    YUM源的搭建是通过配置YUM仓库文件来实现的,允许系统管理员从本地或者远程的服务器安装和更新软件。 搭建YUM源的过程一般包括以下几个步骤: 1. 配置官方或第三方源。这通常需要下载一个rpm包,然后使用rpm命令...

    基于cloudera搭建hadoop集群

    Cloudera Manager 4 二. 下载地址 4 三. 安装环境 4 四. 机器设置 5 1. 网络配置 5 2. 修改主机名(hostname) 6 3. 关闭selinux 6 4. 子节点互通配置 6 5. 用户sudo功能设置 7 6. 挂载硬盘 7 7. 配置yum源 9 8. 关闭...

    cloudera-manager-server-6.0.1-610811.el7.x86_64.rpm

    搭建cloudera-manager集群6.0.1版本所需要的server的安装包,有需要的可以下载。

    Centos7.4离线本地yum源自动化安装CDH5.13.0脚本

    本文档将详细介绍如何利用CentOS 7.4平台下的离线本地YUM源来实现Cloudera Distribution Including Hadoop (CDH) 5.13.0版本的自动化安装过程。此脚本不仅简化了CDH集群的部署流程,还提高了安装效率,适合在生产...

    cloudera manager5.x版本集群搭建过程包括linux配置等

    以上步骤展示了在CentOS系统上配置共享文件夹、网络、Yum源及时间服务器的过程,以及如何使用Cloudera Manager 5.x版本搭建Hadoop集群。这些操作在集群安装和管理中极为关键,尤其是对于分布式系统中的时间同步与包...

    Cloudera搭建实验

    Cloudera搭建实验 1. 熟悉大数据实验一体机并了解如何搭建集群 2. 熟悉Linux基本命令 3. 掌握vi编辑器 4. 了解SSH免密码登陆的原理以及为何需要配置SSH 免密登陆 5. 掌握如何配置SSH免密登陆

    Cloudera CDH大数据平台搭建参考手册

    Cloudera还包含了原生的Hadoop搜索引擎以及Cloudera Navigator Optimizer去对Hadoop上的计算任务进行一个可视化的协调优化,提高运行效率;同时Cloudera中提供的各种组件能让用户在一个可视化的UI界面中方便地管理,...

    Cloudera CDH搭建

    Cloudera CDH搭建是企业级Hadoop发行版的安装过程,Cloudera CDH即Cloudera的Distribution包括Hadoop。CDH集成了多个Hadoop生态系统组件,包括但不限于HDFS、MapReduce、HBase、Hive、Oozie、Sqoop、ZooKeeper以及...

    cloudera-manager-5.16.1.zip

    4. 安装CM:使用yum命令安装CM服务器和代理,如`yum install cloudera-manager-daemons cloudera-manager-server-db-2 cloudera-manager-server`。 5. 启动CM:启动CM服务器和相关服务,如`service cloudera-scm-...

    Centos7 安装Cloudera PDF 下载

    sudo yum install cloudera-manager-server cloudera-manager-daemons -y ``` 接着,启动Cloudera管理器服务器和相关服务: ```bash sudo systemctl start cm-agent sudo systemctl start cloudera-scm-server ...

    Ubuntu 14.04 LTS下通过Cloudera CDH 5.4.8搭建Hadoop集群.pdf

    ### 在Ubuntu 14.04 LTS下通过Cloudera CDH 5.4.8搭建Hadoop集群 #### 1. 前期准备工作 ##### 1.1 集群规划 为了构建一个高效的Hadoop集群,首先需要对硬件资源进行合理规划。根据文档中的描述,该集群共有8台...

    Cloudera Hadoop 安装指南

    该文档包含了从准备环境到完成安装的所有步骤,旨在帮助用户顺利地搭建起一个稳定、高效的Hadoop集群。此外,文档还提供了关于Cloudera Manager的安装指导,这是一个用于管理Hadoop集群的强大工具。 ### Cloudera ...

Global site tag (gtag.js) - Google Analytics