`
柯小芍
  • 浏览: 13454 次
  • 性别: Icon_minigender_2
社区版块
存档分类
最新评论

Hadoop集群搭建之hive安装配置

 
阅读更多

一、环境

1.操作系统:CentOS6.2 

2.java环境:jdk1.6.0_38

3.hadoop版本:hadoop0.20.2

4.hive版本:hive-0.9.0

二、先决条件

操作系统已经安装配置完成java环境、hadoop和mysql

三、安装步骤

#之后的都为命令

(一)解压hive包

1、将hive压缩包放在/home/hadoop目录下

2、解压hive压缩包

#tar -zxvf hive-0.9.0.tar

3、更改hive包名

#mv hive-0.9.0 hive

4、将mysql-connector-java.jar包放在hive的lib目录下面

(二)更改配置文件

1.hive-site.xml文件

  1)用vi编辑



 2)找到下图所示内容,如图修改

第二个划红线处中的h2根据自己的主机名进行修改,lz的主机名是h2就写的是h2了


 

 2.更改/etc下面的profile文件,在文件的末尾添加上hive的路径如下图:

 lz的hive路径是/home/hadoop/hive,大家可根据自己hive的安装情况进行改变

(三)在mysql中建立hive用户并授权

    1.进入数据库,建立hive用户

    

 2.授权



 

 

四、测试

前提:1.确定mysqld服务已经开启
           2.确定hadoop进程已经开启

测试:进入hive的bin目录执行hive,进入hive之后则执行show tables命令检查是否成功,如图:



 

  • 大小: 17.1 KB
  • 大小: 142.7 KB
  • 大小: 6.5 KB
  • 大小: 47.1 KB
  • 大小: 9.9 KB
  • 大小: 28.4 KB
分享到:
评论

相关推荐

    Hadoop集群搭建及Hive的安装与使用

    2. **配置Hive**:修改`conf/hive-site.xml`,设置Hive的 metastore数据库(可以是本地的MySQL或Derby),Hadoop相关配置(指向已搭建好的Hadoop集群),以及Hive的其他参数。 3. **创建metastore数据库**:根据...

    Hadoop集群搭建Hive的安装配置

    本实验将指导你如何在已搭建的Hadoop集群上安装和配置Hive。 首先,你需要满足一定的实验环境要求,包括五台独立的PC式虚拟机,每台主机运行CentOS7-64位操作系统,且已完成Hadoop和MySQL的安装。在进行Hive的安装...

    hadoop全套配置详细步骤(基础环境搭建+hadoop集群搭建+hive搭建)

    本文件包含hadoop集群搭建的详细步骤,包含基础环境搭建,Hadoop集群搭建,Hive搭建。小白放心食用,无坑。 其中基础环境搭建包括虚拟机安装、centos7、网络配置、xshell、notepad等环境的安装。注:本文里安装的...

    hadoop集群配置之———hive安装与配置(超详细)

    在Hadoop集群配置过程中,安装和配置Hive是一个重要环节。这个过程中需要保证Hadoop集群本身已经搭建好并且运行正常。在安装Hive之前,一般需要先安装和配置好MySQL数据库,因为Hive会使用MySQL来存储其元数据。元...

    Hadoop hbase hive sqoop集群环境安装配置及使用文档

    在本文档中,我们将详细介绍如何搭建一个大数据集群环境,包括 Hadoop、HBase、Hive 和 Sqoop 的安装配置及使用。该文档将分为四部分:Hadoop 集群环境搭建、HBase 集群环境搭建、Hive 集群环境搭建和 Sqoop 集成...

    Hadoop集群搭建,hive数据仓文档.docx

    在本文档中,我们将详细介绍如何在虚拟机上搭建一个Hadoop集群,并配置Hive数据仓库。 首先,我们需要在本地计算机上安装虚拟机软件,如VMware Workstation Pro。这个软件可以从官方网站或者通过清华大学的镜像源...

    hadoop&hive安装配置

    hadoop集群搭建 在开始安装hadoop之前,我们首先需要准备三台机器,分别作为master、slave1和slave2。master机器将作为namenode,而slave1和slave2将作为datanode。 首先,我们需要在每台机器上配置hosts文件,...

    hadoop+hbase+hive集群搭建

    其中,`masters`和`slaves`文件分别指定了NameNode和DataNode的列表,`hadoop-env.sh`用于设置Java环境变量和PID目录,这些都是Hadoop集群正常运行的基础。 ### 总结 构建Hadoop+HBase+Hive集群是一项复杂而细致的...

    基于centos的大数据hadoop集群搭建说明文档

    【标题】:基于CentOS的大数据Hadoop集群搭建详解 【描述】:本教程专为初学者设计,详细阐述了如何手动搭建Hadoop集群,步骤详尽,易于理解。 【标签】:Hadoop集群搭建 【正文】: Hadoop是一个开源的分布式...

    hadoop集群搭建所需软件(Hive数据.rar)

    在这个名为"Hadoop集群搭建所需软件(Hive数据.rar)"的压缩包中,包含的主要是与Hive相关的数据文件,这将用于测试集群搭建的正确性和功能完整性。以下将详细介绍Hadoop集群搭建以及Hive的相关知识点。 1. Hadoop...

    Hadoop+Spark+Hive+HBase+Oozie+Kafka+Flume+Flink+ES+Redash等详细安装部署

    在搭建Hive时,需要设置Hive metastore、配置数据库连接以及配置Hadoop环境。 HBase是一个分布式的、面向列的开源数据库,运行在Hadoop之上,适合存储半结构化数据。安装HBase时,需要考虑集群的Zookeeper配置,...

    \"Hadoop集群监控与Hive高可用\"分享总结

    本文将深入探讨“Hadoop集群监控”和“Hive高可用性”的主题,结合向磊的分享进行详细阐述。 首先,Hadoop是一个分布式计算框架,它允许在大量廉价硬件上存储和处理海量数据。Hadoop集群监控对于确保系统稳定性和...

    大数据Hadoop+HBase+Spark+Hive集群搭建教程(七月在线)1

    - 在Hadoop集群运行的基础上安装HBase,确保Hadoop的相关环境变量被HBase使用。 - 配置HBase的`hbase-site.xml`以指定Zookeeper地址和集群模式。 - 启动HBase服务,包括Master和RegionServer。 3. **Spark**:...

    hadoop集群搭建所需软件包.txt

    hbase-2.1.3-bin.tar.gz,hadoop-3.1.2.tar.gz,hadoop-2.7.4.tar.gz,flink-1.7.2-bin-hadoop27-scala_2.11.tgz,apache-hive-3.1.1-bin.tar.gz,apache-hive-2.3.5-bin.tar.gz,以及一些推荐的集群搭建配置文件,...

    Hadoop和Hive的安装配置

    9. **检查状态**:通过Web界面(默认是50070端口)查看Hadoop集群的状态,确认所有服务正常运行。 **Hive的安装配置** 1. **下载Hive**:同样,从Apache官网下载Hive的最新稳定版本。 2. **解压和配置**:解压后...

    hadoop集群搭建详解

    Hadoop集群搭建详解 Hadoop是一个大数据处理框架,由Apache基金会开发和维护。它提供了一个分布式计算环境,能够处理大量数据。Hadoop生态系统包括了多个组件,如HDFS、MapReduce、YARN、HBase、Hive等。 Hadoop...

    第7集-Hadoop环境搭建 - linux(centos7) - 安装配置hive2.1.1.pdf

    ### Hadoop环境搭建之Hive 2.1.1配置详解 #### 一、概述 在构建大数据处理环境时,Apache Hive 是一个重要的组件,它提供了SQL查询功能,使用户能够方便地对存储在Hadoop文件系统(HDFS)中的大规模数据集进行数据...

    第2集-Hadoop环境搭建 - linux(centos7) - 安装配置jdk1.8.pdf

    在安装和配置 JDK 之后,我们可以开始搭建 Hadoop 环境,包括安装 Hadoop、Scala、Hive、HBase 和 Spark 等组件。这些组件都是大数据处理的重要工具,可以帮助我们更好地处理和分析数据。 本文档详细介绍了在 ...

    Hadoop集群搭建总结

    ### Hadoop集群搭建总结 #### 一、Hadoop概述与应用场景 Hadoop是一个由Apache基金会维护的开源分布式计算框架,其主要目标是处理大规模数据集的存储与计算问题。通过Hadoop,用户能够轻松地在分布式环境中开发和...

    hadoop集群搭建.rar

    【标题】"hadoop集群搭建.rar"所涉及的知识点涵盖了大数据处理领域的重要组件和技术,包括Zookeeper(zk)、Hadoop、HBase、Hive以及Kylin,并提到了安全认证机制Kerberos。以下是对这些技术的详细解释: 1. **...

Global site tag (gtag.js) - Google Analytics