`
ganliang13
  • 浏览: 253160 次
  • 性别: Icon_minigender_1
  • 来自: 北京
社区版块
存档分类
最新评论

hadoop,hive环境变量配置

    博客分类:
  • hive
阅读更多

我的系统是ubuntu的

1.sudo vi /etc/profile

2.配置变量

export HADOOP_HOME=/home/hadoop
export HIVE_HOME=/home/hadoop/contrib/hive-0.8.1

export PATH=$JAVA_HOME/bin:$JRE_HOME/bin:$PATH:$HADOOP_HOME/bin:$HIVE_HOME/bin

3.生效环境变量.source /etc/profile

4.测试

ganliang@ganliang-laptop:~/Downloads$ pwd
/home/ganliang/Downloads
ganliang@ganliang-laptop:~/Downloads$ hadoop fs -ls
Warning: $HADOOP_HOME is deprecated.

Found 5 items
drwxr-xr-x   - ganliang supergroup          0 2012-08-26 17:37 /user/ganliang/hadoop_in
drwxr-xr-x   - ganliang supergroup          0 2012-08-26 13:33 /user/ganliang/hadoop_out
drwxr-xr-x   - ganliang supergroup          0 2012-08-26 17:49 /user/ganliang/hadoop_out2
drwxr-xr-x   - ganliang supergroup          0 2012-11-25 17:32 /user/ganliang/hadoop_out3
drwxr-xr-x   - ganliang supergroup          0 2012-11-27 22:07 /user/ganliang/hive_data
ganliang@ganliang-laptop:~/Downloads$ hive
WARNING: org.apache.hadoop.metrics.jvm.EventCounter is deprecated. Please use org.apache.hadoop.log.metrics.EventCounter in all the log4j.properties files.
Logging initialized using configuration in jar:file:/home/hadoop/contrib/hive-0.8.1/lib/hive-common-0.8.1.jar!/hive-log4j.properties
Hive history file=/tmp/ganliang/hive_job_log_ganliang_201212011652_1252101503.txt
hive>

分享到:
评论

相关推荐

    hadoop&hive安装配置

    在hadoop配置之前,我们需要首先安装JDK,并将其设置为环境变量。我们可以将JDK安装到/usr/local目录下,并将其命名为jdk1.6。然后,我们需要编辑/etc/profile文件,并添加以下内容: ``` export JAVA_HOME=/usr/...

    Hadoop和Hive的安装配置

    1. **环境变量**:确保Hadoop和Hive的`PATH`、`HADOOP_HOME`、`HIVE_HOME`等环境变量已经设置。 2. **权限管理**:Hadoop和Hive的目录需要有适当的权限,避免运行时出现权限问题。 3. **防火墙**:如果是在集群...

    Mac 搭建 Hadoop和hive环境.pdf

    通过本指南,我们将逐步了解如何在Mac上安装并配置Hadoop和Hive环境,以便能够进行数据处理和分析工作。 ##### 二、准备工作 1. **安装SSH服务**: - 在Mac上运行`ssh-keygen -t rsa -P '' -f ~/.ssh/id_rsa`来...

    Hadoop hbase hive sqoop集群环境安装配置及使用文档

    我们可以下载并安装 1.6 以上的 JDK,然后配置环境变量。以 root 用户登录,使用 vi 编辑器修改 /etc/profile 文件,添加以下内容: export JAVA_HOME=/home/hadoop/jdk1.6.0_45 export PATH=$JAVA_HOME/bin:$PATH ...

    win10下搭建Hadoop环境(jdk+mysql+hadoop+scala+hive+spark) 3.docx

    Hadoop 2.8.4的安装包括下载解压、替换`hadooponwindows-master`文件、配置环境变量以及配置Hadoop的配置文件如`core-site.xml`、`hdfs-site.xml`、`yarn-site.xml`和`mapred-site.xml`。在这些文件中指定HDFS的名称...

    Hadoop Hive入门学习笔记.pdf

    3. **配置环境变量**: 执行以下命令打开 `.bashrc` 文件,并在文件末尾添加如下配置: ```bash export HIVE_HOME=/home/hive/hive-0.8.1 export PATH=${HIVE_HOME}/bin:$PATH ``` 接着,执行以下命令使设置...

    hadoop hive入门学习总结

    3. 配置环境变量,打开`~/.bashrc`文件并在末尾添加: ``` export HIVE_HOME=/home/hive/hive-0.8.1-bin export PATH=${HIVE_HOME}/bin:${PATH} ``` 4. 应用设置,使新的环境变量生效: ``` source ~/.bashrc...

    ubuntu下配置hadoop和hive

    这个过程可能需要一些时间来熟悉,但一旦完成,你将拥有一个在Ubuntu上的功能完备的Hadoop和Hive环境,可以用于大数据处理和分析任务。记住,每个步骤都至关重要,确保每个配置都正确无误,才能保证系统的稳定运行。...

    hadoop+hive环境安装包.rar

    2. **环境变量配置**:解压后,需要在系统的环境变量中设置`HADOOP_HOME`,指向Hadoop的安装目录。同时,还需要在`PATH`变量中添加`%HADOOP_HOME%\bin`,以便于执行Hadoop相关的命令。 3. **配置Hadoop**:修改`...

    基于虚拟机hadoop集群hive2.1.1配置文件

    3. **hive-env.sh**:这是Hive环境变量配置文件。在这个文件中,我们可以设置Hive的相关环境变量,例如HADOOP_HOME(指向Hadoop安装目录)、HIVE_CONF_DIR(Hive配置目录)等。此外,还可以在这里配置Java运行时参数...

    hadoop hive hbase安装过程

    - **配置环境变量**:编辑 `/etc/profile` 文件,添加 Hadoop 的环境变量: ```bash export HADOOP_HOME=/home/hadoop/hadoop-0.20.203.0 export PATH=$PATH:$HADOOP_HOME/bin ``` - **配置临时目录**:创建 ...

    hadoop集群配置之———hive安装与配置(超详细)

    Hive的安装过程涉及到了一系列的配置,例如配置Hive的环境变量,指定Hive使用的元数据库(在本例中是MySQL),并进行相应的环境配置和初始化。之后,就可以使用Hive的命令行工具(hive CLI)进行操作,比如创建表、...

    大数据Hadoop+HBase+Spark+Hive集群搭建教程(七月在线)1

    - 安装Hadoop,并配置环境变量,包括设置`HADOOP_HOME`和`PATH`。 2. **HBase**:HBase是一个基于Hadoop的分布式数据库,适合实时读写操作,尤其适合半结构化和非结构化数据。它提供了一个高可靠性、高性能、列式...

    HADOOP HIVE

    这通常包括下载和安装 Hadoop,然后配置 Hive 的环境变量以及连接到 Hadoop 分布式文件系统(HDFS)。对于初学者来说,使用预配置的虚拟机(VM)是一个不错的选择,因为这样可以省去许多繁琐的配置步骤。 - **...

    大数据离线分析系统,基于hadoop的hive以及sqoop的安装和配置

    安装时,需要配置数据库连接信息,比如JDBC驱动和数据库连接URL,同时还要确保Hadoop的环境变量已经正确设置。 最后,`gls.txt`文件名可能是指"General Linux Settings",可能包含了与安装Hadoop和Hive相关的Linux...

    第7集-Hadoop环境搭建 - linux(centos7) - 安装配置hive2.1.1.pdf

    在 `hive-env.sh` 文件中设置Java、Hadoop及Hive的环境变量路径: ```bash export JAVA_HOME=/home/hadoop/jdk1.8.0_161 export HADOOP_HOME=/home/hadoop/hadoop-2.7.7 export HIVE_HOME=/home/hadoop/hive-...

    基于hadoop的hive数据仓库的配置

    解压完成后,需要将Hive的bin路径添加到系统的环境变量中。编辑`/etc/profile`文件: ```bash vi /etc/profile ``` 在文件末尾添加以下内容: ```bash # Hive export HIVE_HOME=/opt/Software/apache-...

    hadoop hbase hive 伪分布安装

    综上所述,完成Hadoop、HBase和Hive的伪分布安装涉及多个步骤,包括软件包的安装、环境变量的设置、配置文件的编辑以及服务的启动和验证。每个环节都需要仔细操作,以确保各组件能够在单机环境下顺利运行,模拟出...

Global site tag (gtag.js) - Google Analytics