`
samuschen
  • 浏览: 407648 次
  • 性别: Icon_minigender_2
  • 来自: 北京
社区版块
存档分类
最新评论

hive运行实例

    博客分类:
  • hive
 
阅读更多

实际示例
创建一个表
CREATE TABLE u_data (
userid INT,
movieid INT,
rating INT,
unixtime STRING)
ROW FORMAT DELIMITED
FIELDS TERMINATED BY '\t'
STORED AS TEXTFILE;
下载示例数据文件,并解压缩
wget http://www.grouplens.org/system/files/ml-data.tar__0.gz
tar xvzf ml-data.tar__0.gz
加载数据到表中
LOAD DATA LOCAL INPATH 'ml-data/u.data'
OVERWRITE INTO TABLE u_data;
统计数据总量
SELECT COUNT(1) FROM u_data;

分享到:
评论

相关推荐

    java操作Hive源码之HiveJDBC实例(mysql数据库)

    在这个实例中,我们将使用它来连接到运行MySQL作为元数据存储的Hive服务。 2. **MySQL作为Hive元数据存储**: 默认情况下,Hive使用 Derby 或 MySQL 作为其元数据存储,管理表、分区、列等信息。这里使用MySQL作为...

    大数据 hive 实战数据

    Hive作为Hadoop生态系统的一部分,可以在HDFS上运行,处理PB级别的数据。Hive的强项在于其SQL接口,使得非编程背景的业务分析师也能轻松进行大数据分析。 大数据和数据仓库的概念是紧密相连的。大数据是指无法用...

    Hive_JDBC.zip_hive java_hive jdbc_hive jdbc pom_java hive_maven连

    在大数据处理领域,Apache Hive是一个基于Hadoop的数据仓库工具,它允许用户使用SQL(HQL,Hive Query ...通过这个实例,你现在已经具备了使用Hive JDBC的基础知识,可以进一步探索更高级的Hive和Java集成技术。

    apache-hive-2.3.9-bin.tar大数据HIVE.zip

    11. **Hadoop的使用**:Hive运行在Hadoop之上,利用Hadoop的分布式计算能力处理大数据。Hadoop的HDFS为Hive提供了可靠的存储,而MapReduce或Spark则提供了计算能力。 了解了这些核心概念后,你可以开始在Hadoop环境...

    大数据小型实战项目源码之Hive 通过日期计算星座实例

    本实战项目是关于如何利用Hive通过日期来计算星座的一个实例,旨在帮助学习者更好地理解和应用Hive进行实际的数据处理任务。 首先,我们需要了解Hive的基本概念。Hive是由Facebook开发并开源的,基于Hadoop的数据...

    eclipse集成hadoop+spark+hive开发源码实例

    通过这些例子,你可以学习如何创建数据处理项目,如何在Spark中运行SQL查询,以及如何在Hive中创建表和执行数据分析任务。 总之,Eclipse集成Hadoop、Spark和Hive提供了一个高效的数据开发环境,让你能够利用大数据...

    hive监控巡检优化文档

    - **查看CDH集群-hive-hive2实例-角色日志** - 通过Cloudera Manager的Web界面查看HiveServer2的具体角色日志,以便于发现问题。 - **Hive常用巡检语句** - **模糊搜索表**:`show tables like '*name*'` ——搜索...

    HIVE操作注册表.rar

    开发者需要了解Hive的数据模型、分区策略以及Hadoop集群的运行机制。同时,对于Windows注册表,需要熟悉其结构,如HKEY_LOCAL_MACHINE、HKEY_CURRENT_USER等根键,以及如何安全地读写键值。 综上所述,"HIVE操作...

    Spark不能使用hive自定义函数.doc

    1. **环境配置不兼容**:Spark 和 Hive 的运行环境可能存在不一致的地方,比如版本不匹配等。 2. **类路径问题**:Spark 在启动时可能没有正确地加载到 Hive 的自定义函数所在的 jar 包。 3. **依赖管理**:Hive UDF...

    ranger-2.1.0-hive-plugin.tar.gz

    5. **启动与测试**:重启 Hive 服务,验证 Ranger 插件是否正常运行。可以通过创建测试用户、分配权限并执行查询来测试权限控制是否生效。 四、Ranger Hive 插件实战应用 在实际业务场景中,Ranger Hive 插件可以...

    Hive配置(Oracle数据库为元数据)

    Apache Hive 是一个基于 Hadoop 的数据仓库工具,可以将结构化的数据文件映射为一张数据库表,并提供完整的 SQL 查询功能,可以将 SQL 语句转换为 MapReduce 任务进行运行。其优点是学习成本低,可以通过类 SQL 语句...

    java_hive简单查询

    `hive-java`可能是指Hive的Java API或用于运行Hive查询的Java程序的示例代码。在实际项目中,你可能需要构建一个包含Hive查询逻辑的Java类,并将其打包成jar文件,然后在Hadoop集群上运行。 7. **提交Java作业到...

    apache-hive-0.14.0-bin.tar.gz

    1. **Hive Server**:这是Hive服务的运行实例,用于接收客户端的查询请求并执行它们。它提供了两种交互模式:HiveServer(旧版,基于Thrift)和HiveServer2(新版,更安全和高性能)。 2. **Hive Metastore**:存储...

    spark连接HIveDemo

    这段代码创建了一个SparkSession实例,启用了Hive支持,并指定了Hive仓库的目录。 步骤三:读取Hive表 现在,你可以使用SparkSession来读取Hive中的表。例如,如果我们有一个名为`test_table`的Hive表,可以这样...

    rpi-hive-3.1.2.tar.gz

    在解压并安装Hive前,确保树莓派已安装了Java运行环境(JRE)以及Hadoop,因为Hive依赖于这些组件。安装后,用户可以通过Hive的命令行界面执行查询,分析存储在HDFS上的数据。 总结起来,这个压缩包提供了一个专门...

    5.Hive(下)--Hive实战.pdf

    -IDEA搭建及实战.pdf4.Spark运行架构.pdf5.Hive(上)--Hive介绍及部署.pdf5.Hive(下)--Hive实战.pdf6.SparkSQL(上)--SparkSQL简介.pdf6.SparkSQL(下)--Spark实战应用.pdf6.SparkSQL(中)--深入了解运行计划...

    hive-3.1.2&mysql-5.7.2安装包.rar

    在 Hive 中设置 metastore(元数据存储)连接,可以选择本地 MySQL 实例作为 metastore 服务,这将提高 Hive 的性能和数据一致性。 总的来说,这个安装包提供了在大数据环境中使用 Hive 进行数据处理并与 MySQL ...

    Apache-Hive-Cookbook

    - 启动多个 HiveServer2 实例。 - **工作原理**:HiveServer2 利用 ZooKeeper 来实现高可用性和故障恢复。 5. **使用 Hive 客户端** - **Hive CLI**:命令行界面,用于执行 HQL 命令。 - **Beeline**:轻量级...

    HIVE PDF PDF

    ### Hive PDF PDF知识点详解 #### 1. Hive概述 Hive是一个构建在Hadoop上的数据...这些步骤对于保证Hive的稳定运行以及高可用性至关重要,对于想要深入学习和掌握Hive部署的同学来说,这是一份非常宝贵的参考资料。

    04-Hive安装部署及运维使用.pdf

    Hive安装部署及运维使用涉及到Hadoop生态中的数据仓库技术。Hive是一个建立在Hadoop之上的数据仓库工具,它提供了一个类...要确保Hive正常运行并发挥其数据仓库工具的最大效能,需要有对相关技术的深入理解和实践经验。

Global site tag (gtag.js) - Google Analytics