`

impala数据插入的方法详解

阅读更多

impala是一种内存计算的数据库,查询性能相比于hive官网称是快100倍,其向表中插入数据的方法如下:

 

1、insert into

[slave12:21000] > insert into parquet_snappy select * from raw_text_data;
Inserted 1000000000 rows in 181.98s

 

2、CTAS

 

[slave12:21000] > create table test_table  STORED AS PARQUET as select * from table;
Query: create table test_table  STORED AS PARQUET as select * from table
+-------------------------+
| summary                 |
+-------------------------+
| Inserted 80000 row(s) |
+-------------------------+

3、load data 

 

[slave12:21000] > load data inpath '/user/hive/warehouse/test.db/table' into table test_table;
Query: load data inpath '/user/hive/warehouse/test.db/table' into table test_table
+----------------------------------------------------------+
| summary                                                  |
+----------------------------------------------------------+
| Loaded 1 file(s). Total files in destination location: 1 |
+----------------------------------------------------------+

 

此处注意,此种方法只能导入hdfs上的文件,不支持导入本地文件,不能像hive一样,加入local去导入本地文件,同时load之后,原表需要refresh,否则会报错

 

1
1
分享到:
评论

相关推荐

    impala_jdbc驱动包

    在Java应用程序中,通过JDBC(Java Database Connectivity)接口可以与Impala进行交互,实现数据的查询、插入、更新和删除等操作。 Impala的JDBC驱动包包含了不同版本的JDBC驱动,包括jdbc3、jdbc4和jdbc41。这些...

    yum安装CDH5.5 hive、impala的过程详解

    使用Hive命令行或Impala Shell验证Hive和Impala是否正常工作,创建测试表并插入数据,执行查询以确保能正确读取数据。 通过以上步骤,你已经在CDH5.5环境中成功安装了Hive和Impala,并进行了必要的配置。确保所有...

    详解hbase与hive数据同步

    详解HBase与Hive数据同步 HBase与Hive数据同步是大数据处理中常见的一种数据集成方式。HBase是一种NoSQL数据库,适合存储大量半结构化和非结构化数据,而Hive是基于Hadoop的数据仓库工具,用于数据分析和处理。两者...

    Hive技术平台详解.pptx

    Hive 在数据插入时并不判断数据格式,而在查询时才进行判断,而 RDBMS 在插入时就会进行检查;Hive 的执行延迟较高,不适合实时查询,而 RDBMS 更加适合在线事务处理。 在 Hadoop 生态系统中,Hive 作为一个重要的...

    一篇讲明白Doris数仓特点.doc

    Doris是一款先进的数据分析平台,其架构设计极为精简高效,融合了Google Mesa的数据存储模型、Apache ORCFile存储格式、Apache Impala查询引擎及MySQL交互协议等先进技术。该设计使得Doris不仅具有强大的数据处理...

    sentry 权限简介

    例如,在Hive和Impala中,Sentry可以控制服务器、数据库、表和视图层面的访问权限,包括查找、插入等操作。 - **基于角色的管理**:Sentry通过基于角色的授权简化了管理过程,可以轻松地向不同的组授予不同级别的...

Global site tag (gtag.js) - Google Analytics