`
dayutianfei
  • 浏览: 5811 次
  • 性别: Icon_minigender_1
  • 来自: 北京
社区版块
存档分类
最新评论

impala-2.1.2-CDH5.3.2

 
阅读更多

最近在整理impala编译的东西,简单记录几个要点:

根据官网的信息(https://github.com/cloudera/Impala/wiki/How-to-build-Impala):

1. 首次编译impala,推荐使用命令:

${IMPALA_HOME}/buildall.sh -skiptests -build_shared_libs -format

2.仅编译BE

${IMPALA_HOME}/bin/make_debug.sh [-notests] -build_shared_libs

编译后的文件在 be/bulid里面,编译出来的东西有200MB+,和官方的比20MB差距较大;

执行strip --strip-debug impalad|catalogd|statestored 会变成30MB+

 

3. 仅编译FE

cd ${IMPALA_HOME}/fe && mvn clean package dependency:copy-dependencies -DskipTests=true

参考:

http://fatkun.com/2014/12/compile-impala.html

 

 

分享到:
评论

相关推荐

    impala-2.3.0-cdh5.5.1-src.tar.gz

    源码包“impala-2.3.0-cdh5.5.1-src.tar.gz”正是Impala在这个特定版本的源代码集合,对于开发者和研究者来说,这是理解Impala内部工作机制的宝贵资源。 源码分析方面,我们可以看到Impala的架构由多个主要部分构成...

    Cloudera-JDBC-Driver-for-Impala-Install-Guide.pdf

    标题《Cloudera-JDBC-Driver-for-Impala-Install-Guide.pdf》涉及的知识点主要包括: 1. Cloudera公司的Impala产品和JDBC驱动程序介绍:文档中提到了Cloudera公司,以及它的主要产品Impala,这是一款由Cloudera开发...

    CDH4里的Impala安装使用文档

    4. **配置 Impala**:编辑 `/etc/impala/conf/impala-site.xml` 文件来设置 Impala 的配置参数,例如 `impala_state_store_host` 和 `impala_state_store_port` 等。 5. **启动服务**:运行相应的脚本来启动 Impala ...

    Impala-cdh集群安装部署

    由于Impala的版本是CDH的,所以安装Impala的涉及到的Hive、Hadoop、Spark、Hbase等环境也要统一使用CDH版本。 本文档部署impala时所用到的Hive、Hadoop等环境的安装方式是使用tar包方式安装的(cdh版本的tar包安装...

    Impala-JDBC连接jar包(ImpalaJDBC41-2.6.3)

    jar包引入命令:mvn install:install-file -DgroupId=com.cloudera -DartifactId=ImpalaJDBC41 -Dversion=2.6.3 -Dpackaging=jar -Dfile=./ImpalaJDBC41-2.6.3.jar DgroupId: pom.xml配置中groupId的值 ...

    apache-atlas-2.1.0-impala-hook.tar.gz

    这个 `apache-atlas-2.1.0-impala-hook.tar.gz` 文件是一个压缩包,它包含了用于连接 Apache Atlas 和 Impala 的特定组件,以实现在 CDH 6.3.1 平台上的协同工作。 首先,让我们深入了解 Apache Atlas。它是 Apache...

    hue-3.9.0-cdh5.14.0.tar.gz

    Hue提供了多种数据操作工具,包括HDFS浏览器、Hive查询编辑器、Impala shell等,使得非技术人员也能方便地操作Hadoop生态系统中的数据。 在Hue的安装过程中,"hue-3.9.0-cdh5.14.0.tar.gz"是一个重要的文件,它是...

    spark-2.2.1-bin-2.6.0-cdh5.14.2.tar.gz

    在实际应用中,你可能还需要考虑Spark与CDH中其他组件的集成,例如Hive、Impala,以实现更高效的数据分析工作流。此外,为了优化性能,你可以研究如何调整Spark的配置参数,如executor数量、大小、shuffle策略等。 ...

    Python库 | vdk-impala-0.1.415625538.tar.gz

    《Python库vdk-impala-0.1.415625538:探索数据处理的新维度》 Python作为一门强大的编程语言,在数据分析和处理领域有着广泛的应用。vdk-impala,这个Python库是专为与Impala交互而设计的,它为Python开发者提供了...

    apache-atlas-2.2.0-impala-hook.tar.gz

    这个压缩包 "apache-atlas-2.2.0-impala-hook.tar.gz" 显然是 Apache Atlas 的一个特定版本,特别是针对 Impala 数据处理系统的钩子(hook)。 Apache Impala 是一种用于 Hadoop 的 MPP(大规模并行处理)查询引擎...

    hadoop-2.6.0.tar.gz&hadoop-2.6.0-cdh5.16.2.tar.gz

    CDH是业界广泛采用的企业级Hadoop发行版,它不仅集成了Hadoop的核心组件,还包含了其他的开源大数据项目,如Hive、Pig、Spark、Impala等,提供了一整套大数据处理和分析解决方案。CDH 5.16.2是CDH系列的一个重要更新...

    impala-3.4.pdf

    文档标题为“impala-3.4.pdf”,说明了该文档是关于Impala版本3.4的使用和管理指南。从文档描述来看,内容涵盖了Impala的安装、配置、升级、架构、编程接口以及其在Hadoop生态系统中的应用等。 文档中提到的...

    zjinc36#zjinc36.github.io#20200914-Druid-Kylin-Presto-Impala-Spa

    Druid-Kylin-Presto-Impala-SparkSQL-ES比较。

    CDH5.16.2完整安装包网盘下载地址

    CDH5.16.2全安装包,包含以下内容: 本人亲自安装测试通过后整理的的cdh5.16.2离线安装教程 CM安装及部署教程.md cloudera-manager-centos7-cm5.16.2_x86_64.tar.gz manifest.json CDH-5.16.2-1.cdh5.16.2.p0.8-el7....

    cloudera-hive/impala-odbc

    标题中的"cloudera-hive/impala-odbc"指的是Cloudera提供的Hive和Impala的ODBC(Open Database Connectivity)驱动程序。ODBC是用于在不同数据库系统之间建立连接的标准接口,使得应用程序可以访问多种类型的数据库...

    10-5+Impala在腾讯灯塔的优化和实践.pdf

    2. **Parquet Rowgroups和PageIndex合理性**:通过修复两个社区Bug(IMPALA-9566和IMPALA-10310),改进Parquet文件的组织结构,防止排序热谓词导致的字段离散,从而提高压缩比。 3. **HDFS大扫描压力**:利用...

    impala-jdbc.zip

    标题中的"impala-jdbc.zip"是一个压缩包,包含了用Java编程语言编写的相关文件,用于通过JDBC连接和操作Impala数据库。这些文件包括了`ImpalaConnectionsPool.java`、`ImpalaJdbc.java`和`ImpalaUtils.java`,以及一...

    impala-2.8

    ### Impala-2.8: Fast Interactive SQL Queries for Big Data #### Introduction to Apache Impala (Incubating) Apache Impala is a high-performance, distributed SQL query engine that enables fast, ...

    Python库 | vdk-impala-0.1.426832659.tar.gz

    资源分类:Python库 所属语言:Python 资源全名:vdk-impala-0.1.426832659.tar.gz 资源来源:官方 安装方法:https://lanzao.blog.csdn.net/article/details/101784059

Global site tag (gtag.js) - Google Analytics