`
WindyQin
  • 浏览: 32416 次
  • 性别: Icon_minigender_1
  • 来自: 郑州
社区版块
存档分类
最新评论

vertica优化

 
阅读更多

DELETE_VECTORS

数据模型:

1、 规范化你的表

2、 使用核实的压缩格式

表设计:

1、 使用分区

2、 定义主键外键

3、 默认的数字类型长度可能比实际需要的大。例如:NUMBERC 该类型默认的长度是38位,如果实际的长度比这个小,那你建表的时候最好加上适合的长度。

4、 对于一个True/False值,Boolean类型比char(1)类型和integer类型更快。

Projections

1、 Segmentation vs. Replication (unsegmented)简单的说,如果数据量大的话使用Segmentation,小的话使用unsegmented

2、 使用order by ,理想的order by 的字段应该全部在where查询字句中出现(详见另一篇文章【】)

3、 列长度的规范,不要一味的定义大长度,在过滤条件和join时的字段如果是字符类型,最好使用int类型。

4、 GROUP BY:使用group by 时,一定要explain查看执行计划,如果执行计划中使用的【GROUP BY HASH】这时候就要修改你的查询sql或者projection的,group by最好使用【GROUP BY PIPELINE】这种方式使用更少的内存,查询更快!

5、 清楚不必要的projection,多余的projection意味着查询是要花费更多的时间去选择。

6、 Projection中的order 字段首先选用过滤的字段,然后选用join使用的列。

7、 确保Projection数据均匀分布在各个节点上,以免查询时产生数据倾斜。

查询:

1、 避免使用in

2、 避免使用union

3、 Select 时避免使用*,查询时选择合适的列

4、 使用with子句

5、 避免使用别名,例如 groupby 1,2,3

6、 在子查询中使用orderby

7、 避免使用不等关系,例如:>=,not in 等

8、 对于复杂的sql,可以多使用临时表

9、 delete_vectors中的数据尽量清除

资源(Resources)

1、 PROFILE,查看查询所需要的内存

2、 建立专用的资源池

分享到:
评论

相关推荐

    vertica jdbc 驱动driver

    8. **性能优化**:Vertica提供多种优化选项,如分区、索引、并行查询等。使用JDBC时,可以配置这些选项以优化查询性能。 9. **错误处理**:捕获并处理`SQLException`,以应对可能出现的连接失败、查询错误等问题。 ...

    Vertica_9.1.x完整文档

    “Analyzing Data”章节深入探讨了Vertica的数据分析能力,包括使用SQL进行数据查询、复杂查询优化、使用统计函数进行数据分析,以及如何利用Vertica的列式存储和分布式计算能力来提高分析效率。 “Flex Tables”...

    vertica jdbc driver 驱动下载

    这些版本对应于Vertica数据库的不同发行版,每个版本可能包含特定的性能改进、新功能或对旧功能的优化。选择哪个版本取决于你的应用程序需求和所使用的Vertica数据库版本。 描述中提到的三个版本具体如下: 1. **...

    SQL优化指导示例2.pdf

    根据提供的文件内容,我们可以了解到文档《SQL优化指导示例2.pdf》主要讨论了在Vertica数据库系统中如何进行SQL语句的优化。Vertica是一个面向列的高性能分析数据库,特别适合于处理大规模数据集。本文的知识点涉及...

    HP Vertica Essentials

    这包括调整内存和CPU资源的分配、SQL查询优化、数据压缩以及加载数据的策略等。为了确保系统高效稳定运行,数据库管理员需要对Vertica的各种性能指标和工具进行深入理解。 书中还会介绍如何监控Vertica数据库系统的...

    vertica windows客户端

    3. **性能监控**:用户可以实时监控数据库的性能指标,如查询执行时间、CPU利用率、内存使用情况等,以便优化数据库性能。 4. **备份与恢复**:客户端提供备份和恢复功能,确保数据安全,防止数据丢失。 5. **安全...

    HP_Vertica数据库从入门到精通

    惠普公司开发的HP Vertica数据库是一款面向分析的列式数据库管理系统,它支持大规模数据集的存储和高速查询。因其卓越的性能和高可靠性,Vertica数据库在大数据分析领域中备受关注。文档《HP_Vertica数据库从入门到...

    vertica 8.1 完整文档

    - 管理员指南将涵盖数据库管理的各个方面,比如性能优化、安全配置、故障排除、监控以及备份和恢复等。 6. **使用FlexTables分析数据**: - Vertica中的FlexTables是一个灵活的数据存储方式,可能在文档中单独...

    vertica文档

    Vertica充分利用这一特性,优化了数据读取和分析的速度。 Vertica文档是学习和掌握这款数据库管理系统的必备资源,它涵盖了从安装、配置到日常操作的所有环节。其中,"HP_vertica-user-doc_7.0.x"这一文档版本,很...

    Vertica帮助文档

    同时,文档会讲述如何编写高效的SQL查询,利用Vertica的查询优化器进行性能调优。 6. **数据加载与备份恢复**:详细说明如何将数据导入到Vertica,包括使用装载工具如SQL COPY命令、Loader工具,以及如何进行定期...

    惠普 vertica

    - **自动优化**:HP Vertica 支持自动化的查询优化功能,可以根据实际的数据分布情况自动调整查询执行计划,进一步提升查询性能。 - **高级压缩技术**:通过多种压缩算法,HP Vertica 可以实现高达 90% 的空间节省,...

    Vertica_technology

    总的来说,Vertica是一种为大数据处理而优化的关系型数据库管理系统,其设计初衷是应对大数据环境下复杂的数据分析需求。它独特的数据架构和实时分析能力,使其成为了对速度和规模有较高要求的商业分析应用的理想...

    Introduction Vertica Architecture_Overview

    这意味着在查询处理过程中,数据不是立即物化成最终形式,而是在处理链中的某个点,根据查询需求进行压缩和转换,这样做可以进一步优化性能和提高效率。 4. 高级压缩技术:Vertica的高级压缩技术使得数据库能够有效...

    HP vertica 6.1 essential training

    《HP Vertica 6.1基础培训》是针对数据库管理和分析人员的一套全面教程,旨在帮助用户掌握HP Vertica 6.1的核心功能和最佳实践。HP Vertica是一款高性能、可扩展的列式数据库管理系统,尤其适合大数据分析和处理。在...

    vertica中文手册(7.2)

    - 视图权限管理,视图优化,视图的使用等在手册中也有详细的介绍。 2. **联接**: - **哈希联接**和**合并联接**是Vertica支持的两种主要联接算法。 - **自然联接**、**交叉联接**和**外联接**等不同类型联接的...

    Vertica 常用操作说明 v1

    ### Vertica 常用操作详解 #### 一、初始化与数据库创建 ##### 创建数据库 在Vertica系统中,可以通过图形界面(GUI)或者...这些操作对于日常的数据库运维工作至关重要,能够帮助管理员更好地控制和优化数据库性能。

    Vertica_9.0.x_Complete_Documentation

    这份文档包含了Vertica数据库的核心功能、安装部署、性能优化、数据管理、查询处理、安全控制以及各种高级特性的详细说明。 1. **Vertica简介**:Vertica是一个高性能、企业级的列式数据库管理系统,特别适合大规模...

    Vertica入门文档

    6. **智能优化器**:Vertica的智能优化器能自动选择最佳执行计划,根据数据分布、统计信息和系统资源动态调整查询策略。 7. **扩展性**:随着数据量的增长,Vertica可以通过添加更多节点轻松扩展,无需停机或重新...

    c#实现Vertica数据库的连接及各类操作

    在C#中与Vertica数据库进行交互是一种常见的需求,特别是在.NET开发环境中。Vertica是一个高性能、高度可扩展的关系型数据库管理系统,尤其适用于大数据分析。...记得在实际开发中根据项目需求进行适当的调整和优化。

    Vertica 安装说明 v8.1.pdf

    总而言之,Vertica安装说明为数据库管理员提供了一个从硬件设置到软件安装的完整流程,涵盖了从物理和网络设备准备、系统参数优化到环境检查和安装本身的每一个关键步骤。安装Vertica是一个严谨的过程,需要仔细遵循...

Global site tag (gtag.js) - Google Analytics