本文依照 HIBERNATE 帮助文档,一些网络书籍及项目经验整理而成,只提供要点和思路,具体做法可以留言探讨,或是找一些更详细更有针对性的资料。
初用 HIBERNATE 的人也许都遇到过性能问题,实现同一功能,用 HIBERNATE 与用 JDBC 性能相差十几倍很正常,如果不及早调整,很可能影响整个项目的进度。
大体上,对于 HIBERNATE 性能调优的主要考虑点如下 :
•数据库设计调整
•HQL 优化
•API 的正确使用 ( 如根据不同的业务类型选用不同的集合及查询 API)
•主配置参数 ( 日志,查询缓存, fetch_size, batch_size 等 )
•映射文件优化 (ID 生成策略,二级缓存,延迟加载,关联优化 )
•一级缓存的管理
•针对二级缓存,还有许多特有的策略
•事务控制策略。
1 、 数据库设计
a) 降低关联的复杂性
b) 尽量不使用联合主键
c) ID 的生成机制,不同的数据库所提供的机制并不完全一样
d) 适当的冗余数据,不过分追求高范式
2 、 HQL 优化
HQL 如果抛开它同 HIBERNATE 本身一些缓存机制的关联, HQL 的优化技巧同普通的 SQL 优化技巧一样,可以很容易在网上找到一些经验之谈。
3 、 主配置
a) 查询缓存,同下面讲的缓存不太一样,它是针对 HQL 语句的缓存,即完全一样的语句再次执行时可以利用缓存数据。但是,查询缓存在一个交易系统 ( 数据变更频繁,查询条件相同的机率并不大 ) 中可能会起反作用 : 它会白白耗费大量的系统资源但却难以派上用场。
b) fetch_size ,同 JDBC 的相关参数作用类似,参数并不是越大越好,而应根据业务特征去设置
c) batch_size 同上。
d) 生产系统中,切记要关掉 SQL 语句打印。
4 、 缓存
a) 数据库级缓存 : 这级缓存是最高效和安全的,但不同的数据库可管理的层次并不一样,比如,在 ORACLE 中,可以在建表时指定将整个表置于缓存当中。
b) SESSION 缓存 : 在一个 HIBERNATE SESSION 有效,这级缓存的可干预性不强,大多于 HIBERNATE 自动管理,但它提供清除缓存的方法,这在大批量增加 / 更新操作是有效的。比如,同 时增加十万条记录,按常规方式进行,很可能会发现 OutofMemeroy 的异常,这时可能需要手动清除这一级缓存 :Session.evict 以及 Session.clear
c) 应用缓存 : 在一个 SESSIONFACTORY 中有效,因此也是优化的重中之重,因此,各类策略也考虑的较多,在将数据放入这一级缓存之前,需要考虑一些前提条件 :
i. 数据不会被第三方修改 ( 比如,是否有另一个应用也在修改这些数据 ?)
ii. 数据不会太大
iii. 数据不会频繁更新 ( 否则使用 CACHE 可能适得其反 )
iv. 数据会被频繁查询
v. 数据不是关键数据 ( 如涉及钱,安全等方面的问题 ) 。
缓存有几种形式,可以在映射文件中配置 :read-only( 只读,适用于很少变更的静态数据 / 历史数据 ) , nonstrict-read-write , read-write( 比较普遍的形式,效率一般 ) , transactional(JTA 中,且支持的缓存产品较少 )
d) 分布式缓存 : 同 c) 的配置一样,只是缓存产品的选用不同,在目前的 HIBERNATE 中可供选择的不多, oscache, jboss cache ,目前的大多数项目,对它们的用于集群的使用 ( 特别是关键交易系统 ) 都持保守态度。在集群环境中,只利用数据库级的缓存是最安全的。
5 、 延迟加载
a) 实体延迟加载 : 通过使用动态代理实现
b) 集合延迟加载 : 通过实现自有的 SET/LIST , HIBERNATE 提供了这方面的支持
c) 属性延迟加载 :
6 、 方法选用
a) 完成同样一件事, HIBERNATE 提供了可供选择的一些方式,但具体使用什么方式,可能用性能 / 代码都会有影响。显示,一次返回十万条记录 (List/Set/Bag/Map 等 ) 进行处理,很可能导致内存不够的问题,而如果用基于游标 (ScrollableResults) 或 Iterator 的结果集,则不存在这样的问题。
b) Session 的 load/get 方法,前者会使用二级缓存,而后者则不使用。
c) Query 和 list/iterator ,如果去仔细研究一下它们,你可能会发现很多有意思的情况,二者主要区别 ( 如果使用了 Spring ,在 HibernateTemplate 中对应 find,iterator 方法 ):
i. list 只能利用查询缓存 ( 但在交易系统中查询缓存作用不大 ) ,无法利用二级缓存中的单个实体,但 list 查出的对象会写入二级缓存,但它一般只生成较少的执行 SQL 语句,很多情况就是一条 ( 无关联 ) 。
ii. iterator 则可以利用二级缓存,对于一条查询语句,它会先从数据库中找出所有符合条件的记录的 ID ,再通过 ID 去缓存找,对于缓存中没有的记录,再 构造语句从数据库中查出,因此很容易知道,如果缓存中没有任何符合条件的记录,使用 iterator 会产生 N+1 条 SQL 语句 (N 为符合条件的记录数 )
iii. 通过 iterator ,配合缓存管理 API ,在海量数据查询中可以很好的解决内存问题,如 :
while(it.hasNext()){
YouObject object = (YouObject)it.next();
session.evict(youObject);
sessionFactory.evice(YouObject.class, youObject.getId());
}
如果用 list 方法,很可能就出 OutofMemory 错误了。
iv. 通过上面的说明,我想你应该知道如何去使用这两个方法了。
7 、 集合的选用
在 HIBERNATE 3.1 文档的“ 19.5. Understanding Collection performance” 中有详细的说明。
8 、 事务控制
事务方面对性能有影响的主要包括 : 事务方式的选用,事务隔离级别以及锁的选用
a) 事务方式选用 : 如果不涉及多个事务管理器事务的话,不需要使用 JTA ,只有 JDBC 的事务控制就可以。
b) 事务隔离级别 : 参见标准的 SQL 事务隔离级别
c) 锁的选用 : 悲观锁 ( 一般由具体的事务管理器实现 ) ,对于长事务效率低,但安全。乐观锁 ( 一般在应用级别实现 ) ,如在 HIBERNATE 中可以定义 VERSION 字段,显然,如果有多个应用操作数据,且这些应用不是用同一种乐观锁机制,则乐观锁会失效。因此,针对不同的数据应有不同的策略,同前面许 多情况一样,很多时候我们是在效率与安全 / 准确性上找一个平衡点,无论如何,优化都不是一个纯技术的问题,你应该对你的应用和业务特征有足够的了解。
9 、 批量操作
即使是使用 JDBC ,在进行大批数据更新时, BATCH 与不使用 BATCH 有效率上也有很大的差别。我们可以通过设置 batch_size 来让其支持批量操作。
举个例子,要批量删除某表中的对象,如“ delete Account” ,打出来的语句,会发现 HIBERNATE 找出了所有 ACCOUNT 的 ID ,再进行删除,这主要是为了维护二级缓存,这样效率肯定高不 了,在后续的版本中增加了 bulk delete/update ,但这也无法解决缓存的维护问题。也就是说,由于有了二级缓存的维护问题, HIBERNATE 的批量操作效率并不尽如人意 !
从 前面许多要点可以看出,很多时候我们是在效率与安全 / 准确性上找一个平衡点,无论如何,优化都不是一个纯技术的问题,你应该对你的应用和业务特征有足够的 了解,一般的,优化方案应在架构设计期就基本确定,否则可能导致没必要的返工,致使项目延期,而作为架构师和项目经理,还要面对开发人员可能的抱怨,必 竟,我们对用户需求更改的控制力不大,但技术 / 架构风险是应该在初期意识到并制定好相关的对策。
还有一点要注意,应用层的缓存只是锦上添花,永远不要把它当救命稻草,应用的根基 ( 数据库设计,算法,高效的操作语句,恰当 API 的选择等 ) 才是最重要的。
相关推荐
介绍 人类预期寿命是指在特定年龄出生的人群,按照当前的死亡率水平,预期平均能够存活的年数。预期寿命衡量一个国家和地区卫生健康状况、社会经济发展水平和生活条件的重要参数 数据来源为世界银行、第四-七次全国人口普查数据 ## 一、人类预期寿命趋势 2022年,全球人类预期平均寿命为72岁。其中女性为74.5岁,男性为69.6岁 世界银行的数据显示,1960-2022年期间,人类预期寿命整体呈上升趋势。随着医疗技术的进步、公共卫生的改善、营养条件的提升以及生活方式的改变,这62年间,人类平均预期寿命提升了21岁。受到新冠疫情的影响,2021年,预期寿命有所下降,但在2022年有所回升
内容概要:本文深入探讨了光伏超级电容与蓄电池混合储能系统在能量管理方面的仿真研究。主要内容涵盖光伏Boost模块的最大功率点跟踪(MPPT)算法实现、蓄电池与超级电容的分工及其控制策略、仿真工况的设计与分析。文中不仅提供了详细的数学模型和控制算法,还展示了具体的仿真案例,如200Hz投切负载和光照突降测试,验证了系统的动态响应能力和稳定性。此外,文章强调了仿真过程中需要注意的关键技术和参数设置,为实际应用提供了宝贵的理论支持和技术指导。 适合人群:从事新能源技术研发的专业人士、高校师生及相关领域的研究人员。 使用场景及目标:适用于光伏储能系统的研究与开发,旨在提高系统的能量利用效率和稳定性,特别是在面对复杂工况时的表现。通过仿真研究,可以优化系统设计,降低成本,提升性能。 其他说明:文中提供的代码片段和仿真模型仅供参考,在实际应用中需要结合具体情况进行调整和完善。同时,建议参考更多相关领域的权威文献,以确保研究成果的科学性和可靠性。
内容概要:本文详细介绍了利用FPGA和Verilog实现的一个能够实时切换六种波形并进行频率调节的DDS信号发生器的设计。文中首先阐述了波形切换机制,通过ROM查表法实现不同波形的数据存储与读取;接着讲解了按键交互设计,确保用户可以通过三个按键轻松地控制设备的功能;然后讨论了频率调节方法,采用相位累加器实现精确的频率控制;此外,还探讨了ASK和FSK调制的具体实现方式以及一些优化技巧如PWM替代DAC等。最终经过测试验证,该发生器可以在1kHz到10MHz范围内平稳运行,具有良好的性能表现。 适合人群:对FPGA开发有一定了解的技术爱好者、电子工程专业学生或者从事相关领域的工程师。 使用场景及目标:适用于需要生成多种标准波形并且可以灵活调整输出频率的应用场合,例如实验室环境下的教学演示、科研实验或是产品原型开发阶段。 其他说明:文中提供了大量具体的Verilog代码片段作为参考,帮助读者更好地理解和复现整个项目。同时提到了一些常见问题及其解决方案,有助于初学者避开潜在陷阱。
内容概要:本文详细介绍了使用 ABAQUS 有限元软件构建刀盘切削竹材模型的方法。首先,设定了刀具的工作参数,如转速和进给速度。接着,通过创建部件、定义材料属性、装配部件、设置分析步和划分网格等步骤完成了整个模型的建立。文中还强调了材料定义的关键性,特别是竹材作为复合材料层时使用的 Hashin 准则。此外,讨论了刀具运动的设置方法,包括旋转和平移动态的组合。对于接触设置部分,则探讨了摩擦系数和损伤耦合的影响。最后,提供了模型验证的一些技巧,确保仿真结果的有效性和准确性。 适合人群:从事机械工程、材料科学及相关领域的研究人员和技术人员,尤其是对有限元分析有一定基础的人群。 使用场景及目标:适用于需要研究刀具切削竹材过程的工程项目,旨在帮助工程师们更好地理解和优化切削工艺,提高生产效率和产品质量。 其他说明:文章不仅涵盖了理论知识,还包括了大量的代码片段和实践经验,有助于读者快速掌握相关技能并在实际工作中加以运用。
光电材料仿真,电子仿真等;从入门到精通教程;含代码案例解析。
基于生成对抗网络(GAN)的图像修复算法,旨在通过利用深度学习技术修复图像中的缺陷和损坏区域。算法中包括两个主要组件:一个生成器(Generator)和一个判别器(Discriminator)。生成器使用的是无注意力机制的全卷积架构UNet,而判别器采用的是PatchGAN架构。预处理过程中,加载图像和掩码文件并调整大小,进行随机掩码应用,准备模型输入。生成器根据对抗损失、感知损失和结构一致性损失调整其参数,以改善生成图像的质量和真实性。判别器评估两类图像:真实的未损坏图像和生成器产生的修复图像。通过设计生成器和判别器,算法能够有效地处理和修复图像中的缺陷。
内容概要:本文详细介绍了利用西门子TIA Portal V15.1和Factory IO构建虚拟工厂仿真的全过程。首先讲述了环境搭建,包括选择合适的PLC型号(如S7-1200)、正确配置通信参数(如IP地址)以及启用必要的通信权限。接着深入探讨了Factory IO场景的创建,强调了合理的信号映射和物理属性设置对于仿真效果的影响。随后展示了PLC程序的设计思路,特别是状态机的应用和关键逻辑的实现方法。文中还记录了一些常见的调试问题及其解决方案,例如因变量映射错误导致的传送带异常加速现象。最后分享了作者在联机调试过程中积累的经验教训,如使用Ping命令检查网络连通性和调整定时器参数避免误触发等。 适合人群:从事工业自动化领域的工程师和技术爱好者,尤其是对PLC编程和虚拟仿真感兴趣的初学者。 使用场景及目标:帮助读者掌握如何使用TIA Portal和Factory IO进行虚拟工厂仿真系统的搭建与调试,提高编程技能并减少实际项目中的试错成本。 其他说明:文中提供了大量实用的技术细节和实战案例,有助于加深理解和应用。同时提醒读者注意一些容易忽视的小问题,如IP地址配置、变量映射等,这些都是确保系统稳定运行的关键因素。
内容概要:本文详细介绍了如何使用Comsol进行金属贴片建模及其多极子展开分析,特别关注于透反射计算。首先,文章讲解了金属贴片建模的具体步骤,包括选择合适的物理场、绘制几何图形、设定材料属性等。接着,探讨了多极子展开的基础理论及其在Comsol中的实现方式,解释了多极子如电偶极子和磁偶极子如何影响电磁波的散射行为。随后,讨论了透反射计算的方法,强调了边界条件和求解器设置的重要性,并展示了如何通过多极子分解来分析透反射系数的变化。最后,文章还分享了一些实用技巧,如参数化扫描、网格优化和多极子分解的实际操作方法。 适合人群:从事电磁学研究的专业人士、研究生及以上学历的研究人员、对电磁仿真感兴趣的工程师。 使用场景及目标:适用于科研项目中涉及金属贴片结构的设计与分析,帮助研究人员更好地理解和预测金属贴片在不同电磁环境下的表现,尤其是透反射特性和多极子效应的应用。 其他说明:文中提供了详细的建模步骤和代码片段,便于读者动手实践并加深理解。同时,针对可能出现的问题给出了具体的解决方案,确保仿真的准确性。
郑予彬-生成式AI提升开发者效能.pdf
内容概要:本文详细介绍了基于MATLAB的三自由度车辆动力学模型以及利用容积卡尔曼滤波(CKF)进行车辆质心侧偏角估计的方法。首先,文章解释了三自由度模型的基本原理,包括状态方程的构建和线性轮胎模型的应用。接着,深入探讨了CKF算法的具体实现,包括容积点生成、预测和更新步骤,并展示了其相对于扩展卡尔曼滤波(EKF)的优势。此外,文章还讨论了与CarSim软件的联合仿真过程中遇到的问题及解决方案,如时钟同步和参数调试技巧。最终,通过实验验证了CKF在车辆状态估计中的高效性和准确性。 适合人群:从事车辆动力学研究、自动驾驶技术研发的专业人士,尤其是有一定MATLAB编程基础的研究人员和技术人员。 使用场景及目标:适用于需要精确估计车辆状态(如质心侧偏角、横摆角速度等)的场合,旨在提高自动驾驶系统的感知能力和控制精度。目标是帮助研究人员更好地理解和应用CKF算法,优化车辆控制系统的设计。 其他说明:文中提供了详细的代码片段和调试经验分享,有助于读者快速上手并解决实际问题。同时,强调了在特定工况下(如低附着力路面)采用自适应CKF的重要性。
内容概要:本文详细介绍了使用一维CNN结合MMD(最大均值差异)和Coral(协方差对齐)进行轴承故障诊断的迁移学习方法。主要内容涵盖数据预处理、网络模型设计、域适应技术以及训练技巧等方面。文中使用西储大学CWRU数据集进行实验,通过滑动窗口切片、归一化等手段处理振动信号,并构建了一维CNN模型,利用MMD和Coral实现源域和目标域的特征对齐。最终模型取得了99%的准确率,验证了方法的有效性。 适合人群:对机器学习特别是迁移学习感兴趣的初学者和技术爱好者。 使用场景及目标:适用于需要解决不同工况下轴承故障诊断问题的研究人员和工程师。主要目标是通过迁移学习提高模型在新环境下的泛化能力。 其他说明:文章不仅提供了详细的理论解释,还包括具体的代码实现和可视化工具的应用,如损失曲线图、准确率曲线图、混淆矩阵和t-SNE图等,有助于读者更好地理解和评估模型性能。此外,作者还分享了一些实用的经验和技巧,例如如何设置超参数、选择合适的学习率调度器等。
打包了西安电子科技大学B级测试低通滤波器设计,属于巴特沃斯低通滤波器,包含电路仿真、报告、matlab仿真,适合初学者以及西电学生作参考使用。
光电材料仿真,电子仿真等;从入门到精通教程;含代码案例解析。
该资源为natsort-6.0.0-py2.py3-none-any.whl,欢迎下载使用哦!
内容概要:本文详细介绍了基于积分时滞模型(ID Model)的渠道水位预测控制算法,主要聚焦于模型预测控制(MPC)框架下的实现。文章首先概述了论文的核心内容,即通过MPC结合渠道仿真模型和简化预测模型来实现水位控制。接着,通过详细的代码实现展示了从环境准备、渠道参数设置、SWMM模型构建、简化预测模型、MPC控制器实现到最后的完整仿真流程。文中还深入解析了积分时滞模型的数学原理及其参数辨识方法,并通过状态空间模型构建和滚动优化策略,实现了多渠段渠道水位的精准控制。此外,文章还提供了完整的性能评估和可视化展示,确保算法的有效性和适应性。 适合人群:具备一定编程基础,尤其是熟悉Python编程语言的研发人员,以及从事水利、自动化控制领域研究的专业人士。 使用场景及目标:①帮助读者理解如何利用SWMM模型和MPC算法实现渠道水位控制;②掌握积分时滞模型的数学原理及其在预测控制中的应用;③学习如何通过Python代码实现从模型构建到性能评估的完整流程;④提供实际案例,便于研究人员和工程师在实际项目中应用和改进该算法。 其他说明:本文不仅提供了详细的代码实现和理论解析,还强调了实际应用中的关键技术和创新点。读者可以通过跟随代码逐步实践,深入理解MPC在渠道水位控制中的应用,并根据具体需求进行扩展和优化。
espidf启动流程
内容概要:本文介绍了利用COMSOL与Matlab接口编程生成三维随机裂隙网络模型的方法和技术细节。首先阐述了裂隙网络模拟的重要性和传统方法的局限性,然后详细讲解了从二维到三维裂隙网络的数字化重构过程,强调了三维模型在捕捉地质结构复杂空间关系方面的优势。接着讨论了裂隙的随机性与多样性,通过Matlab中的随机数生成函数模拟裂隙的各种特性。随后介绍了多组裂隙的联合模拟以及模型的可扩展性和实用性,展示了该模型在地下水污染研究、油气资源开发和地质碳封存等多个领域的广泛应用前景。最后分享了一些实用技巧,如避免裂隙交叉、优化网格剖分等。 适合人群:从事地质学、水文学及相关领域研究的专业人士,尤其是那些希望深入了解并掌握三维裂隙网络建模技术的研究人员和工程师。 使用场景及目标:适用于需要精确模拟地下裂隙系统的研究项目,旨在帮助研究人员更好地理解和预测地下水流动、污染物迁移、油气开采效率等问题。同时,也为相关工程决策提供科学依据。 其他说明:文中提供的代码示例和操作指南有助于读者快速上手实践,附带的示范视频和详细的注释使学习更加便捷高效。此外,作者还提到了一些常见的坑点及解决方案,确保模型生成过程顺利进行。
内容概要:本文详细介绍了永磁同步电机(PMSM)无位置传感器控制中滑模观测器(SMO)的设计与仿真实现。首先阐述了系统的整体架构,包括速度环和电流环的工作机制。接着深入探讨了滑模观测器的关键实现步骤,如滑模增益选择、符号函数的应用以及低通滤波器的作用。文中还涉及了坐标变换(Clarke变换和Park变换)、PI参数整定、SVPWM调制等重要环节的具体实现方法和技术难点。此外,作者分享了多个调试过程中遇到的问题及解决方案,如波形抖振、电流采样延时、扇区判断错误等。最后展示了仿真结果,证明了所提方案的有效性和可行性。 适合人群:从事电机控制系统研究与开发的技术人员,尤其是对无位置传感器控制感兴趣的工程师。 使用场景及目标:适用于希望深入了解并掌握永磁同步电机无位置传感器控制技术的研究人员和工程师。目标是帮助读者理解滑模观测器的工作原理,掌握其设计与调试技巧,从而应用于实际项目中。 其他说明:文中提供了丰富的代码片段和实践经验,有助于读者更好地理解和应用理论知识。同时提醒读者注意离散化步长的选择和滑模增益的调整,这些都是确保系统稳定运行的重要因素。
内容概要:本文详细介绍了ARXML文件在汽车电子架构中的作用及其分类。ARXML(AUTOSAR XML)是AUTOSAR标准中定义的一种基于XML的文件格式,主要用于描述整车电子电气架构中的软件组件、通信矩阵、ECU配置等信息,是AUTOSAR工具链中数据交换的核心载体。文章从标准化数据交换、分层建模支持、工具链集成三个方面阐述了ARXML文件的核心作用。接着,根据系统级、应用级、基础软件级三个层次分别介绍了ARXML文件的内容和用途。系统级ARXML文件描述了系统架构、网络拓扑、通信矩阵和SWC到ECU的映射;应用级ARXML文件定义了SWC的实现细节,包括接口、数据类型、内部行为等;基础软件级ARXML文件则描述了BSW模块的配置,确保其能与应用程序软件和硬件抽象层正确交互。 适合人群:汽车电子工程师、嵌入式软件开发者、AUTOSAR架构师等相关技术人员。 使用场景及目标:①帮助工程师理解ARXML文件在AUTOSAR架构中的重要性和具体应用;②指导工程师如何利用ARXML文件进行系统设计、软件开发和集成测试;③提高工程师对AUTOSAR标准的理解和掌握,提升项目开发效率和质量。 其他说明:ARXML文件如同一棵树状结构,从根部扩展到底端,每个元素都可以有子元素、文本内容和属性。合理的ARXML配置是AUTOSAR系统成功实现的基础,建议使用专业的配置工具如EB tresos、Vector DaVinci Configurator等来管理和生成ARXML文件。
爬虫.md