- 浏览: 78860 次
- 性别:
- 来自: 上海
-
最新评论
-
rockythd:
视界这个概念终于搞清楚了,谢谢!
Java关于Scala的“视界(view bound)”的模拟 -
regular:
写了一个更通用的方法:ObjectUtils.cast。目的是 ...
Java关于Scala的“视界(view bound)”的模拟 -
lrztiancai:
谢谢分享。正在找这个!
Parsley+SpiceLib 2.4 Developer Manual -
kraft:
第二版什么时候出啊
Programming In Scala 翻译 -
justjavac:
xpf7622 写道haixu.huang@live @前的名 ...
Programming In Scala 翻译
引子
大家都听说过FindBugs的大名。这是一款静态代码分析的工具。能够直接对字节码文件加以分析,并发现潜在的反模式(anti-pattern),从而有效地促进代码质量的改善。
但FindBugs只能用于静态代码分析。这也就意味着对于一些运行时的问题,例如,对于指定对象所属类型的校验、对于文件的打开和关闭是否相互对应,对于HashMap中的对象是否被修改过导致永远无法再次获得等情况,FindBugs根本无从下手。为此,本文提出了动态分析的思想并给出演示实现。
动态代码分析
所谓动态代码分析,就是相对于静态代码的分析。这是一句废话,就当立论了吧。
OK,所谓动态代码分析,就是指在程序运行期间能够主动检查代码运行的机制、模式、问题,收集代码的各种运行信息,并分阶段执行汇总分析,根据指定的一些标准,获得代码质量相关判断结果。
这样说比较枯燥乏味,我们举一些比较有趣的例子来说明问题。
例如以下的代码,看看我们能够发现什么问题:
看出问题的请举手。
不过我可以保证,这段代码可以安全通过FindBugs检查。因为这段代码从静态类文件来看,基本上没有什么毛病。而且运行一万次,一万次结果正确。这分明就是正确的代码嘛!
……
但是,如果我们现在有收端和发端,从一方把Hello类对象发到另一方接收,那么……
还是不会错!这分明就是完全正确的代码嘛!
……
但是我们还不知足,把收端和发端分别编译,然后再重新尝试刚才的操作,那么……
竟然还是不会错!
……
最后,我们把以上代码修改如下:
在这种情况下,Hello类将同时拥有两个匿名类,两个类的名称并非顺序排列,在不同的编译环境中可能产生不同的类名,因此序列化和反序列化可能会导致失败。
而ObjectOutputStream的writeObject方法根本不会检查对象是否为匿名类实例,甚至连是否实现了Serializable接口都不会检查。所以这段代码会通过检查并隐含可能发生的错误,直到某一天突然无声无息的爆发,打你个措手不及。
因此,动态代码分析应运而生了。
目标
实现方案
经过以上分析,我们可以想见,这个方案是涉及到AOP的。AOP的概念不用多解释了,大多数同学都风闻已久。我们这里为了实现最轻量级的方案原型,采用了ASM库并自行实现了ClassLoader。
具体原理如下:
FileClassLoader加载入口类的对象,然后由入口类对象启动一根线程,然后所有的操作过程中需要的类就都会经由FileClassLoader获得。对于我们要监控的操作,会通过RegularClassAdapter动态插入一些检查代码。若发现问题则收集或者直接显示在界面上。
以下是一些主要类的代码:
效果
参考网页:
Writing Your Own ClassLoader
AOP 的利器:ASM 3.0 介绍
大家都听说过FindBugs的大名。这是一款静态代码分析的工具。能够直接对字节码文件加以分析,并发现潜在的反模式(anti-pattern),从而有效地促进代码质量的改善。
但FindBugs只能用于静态代码分析。这也就意味着对于一些运行时的问题,例如,对于指定对象所属类型的校验、对于文件的打开和关闭是否相互对应,对于HashMap中的对象是否被修改过导致永远无法再次获得等情况,FindBugs根本无从下手。为此,本文提出了动态分析的思想并给出演示实现。
动态代码分析
所谓动态代码分析,就是相对于静态代码的分析。这是一句废话,就当立论了吧。
OK,所谓动态代码分析,就是指在程序运行期间能够主动检查代码运行的机制、模式、问题,收集代码的各种运行信息,并分阶段执行汇总分析,根据指定的一些标准,获得代码质量相关判断结果。
这样说比较枯燥乏味,我们举一些比较有趣的例子来说明问题。
例如以下的代码,看看我们能够发现什么问题:
// Hello.java public class Hello implements Serializable { public void sayTo(String name) { System.out.println("Hello, " + name + "! Nice to meet U!"); } } // Runner.java public class Runner implements Runnable, Serializable { public void run() { Hello hello = new Hello(){}; OutputStream baos = new ByteArrayOutputStream(); ObjectOutput oo = null; try { oo = new ObjectOutputStream(baos); oo.writeObject(hello); } catch (IOException e) { e.printStackTrace(); } finally { if (oo != null) { try { oo.flush(); oo.close(); } catch (IOException e) { e.printStackTrace(); } } } hello.sayTo("Regular"); } }
看出问题的请举手。
不过我可以保证,这段代码可以安全通过FindBugs检查。因为这段代码从静态类文件来看,基本上没有什么毛病。而且运行一万次,一万次结果正确。这分明就是正确的代码嘛!
……
但是,如果我们现在有收端和发端,从一方把Hello类对象发到另一方接收,那么……
还是不会错!这分明就是完全正确的代码嘛!
……
但是我们还不知足,把收端和发端分别编译,然后再重新尝试刚才的操作,那么……
竟然还是不会错!
……
最后,我们把以上代码修改如下:
public class Runner implements Runnable, Serializable { private static final long serialVersionUID = 1L; public void run() { Hello hello1 = new Hello(){ private static final long serialVersionUID = 2L;}; Hello hello2 = new Hello(){ private static final long serialVersionUID = 3L;}; // ...
在这种情况下,Hello类将同时拥有两个匿名类,两个类的名称并非顺序排列,在不同的编译环境中可能产生不同的类名,因此序列化和反序列化可能会导致失败。
而ObjectOutputStream的writeObject方法根本不会检查对象是否为匿名类实例,甚至连是否实现了Serializable接口都不会检查。所以这段代码会通过检查并隐含可能发生的错误,直到某一天突然无声无息的爆发,打你个措手不及。
因此,动态代码分析应运而生了。
目标
- 能够监管代码的运行
- 能够记录代码的某些操作
- 能够发现代码的某些反模式
- 不能对代码文件造成任何改变
- 不能让代码的运行依赖于检查
- 不能过多干涉代码的运行,乃至重建JVM实现(过于厚重)
实现方案
经过以上分析,我们可以想见,这个方案是涉及到AOP的。AOP的概念不用多解释了,大多数同学都风闻已久。我们这里为了实现最轻量级的方案原型,采用了ASM库并自行实现了ClassLoader。
具体原理如下:
FileClassLoader加载入口类的对象,然后由入口类对象启动一根线程,然后所有的操作过程中需要的类就都会经由FileClassLoader获得。对于我们要监控的操作,会通过RegularClassAdapter动态插入一些检查代码。若发现问题则收集或者直接显示在界面上。
以下是一些主要类的代码:
// 检查模块入口类 Main.java // ... public class Main { @SuppressWarnings("unchecked") public static void main(String[] args) throws Exception { ClassLoader loader = new FileClassLoader(".\\classes\\"); // bug包是可能存在问题的代码包,以后会用这个包名确定需要插入代码的类文件 Class<Runnable> cls = (Class<Runnable>) loader.loadClass("bug.Runner"); System.out.println("ClassLoader: " + cls.getClassLoader()); Constructor<Runnable> ctor = cls.getConstructor(new Class[0]); ctor.setAccessible(true); Runnable runner = ctor.newInstance(new Object[0]); Thread thread = new Thread(runner); thread.start(); } }
// FileClassLoader.java public class FileClassLoader extends ClassLoader { private String root; public FileClassLoader(String rootDir) { if (rootDir == null) { throw new IllegalArgumentException("Null root directory"); } root = rootDir; } @Override protected Class<?> loadClass(String name, boolean resolve) throws ClassNotFoundException { // Since all support classes of loaded class use same class loader // must check subclass cache of classes for things like Object // Class loaded yet? Class<?> c = findLoadedClass(name); if (c != null) { System.out.println("O: " + name); } else { try { c = findSystemClass(name); System.out.println("@: " + name); } catch (Exception e) { // Ignore these } } if (c == null) { System.out.println("X: " + name); // Convert class name argument to filename // Convert package names into subdirectories String filename = name.replace('.', File.separatorChar) + ".class"; try { // Load class data from file and save in byte array // Convert byte array to Class // If failed, throw exception byte data[] = loadClassData(filename); if (name.startsWith("bug.")) { System.out.println("#: " + name); ClassReader cr = new ClassReader(data); ClassWriter cw = new ClassWriter(ClassWriter.COMPUTE_MAXS); ClassAdapter ca = new RegularClassAdapter(cw); cr.accept(ca, 0); // ClassReader.SKIP_DEBUG data = cw.toByteArray(); c = defineClass(name, data, 0, data.length); } else { c = defineClass(name, data, 0, data.length); if (c == null) { throw new ClassNotFoundException(name); } } } catch (IOException ex) { throw new ClassNotFoundException(filename, ex); } } // Resolve class definition if approrpriate if (resolve) { resolveClass(c); } // Return class just created return c; } private byte[] loadClassData(String filename) throws IOException { // Create a file object relative to directory provided File f = new File(root, filename); // Get size of class file int size = (int) f.length(); // Reserve space to read byte buff[] = new byte[size]; // Get stream to read from FileInputStream fis = new FileInputStream(f); DataInputStream dis = new DataInputStream(fis); // Read in data dis.readFully(buff); // close stream dis.close(); // return data return buff; } }
// RegularClassAdapter.java public class RegularClassAdapter extends ClassAdapter { public RegularClassAdapter(ClassVisitor cv) { super(cv); } @Override public MethodVisitor visitMethod(final int access, final String name, final String desc, final String signature, final String[] exceptions) { MethodVisitor mv = cv.visitMethod(access, name, desc, signature, exceptions); if (mv != null) { mv = new CheckAnonySerMethodAdapter(mv); } return mv; } } class CheckAnonySerMethodAdapter extends MethodAdapter { private static final String OWNER = "java/io/ObjectOutputStream", NAME = "<init>", DESC = "(Ljava/io/OutputStream;)V"; private static final String MOCK = "mock/ObjectOutputStream"; public CheckAnonySerMethodAdapter(MethodVisitor mv) { super(mv); } @Override public void visitTypeInsn(int opcode, String type) { if (type.equals(OWNER)) { type = MOCK; } super.visitTypeInsn(opcode, type); } public void visitMethodInsn(int opcode, String owner, String name, String desc) { if (opcode == Opcodes.INVOKESPECIAL && OWNER.equals(owner) && NAME.equals(name) && DESC.equals(desc)) { owner = MOCK; } super.visitMethodInsn(opcode, owner, name, desc); } }
package mock; import java.io.IOException; import java.io.OutputStream; public class ObjectOutputStream extends java.io.ObjectOutputStream { private final java.io.ObjectOutputStream oos; public ObjectOutputStream(OutputStream os) throws IOException { super(); oos = new java.io.ObjectOutputStream(os); } @Override protected void writeObjectOverride(Object obj) throws IOException { Class cls = obj.getClass(); if (cls.isAnonymousClass()) { System.err.println("ANONYMOUS CLASS SERIALIZATION PATTERN: " + cls); Thread.dumpStack(); } oos.writeObject(obj); } // 所有java.io.ObjectOutputStream的方法都需要采用如下的方式代理实现 public void writeUnshared(Object obj) throws IOException { oos.writeUnshared(obj); } //...
效果
X: bug.Runner #: bug.Runner @: java.lang.Runnable @: java.io.Serializable @: java.lang.Object ClassLoader: regular.FileClassLoader@19821f @: java.lang.Throwable @: java.io.IOException @: java.io.OutputStream @: java.io.ByteArrayOutputStream @: java.io.ObjectOutput X: bug.Hello #: bug.Hello X: bug.Runner$1 #: bug.Runner$1 @: mock.ObjectOutputStream ANONYMOUS CLASS SERIALIZATION PATTERN: class bug.Runner$1 java.lang.Exception: Stack trace at java.lang.Thread.dumpStack(Thread.java:1158) at mock.ObjectOutputStream.writeObjectOverride(ObjectOutputStream.java:21) at java.io.ObjectOutputStream.writeObject(ObjectOutputStream.java:298) at bug.Runner.run(Runner.java:44) at java.lang.Thread.run(Thread.java:595) @: sun.reflect.SerializationConstructorAccessorImpl @: java.lang.String @: java.lang.System @: java.lang.StringBuilder @: java.io.PrintStream Hello, Regular! Nice to meet U!
参考网页:
Writing Your Own ClassLoader
AOP 的利器:ASM 3.0 介绍
发表评论
-
把Spring容器中的bean绑定到通过代码创建的对象
2012-04-26 16:17 2301Spring提供了对配置中创建对象的字段实例注入。但如果是通过 ... -
动态注册消息类型及处理函数
2011-10-01 15:56 1034内容略。参见代码演示。 -
代码实例
2011-02-14 17:17 1077代码实例文件 -
如何在类外部调用被子类覆盖的父类方法
2011-01-20 14:46 1923题目比较绕。以下用一个简单的例子说明: public cl ... -
SWT应用的开发实例:没有使用到OSGi
2011-01-14 11:27 1551添加音效,以及中奖名单回看功能。 SWT应用一枚。具体方法见 ... -
运行期代码问题检查技术的研究
2010-11-29 13:30 1169以下用我之前代码中的一个bug作为说明,解释如何实现代码在运行 ... -
健壮的、便捷的、异步的SocketChannel实现
2010-04-27 10:34 8435Socket通信比较常见的问题有如下几种: 1、设置收发超时; ... -
打算研究学习一下OSGi和Equinox
2010-02-10 11:26 1179看到一本很直接讨论这个题目的书,不过要等到3月1日才出来。 ... -
关键应用服务的集群技术模拟
2010-01-08 14:41 1106集群技术,也就是俗称的Cluster,是为了保证某种应用不间断 ... -
JarSpur 检查引用包归属的小工具
2009-12-25 17:31 1103图形化的界面,允许你导入任意多的在项目中可能需要的Jar包。 ... -
class.getResourceAsStream()与ClassLoader.getResourceAsStream()的区别
2009-11-11 17:33 2066在jar包里获得流形式的资源有两种方法,一个是Class.ge ... -
MultiKeyedMap方案的实现
2009-11-10 11:55 3791方案背景 所谓“MultiKey ... -
Java2D: 硬件加速 - 第二部分 - 缓冲策略:Buffer Strategies
2009-11-02 12:52 2991原文地址:Java2D: Hardware ... -
Java2D: 硬件加速 - 第一部分 - 非恒定图像类:Volatile Image
2009-10-30 16:19 4311原文地址:Java2D: Hareware Accelerat ... -
自建的MiniChart库,目前实现了点图、折线图、柱状图和饼图
2009-07-15 11:08 1269花了大约一个星期时间做的MiniChart库。 由于现在的免费 ... -
BM方案模式匹配的Java代码实现
2009-06-17 13:47 1605速度还算快,例子里比较的文件一共371个,3,293,472字 ... -
对于经典模式匹配算法的一些改动
2009-06-12 12:44 1525从一个很长的字符串(或者数组)中,查找某个子串(模式串)是否存 ... -
读写进程的互斥锁
2009-03-16 15:27 1604以下的代码完成了对某个资源的读写互斥锁,具体说明如下:1. 若 ... -
Object数组到泛型数组转换的伪解决方案
2009-01-23 10:44 4422闲来无事,想要用目前的Java技术模拟一个对象数据库。最初只是 ...
相关推荐
人脸识别项目实战
PLC热反应炉仿真程序和报告 ,PLC; 热反应炉; 仿真程序; 报告,PLC热反应炉仿真程序报告
内容概要:本文详细介绍了 C++ 函数的基础概念及其实战技巧。内容涵盖了函数的基本结构(定义、声明、调用)、多种参数传递方式(值传递、引用传递、指针传递),各类函数类型(无参无返、有参无返、无参有返、有参有返),以及高级特性(函数重载、函数模板、递归函数)。此外,通过实际案例展示了函数的应用,如统计数组元素频次和实现冒泡排序算法。最后,总结了C++函数的重要性及未来的拓展方向。 适合人群:有一定编程基础的程序员,特别是想要深入了解C++编程特性的开发人员。 使用场景及目标:① 学习C++中函数的定义与调用,掌握参数传递方式;② 掌握不同类型的C++函数及其应用场景;③ 深入理解函数重载、函数模板和递归函数的高级特性;④ 提升实际编程能力,通过实例强化所学知识。 其他说明:文章以循序渐进的方式讲解C++函数的相关知识点,并提供了实际编码练习帮助理解。阅读过程中应当边思考边实践,动手实验有助于更好地吸收知识点。
人脸识别项目实战
内容概要:本文主要介绍了Ultra Ethernet Consortium(UEC)提出的下一代超高性能计算(HPC)和人工智能(AI)网络解决方案及其关键技术创新。文中指出,现代AI应用如大型语言模型(GPT系列)以及HPC对集群性能提出了更高需求。为了满足这一挑战,未来基于超乙太网络的新规格将采用包喷射传输、灵活数据报排序和改进型流量控制等机制来提高尾部延迟性能和整个通信系统的稳定度。同时UEC也在研究支持高效远程直接内存访问的新一代协议,确保能更好地利用现成以太网硬件设施的同时还增强了安全性。 适合人群:网络架构师、数据中心管理员、高性能运算从业人员及相关科研人员。 使用场景及目标:①为构建高效能的深度学习模型训练平台提供理论指导和技术路线;②帮助企业选择最合适的网络技术和优化现有IT基础设施;③推动整个行业内关于大规模分布式系统网络层面上的设计创新。 阅读建议:本文档重点在于展示UEC如何解决目前RDMA/RoCE所面临的问题并提出了一套全新的设计理念用于未来AI和HPC环境下的通信效率提升。在阅读时需要注意理解作者对于当前网络瓶颈分析背后的原因以及新设计方案所能带来的具体好处
(参考GUI)MATLAB道路桥梁裂缝检测.zip
pygeos-0.14.0-cp311-cp311-win_amd64.whl
人脸识别项目实战
基于Matlab的模拟光子晶体光纤中的电磁波传播特性 对模式场的分布和有效折射率的计算 模型使用有限差分时域(FDTD)方法来求解光波在PCF中的传播模式 定义物理参数、光纤材料参数、光波参数、PCF参数及几何结构等参数 有限差分时域(FDTD)方法:这是一种数值模拟方法,用于求解麦克斯韦方程,模拟电磁波在不同介质中的传播 特征值问题求解:使用eigs函数求解矩阵的特征值问题,以确定光波的传播模式和有效折射率 模式场分布的可视化:通过绘制模式场的分布图,直观地展示光波在PCF中的传播特性 程序已调通,可直接运行 ,基于Matlab模拟; 光子晶体光纤; 电磁波传播特性; 模式场分布; 有效折射率计算; 有限差分时域(FDTD)方法; 物理参数定义; 几何结构参数; 特征值问题求解; 程序运行。,基于Matlab的PCF电磁波传播模拟与特性分析
内容概要:《知识图谱与大模型融合实践研究报告》详细探讨了知识图谱和大模型在企业级落地应用的现状、面临的挑战及融合发展的潜力。首先,介绍了知识图谱与大模型的基本概念和发展历史,并对比分析了两者的优点和缺点,随后重点讨论了两者结合的可行性和带来的具体收益。接下来,报告详细讲解了两者融合的技术路径、关键技术及系统评估方法,并通过多个行业实践案例展示了融合的实际成效。最后提出了对未来的展望及相应的政策建议。 适合人群:对人工智能技术和其应用有兴趣的企业技术人员、研究人员及政策制定者。 使用场景及目标:①帮助企业理解知识图谱与大模型融合的关键技术和实际应用场景;②指导企业在实际应用中解决技术难题,优化系统性能;③推动相关领域技术的进步和发展,为政府决策提供理论依据。 其他说明:报告不仅强调了技术和应用场景的重要性,还关注了安全性和法律法规方面的要求,鼓励各界积极参与到这项新兴技术的研究和开发当中。
神经网络火焰识别,神经网络火焰识别,神经网络火焰识别,神经网络火焰识别,神经网络火焰识别
人脸识别项目实战
1、文件内容:telepathy-farstream-0.6.0-5.el7.rpm以及相关依赖 2、文件形式:tar.gz压缩包 3、安装指令: #Step1、解压 tar -zxvf /mnt/data/output/telepathy-farstream-0.6.0-5.el7.tar.gz #Step2、进入解压后的目录,执行安装 sudo rpm -ivh *.rpm 4、更多资源/技术支持:公众号禅静编程坊
本东大每日推购物推荐网站管理员和用户两个角色。管理员功能有,个人中心,用户管理,商品类型管理,商品信息管理,商品销售排行榜管理,系统管理,订单管理。 用户功能有,个人中心,查看商品,查看购物资讯,购买商品,查看订单,我的收藏,商品评论。因而具有一定的实用性。 本站是一个B/S模式系统,采用Spring Boot框架作为开发技术,MYSQL数据库设计开发,充分保证系统的稳定性。系统具有界面清晰、操作简单,功能齐全的特点,使得东大每日推购物推荐网站管理工作系统化、规范化。 关键词:东大每日推购物推荐网站;Spring Boot框架;MYSQL数据库 东大每日推购物推荐网站的设计与实现 1 1系统概述 1 1.1 研究背景 1 1.2研究目的 1 1.3系统设计思想 1 2相关技术 3 2.1 MYSQL数据库 3 2.2 B/S结构 3 2.3 Spring Boot框架简介 4 3系统分析 4 3.1可行性分析 4 3.1.1技术可行性 5 3.1.2经济可行性 5 3.1.3操作可行性 5 3.2系统性能分析 5 3.2.1 系统安全性 5 3.2.2 数据完整性 6 3.3系统界面
二叉树实现。平衡二叉树(Balanced Binary Tree)是一种特殊的二叉树,其特点是树的高度(depth)保持在一个相对较小的范围内,以确保在进行插入、删除和查找等操作时能够在对数时间内完成。平衡二叉树的主要目的是提高二叉树的操作效率,避免由于不平衡而导致的最坏情况(例如,形成链表的情况)。本资源是使用C语言编程设计实现的平衡二叉树的源代码。
基于扩张状态观测器eso扰动补偿和权重因子调节的电流预测控制,相比传统方法,增加了参数鲁棒性 降低电流脉动,和误差 基于扩张状态观测器eso补偿的三矢量模型预测控制 ,基于扩张状态观测器; 扰动补偿; 权重因子调节; 电流预测控制; 参数鲁棒性; 电流脉动降低; 误差降低; 三矢量模型预测控制,基于鲁棒性增强和扰动补偿的电流预测控制方法
永磁同步电机全速域控制高频方波注入法、滑模观测器法SMO、加权切矢量控制Simulink仿真模型 低速域采用高频方波注入法HF,高速域采用滑膜观测器法SMO,期间采用加权形式切 送前方法 1、零低速域,来用无数字滤波器高频方波注入法, 2.中高速域采用改进的SMO滑模观测器,来用的是sigmoid函数,PLL锁相环 3、转速过渡区域采用加权切法 该仿真各个部分清晰分明,仿真波形效果良好内附详细控制方法资料lunwen 带有参考文献和说明文档,仿真模型 ,核心关键词: 1. 永磁同步电机; 2. 全速域控制; 3. 高频方波注入法; 4. 滑模观测器法SMO; 5. 加权切换矢量控制; 6. Simulink仿真模型; 7. 零低速域控制; 8. 中高速域控制; 9. 转速过渡区域控制; 10. 仿真波形效果; 11. 详细控制方法资料; 12. 参考文献和说明文档。,永磁同步电机多域控制策略的仿真研究
Buck变器二阶LADRC线性自抗扰控制matlab仿真 包括电压电流双闭环和ladrc控制外环加电流内环控制两种 并进行了对比,ladrc控制超调更小,追踪更快 参考文献 版本为2018b ,关键词:Buck变换器;二阶LADRC;线性自抗扰控制;Matlab仿真;电压电流双闭环;LADRC控制外环;电流内环控制;对比;超调;追踪;2018b版本。,Matlab仿真二阶LADRC控制的Buck变换器:外环LADRC+内环电流控制对比
2024全球工程前沿.pdf