Web 服务处于分布式计算的核心位置,它们之间的交互通常很难测试。分布式开发、大型的开发者团队以及对代码日益组件化的期望都有可能使 Web
服务的开发变得越来越容易隐藏错误。这些类型的错误极难检测出来。压力测试是检测这类代码错误的一种有效方法,但是只有在压力系统设计得比较有效的情况下
才能发挥作用。本文将让您深入了解一下这种压力系统的基本要求。
测试方法
传统的测试方法包括某种形式的简单单元测试,通常由开发人员执行。设计这些测试需要了解软件的内部知识,并且这些测试几乎总是针对产品的非常小的、特定的部分。这些类型的测试非常适合与其他代码组件极少交互,甚至没有交互的简单 Web 服务。
功能验证(Functional Verification)
也是一种测试过程,在这个过程中,对产品源代码了解有限的设计者进行测试以确认产品或服务的核心功能。设计这种测试是为了证明这个核心功能符合某个规范。
举个例子,我的在线拍卖显示的是输入的正确出价吗?
我的保险经纪人系统找到最便宜的报价了吗?如果这些测试失败,通常就意味着检测到了产品的一个基本问题(这个问题通常是可以直接修复)。这种测试也是适合
简单的 Web 服务,使您可以检查服务是否能够正确执行它的各个功能。
系统测试(System Test)
通常是在功能验证阶段完成,验证了核心功能后进行。它倾向于把整个系统作为一个整体来查找问题 — 弄清 Web 服务作为系统的一部分怎样运作,以及
Web
服务相互之间如何交互。由于系统测试是在开发生命周期快结束时才进行,所以通常不能给它分配足够的时间来完成。又因为紧张的发行日程安排以及开发的各个重
要阶段的后移,系统测试阶段经常被忽略,并且一些通常都可以发现的、少见的错误都不能被检测到。即使发现了这种错误,这时也来不及确定错误的原因并设法修
复它们了。因此,在查找代码错误时,必需把系统测试应用设计得尽可能高效。系统测试通常由三部分组成,它们是:
性能(Performance): 这涉及到确定相关的产品统计数据的过程。例如:每秒有多少条消息?一个服务可同时接受多少个用户?
案例(Scenario): 这是重新创建客户所需的确切配置的过程。因此在案例中发现的任何问题都可以在客户使用该产品之前被检测出来。
压力(或称工作负载平衡):
它与另两个部分不同,因为它被设计为通过应用很大的工作负载来使软件超负荷运转。如果压力测试通过对产品保持高强度的使用(但不超过性能统计数字确定的限
制)能有效地执行,那么它就经常能够发现许多隐蔽的错误,而这些错误用上面提到的任何其他技术都是发现不了的(这些错误也经常是最难修复的)。
从检测代码错误这方面来说,可以证明这三个系统测试组件中效率最高的是压力测试部分。但由于这个过程经常跟系统的其他要素或功能测试混淆在一起,所以这个过程涉及到的方法还没有被正确着手处理或实现。
压力下的错误
使用压力测试,您有希望找到很多种用其他测试方法更难发现的错误。有两种错误类型是:
内存泄漏(Memory leak):
一种极难检测的现象。内存泄漏经常发生在已发行的产品中,原因很简单,很难设计测试用例来检测它们。使用简单的功能测试,几乎发现不了内存泄漏问题,因为
在产品完成之前测试没对产品进行足够多的使用。内存泄漏通常要求操作作要重复非常多的次数以使内存消耗达到能引起注意的程度。尽管与其它编程语言(如
C/C++)相比,Java 程序更难引入内存泄漏错误,但只要程序仍保持着对对象的引用,该对象仍有可能被实例化并且它占用的内存永远不会被释放。
并发与同步(Concurrency and Synchronization):
压力测试在查找并发性问题上非常出众,这是因为在任何一个测试生命周期中,它都应用了许多不同的代码路径和定时条件。一般的规则是,压力测试运行的时间越
长,涉及并应用的代码路径组合和定时条件就越多。当然,这也的确使得这些问题很难再现(错误可以在 5 分钟或 5
天后发生)。死锁、线程泄漏以及任何一般的同步问题通常只能在压力测试阶段被检测出来。这些类型的问题很难通过执行单元测试来发现。开发人员不会一直考虑
他或她的代码将与其他地方的代码(在执行单元测试时这些代码可能还没写出来)进行交互。
现有的压力测试工具
有许多声称能够对产品进行压力测试的可用工具目前正在开发中。被广泛应用的是针对 Web 服务的那些工具。然而,这些工具中有许多只是简单的
HTML/SOAP 生成器,它们模拟许多客户机连接,并因此对 Web 服务器生成高负载(这对于查找 Web 服务器的问题很有用,但对于查找
Web
服务的问题就没那么有用了)。这些工具对基本的压力测试比较有用,但它们经常是仅仅扩展功能验证阶段来重复地执行相同的功能任务。如果足够的时间和资源可
用,就可以通过创建定制构建的压力测试系统来实现更有效的测试。由于压力系统的设计者通常对要测试的产品和 Web
服务有更多的了解,所以他们将能够确保压力系统可以用于哪些具体的代码区域。
设计压力应用
设计试图对
Web 服务进行压力测试的压力测试系统时,要让它们以某种特定的方式运行代码。这些风格超越了功能验证,目的是要弄清楚被测试的 Web
服务是不是不仅能做我们认为它能做的事,而且在被施加了某些高强度压力的情况下仍然继续正常运行。压力测试必须对 Web
服务应用四个基本条件。许多已建立的压力系统应用了这些条件。有效的压力测试系统将应用以下这些关键条件:
重复
(Repetition):
或许最明显的且最容易理解的压力条件就是测试的重复。换句话说,测试的重复就是一遍又一遍地执行某个操作作或功能,比如重复调用一个 Web
服务。功能验证测试可以用来被弄清楚一个操作作能否正常执行。而压力测试将确定一个操作作能否正常执行,并且能否继续在每次执行时都正常。这对于推断一个
产品是否适用于某种生产情况至关重要。客户通常会重复使用产品,因此压力测试应该在客户之前发现代码错误。许多最简单的压力系统只实现这一个条件,但简单
地扩展功能验证测试来多次重复并不能构成一个有效的压力测试。当与下面的一些原则结合起来使用时,重复就可以发现许多隐蔽的代码错误。
并发(Concurrency): 并发是同时执行多个操作作的行为。换句话说,就是在同一时间执行多个测试,例如在同一个服务器上同时调用许多
Web
服务。这个原则不一定适用于所有的产品(比如无状态服务),但是多数软件都具有某个并发行为或多线程行为元素,这一点只能通过执行多个代码示例才能测出
来。功能测试或单元测试几乎不会与任何并发设计结合。压力系统必须超越功能测试,要同时遍历多条代码路径。至于怎么做到这一点取决于具体的产品。例如,一
个 Web 服务压力测试需要一次模拟多个客户机。Web
服务(或者任何多线程代码)通常会访问多个线程实例间的一些共享数据。因额外方面的编程而增加的复杂性通常意味着代码会具有许多因并发引起的错误。由于引
入并发性意味着一个线程中的代码有可能被其他线程中的代码中断,所以错误只在一个指令集以特定的顺序(例如以特定的定时条件)执行时才会被发现。把这个原
则与重复原则结合在一起,您可以应用许多代码路径和定时条件。
量级(Magnitude):
压力系统应该应用于产品的另一个条件考虑到了每个操作作中的负载量。压力测试可以重复执行一个操作作,但是操作作自身也要尽量给产品增加负担。例如,一个
Web
服务允许客户机输入一条消息,您可以通过模拟输入超长消息的客户机来使这个单独的操作作进行高强度的使用。换句话说就是,您增加了这个操作作的量级。这个
量级总是特定于应用的,但是可以通过查找产品的可被用户计量和修改的值来确定它。例如,数据的大小、延迟的长度、资金数量的转移、输入速度以及输入的变化
等等。单独的高强度操作作自身可能发现不了代码错误(或者仅能发现功能上的缺陷),但与其他压力原则结合在一起时,您将可以增加发现问题的机会。
随机变化:
最后一点,任何压力系统都多多少少具有一些随机性。如果您随机使用前面的压力原则中介绍的无数变化形式,您就能够在每次测试运行时应用许多不同的代码路
径。下面是几个关于怎样在测试生命周期内改变测试的示例。使用重复时,在重新启动或重新连接服务之前,您可以改变重复操作作间的时间间隔、重复的次数,或
者也可以改变被重复的 Web 服务的顺序。使用并发,您可以改变一起执行的 Web 服务、同一时间运行的 Web
服务数目,或者也可以改变关于是运行许多不同的服务还是运行许多同样的实例的决定。量级或许是最容易更改的 —
每次重复测试时都可以更改应用程序中出现的变量(例如,发送各种大小的消息或数字输入值)。如果测试完全随机的话,因为很难一致地重现压力下的错误,所以
一些系统使用基于一个固定随机种子的随机变化。这样,用同一个种子,重现错误的机会就会更大。
一个压力测试通常会结合上述的所有
原则,并且在允许的范围内尽可能长时间地运行。测试被允许的执行时间越长,就可以遍历越多的代码路径,并且发现的错误也越多。当然,一旦找到错误就必须诊
断并修复它。由于一个代码错误可以在压力测试运行多日以后自己显示出来,所以系统必须保证当出现错误时所有可用的调试信息都被生成,否则可能就必须花费同
样多的时间来重现这个错误。
结束语
测试是软件开发过程中至关重要的部分,并且一个重要
的、经常被曲解或忽略的部分是压力测试。遵循上面详细说明的原则,您就可以设计并实现有效的压力测试系统,用来查找一些与您的代码相关的、比较隐蔽的问
题。无论是利用预先写好的工具,还是创建一个完全专用的压力系统,压力测试都是用于查找 Web 服务(或其他任何程序)问题的本质方法
分享到:
相关推荐
Web网站压力测试是一种重要的质量保证方法,用于检测在高负载或并发使用情况下可能出现的系统缺陷。随着Web服务在分布式计算中的核心地位,压力测试成为确保服务稳定性和性能的关键环节。本教程将深入探讨压力测试的...
**JMeter 压力测试详解** 在软件测试领域,压力测试是一种重要的测试类型,它的主要目的是评估系统在高负载条件下的性能和稳定性。压力测试通常关注的是软件在短时间内处理大量并发用户请求的能力,以确保系统能够...
### Web性能测试实战详解知识点概览 #### 一、软件生命周期与模型 - **软件生命周期**:涵盖了软件从概念提出到最终废弃的所有阶段。主要包括需求分析、设计、实现与测试、发布、部署与维护这几个核心过程。 - **...
总的来说,Web压力测试是保障网站可靠性的重要环节,而ApacheBench作为Windows下的首选工具之一,其易用性和灵活性使其在测试场景中占据了一席之地。结合合适的教程和实践,我们可以有效地利用它来优化和调整我们的...
**Web压力测试工具Polygraph详解** Polygraph是一款广泛用于Web性能和压力测试的工具,它能够模拟大量并发用户对Web服务器进行访问,以此来评估服务器在高负载情况下的性能表现和稳定性。通过运行详尽的测试场景,...
**微软Web压力测试工具详解** 在信息技术领域,性能测试是不可或缺的一个环节,它能帮助我们评估和优化网站或应用程序在高并发情况下的表现。微软Web压力测试工具正是为这一目的而设计的专业工具,它能够模拟大量...
描述中连续三次提到“was 微软的 网站 压力 测试 工具”,这进一步强调了该工具的核心功能——针对网站进行压力测试,以确保它们在大规模用户访问时能够正常运行。在IT行业中,网站压力测试是确保服务质量和用户体验...
性能测试的应用领域包括了性能测试、负载测试、压力测试、配置测试、并发测试、可靠性测试、失效恢复测试等多种方法,这些方法各有侧重点,但都服务于软件性能的评估和优化。书中也对性能测试的应用领域进行了分析,...
《微软Web应用压力测试工具详解》 在信息技术领域,网站性能和稳定性是衡量一个系统质量的重要指标。为了确保网站在高并发访问下仍能保持高效、稳定运行,开发者和运维人员常常需要借助专业的压力测试工具。微软...
【压力测试详解】 压力测试是评估软件或系统在高负载条件下的稳定性和性能的重要方法。在IT领域,尤其是Web应用程序的开发和维护中,压力测试是确保服务质量和用户体验的关键环节。LoadRunner是一款广泛使用的压力...
总结起来,.NET Core开发者可以借助ConcurrentTest组件对WebAPI服务或自定义方法进行压力测试,从而更好地评估和优化代码的性能。这个工具的使用方式类似于BenchmarkDotNet,通过简单的标记和配置就能实现复杂的压力...
【Web压力测试工具】 本文介绍了几种常见的Web压力测试工具: 1. **Apache Bench (ab)**:这是一个轻量级的命令行工具,用于测量Web服务器的性能。它支持设置并发用户数(-c参数)和总请求数(-n参数)。 2. **...
**JMeter与Badboy压力测试软件包详解** 在IT领域,性能测试是不可或缺的一个环节,特别是在网站和应用程序的开发过程中,以确保系统在高负载下仍能稳定运行。本资源包含的是最新版本的"JMeter"和"Badboy"两款压力...
**压力测试工具ab详解** 压力测试是评估系统在高负载或大量并发请求下性能的重要手段。在IT行业中,尤其在服务器优化和应用性能管理中,压力测试工具扮演着至关重要的角色。"ab"(ApacheBench)就是这样一个简单而...
Web压力测试是评估Web应用程序在高并发访问情况下的稳定性和性能的重要手段。在本实验报告中,我们关注的是如何使用Web Application Stress Tool (WAS) 对Web应用进行压力测试,以及如何分析测试结果来确定系统的...
**WEB测试计划模板详解** 在软件开发过程中,Web测试是一个至关重要的环节,它确保了Web应用程序的质量、稳定性和用户体验。一个良好的Web测试计划是保证测试效率和效果的关键。本篇文章将详细解读“WEB测试计划...
《JMeter MQTT服务器压力测试详解》 在信息技术领域,性能测试是确保系统稳定性和可靠性的重要环节,特别是对于物联网(IoT)应用中的消息传递协议,如MQTT(Message Queuing Telemetry Transport)。JMeter,一个...