测试工具的分类与选择课件

测试工具的分类与选择测试工具的分类(按测试方法)1.白盒测试工具2.黑盒测试工具测试工具的分类（按测试对象和目的）1.单元测试工具2.功能测试工具3.负载测试工具或性能测试工具4.测试管理工具（TestLink）5.缺陷管理工具（Bugzilla）6.嵌入式测试工具7.安全性测试工具8.数据库测试工具测试工具的选择1.支持脚本语言2.脚本语言是否支持外部函数库、函数的可重用3.对程序界面中对象的识别能力4.抽象层5.分布式测试的网络支持6.支持数据驱动测试7.具有脚本开发良好的环境8.其他功能面向开发的单元测试工具按语言分类（Junit，C++Test）按工具的功能特点分类：内存资源泄露检查工具（Purify）代码覆盖率检查工具(LogiScope)代码性能检查工具(Macabe)软件纠错工具(RationalPurl等)代码复杂度检查工具（SourceMonitor）功能测试工具WinRunnerQARunSQARobotVisualTestSuiteQTPSelenium（开源）性能测试工具的原理性能测试工具执行测试的一般过程是通过虚拟用户生成器录制关键业务操作，自动生成原始的测试脚本。然后，在控制器编辑、组织测试脚本分发给每个负载生成器（也称代理，Agent），Agent向服务器发送请求模拟客户端，执行脚本的同时将测试的结果返回给控制器。性能测试工具的主要特性：首先能模拟实际用户的操作行为，记录和回放多用户测试中的事物处理过程，自动生成相应的测试脚本。其次，能针对脚本进行修改，增加逻辑控制、完成参数化和数据关联。再者，可以设置不同的应用环境和场景，通过虚拟用户执行相应的测试脚本。最后，在脚本执行过程中，通过系统监控工具获得系统性能的相关指标的值，包括系统资源利用率、响应时间、系统吞吐量。嵌入式测试工具原理嵌入式系统软件的测试相对困难，因为它的开发是用交叉编译方式进行的。在目标机上，不可能有多余的空间记录测试的信息，必须实时的将测试信息通过网线/串口传到宿主机上，并实时在线的显示。因此，对源代码的插装和目标机上信息的收集成为嵌入式工具要解决的关键问题。嵌入式测试工具CodeTestLogiscope（用于代码分析、覆盖测试）VectorCast几种主流的自动化测试工具1.Rationalrobot(功能/性能测试)2.WinRunner（功能测试）3.Loadrunner（性能与负载压力）4.QTP（功能测试与回归测试）5.SilkTest（功能测试与回归测试）6.WAS(负载压力测试，开源免费)7.Jmeter（开源，性能测试）8.MaxQ（开源Web功能测试工具）测试工具与开发过程关系图测试工具的选择开源黑盒（功能、负载、性能）开源测试工具介绍Jmeter（功能/性能测试）MaxQ(功能测试)WebInject(功能/回归测试)soapUI(功能/性能测试)TestMaker(功能/性能测试)OpenSTA(性能测试)WAS(负载压力测试)Selenium（功能/验收测试）WatiR（功能测试）Siege(web压力测试)Jmeter缺点：使用Jmeter无法验证JS程序，也无法验证页面，所以需要手工去验证。Jmeter的断言功能不是很强大。就算是jmeter脚本顺利执行，依旧无法确定程序是否正确执行，有时候需要进入程序查看，或者查看Jmeter的响应数据。Jmeter脚本的维护需要保存为本地文件，而每个脚本文件只能保存一个测试用例，不利于脚本的维护。MaxQMaxQ是Web功能测试工具，包括记录测试脚本的HTTP代理和用于回放测试的命令行实用程序。所不同的是，它不是对GUI操作的模拟，而是绕过用户界面，采用WebProxy代理方式，获得浏览器提交的请求数据包，直接转发给服务器，这样测试速度快且稳定。特点：1.免费、开源。2.用Jython作为记录测试脚本的语言。3.基于Java构建，在任何地方都可以运行。4.代码简单，容易按需增强其功能。5.测试脚本可以为JUnit运行。6.可以运行于代理服务器之后。7.支持cookies。WebInjectWebInject是一个自动化测试工具，主要适合Web应用和Web服务。可以通过它来测试基于HTTP接口的系统组件，还可以用它来进行服务器监控。使用环境：Windows,LinuxsoapUIsoapUI是一个开源测试工具，通过soap/http来检查、调用、实现WebService的功能/负载/符合性测试。该工具既可作为一个单独的测试软件使用，也可利用插件集成到Eclipse，maven2.X，Netbeans和intellij中使用。soapUI优点：（1）soapUI工具适合QA和测试人员，而不需要开发人员使用编程来实现测试用例。它能够基于WSDL自动产生测试消息。（2）soapUI能够直接引用外部的属性文件来简化测试步骤，通过建立断言soapUI可以进行xml模式效验和错误效验。（3）soapUI可用于压力测试，容易管理服务端点。（4）soapUI提供方便的接口能够集成JBoss、Ant、XML-Bean、ApacheTCPMon等多种工具。（5）soapUI可以完成多种webservice的测试场景。soapUI

缺点：（1）soapUI使用的是自己的Web服务客户端,它创建的测试消息不同于通常意义上的基于JAX或者其它的Web服务客户端的工作过程,SOAPUI并不从WSDL中产生Java类,它也不处理Java对象的序列化和反序列化,这样的结果是客户端并不是像真正的Web服务消费者那样去调用Web服务。（2）SOAPUI的RequestTransportRegistry类并不提供从外部增加新的协议的机制,它不支持JMS协议。TestMakerTestMaker不单单的是完整的测试平台，也是性能监控的工具，它是一个分布式的自动化测试平台，主要对应用程序的性能进行管理和监控。支持Java、.NET、Jython、Groovy、PHP、Ruby和Perl的功能测试以及负载和性能测试，主要适合Web项目、SOA应用、RIA和BPM应用。OpenSTAOpenSTA是一个免费的、开放源代码的web性能测试工具，能录制功能非常强大的脚本过程，执行性能测试。例如虚拟多个不同的用户同时登陆被测试网站。OpenSTA是专用于B/S结构的、免费的性能测试工具。它的优点除了免费、源代码开放的优点外，还能对录制的测试脚本进行,按指定的语法进行编辑。在录制完测试脚本后，可以对测试脚本进行编辑，以便进行特定的性能指标分析。其较为丰富的图形化测试结果大大提高了测试报告的可阅读性。OpenSTA基于CORBA的结构体系，它通过虚拟一个proxy，使用其专用的脚本控制语言，记录通过proxy的一切HTTP/Straffic。通过分析OpenSTA的性能指标收集器收集的各项性能指标，以及HTTP数据，对系统的性能进行分析。优点：压力测试引擎具有可扩充性，可以完成大规模的压力测试。提供脚本语言支持。WASWAS允许以不同的方式创建测试脚本：可以通过使用浏览器走一遍站点来录制脚本，可以从服务器的日志文件导入URL，或者从一个网络内容文件夹选择一个文件。当然，也可以手工的输入URL来创建一个新的测试脚本。WAS可以使用任何数量的客户端运行测试脚本，全部都有一个中央主客户端来控制。在每一个测试开始前，主客户机透明的执行以下任务：与其他所有的客户机通信；把测试数据分发给所有的客户端；在所有客户端同时初始化测试；从所有的客户端收集测试结果和报告。优缺点：WAS是一个免费的测试工具，使用起来比较简单，但是不能显示和编辑所录制的测试脚本，其可控性和图形化测试结果都比较弱，故造成一定的局限性。WatiRWatiR是使用Ruby实现的开源web自动化测试框架，小巧灵活，提供了对多种常见web对象的识别和操作的支持。Watir可以使用IE（IE5.5及以上版本），Firefox，Chrome进行Web应用测试。支持Windows（2000及以上版本），Linux，Ubuntu，Mac。WatiR可以模拟用户访问网页、点击链接，填写表单，点击按钮。WatiR可以模拟用户验证页面内容。所需要的环境：Ruby，因为是使用Ruby实现的，脚本也是Ruby的脚本，所以需要在本机安装Ruby。其他特性：如果熟悉了Ruby，再结合其他一些工具，可以在Watir框架的基础上扩展出很多特性。例如：外部文件或数据库的读取、模块化的开发、可重用的函数库、数据驱动、关键字驱动、脚本的版本化控制以及测试结果的管理，等等。SiegeSiege是Linux系统下的一个测试工具，完全使用C语言实现，可以对HTTP和FTP服务器进行负载和性能测试。通过使用Siege提供的功能，可以很容易的制定测试计划：包括规定使用并发用户数、重复数量，从而可以模拟在服务器、网络或者其它对象上附加负载以测试他们提供服务的受压能力，方便的测试服务器的性能。最后，利用Siege提供的测试结果来分析性能指标或者分析他们提供的服务在不同负载条件下的性能情况，分析测试结果，找出影响系统性能