软件效率测试初级培训

软件效率测试初级培训第一页，共三十八页，编辑于2023年，星期三目标本次培训的目标：了解效率测试的概念了解效率测试的常用手段了解效率测试的步骤掌握脚本录制方法掌握脚本的调试和修改方法掌握测试报告的编制方法了解测试数据的分析方法理解基本的性能指标第二页，共三十八页，编辑于2023年，星期三效率测试的定义谈及系统的性能，其覆盖面非常广泛，对一个系统而言包括执行效率、设备效率和网络效率等性能测试用来保证产品发布后系统的性能满足用户需求，性能测试在软件质量保证中起着非常重要的作用第三页，共三十八页，编辑于2023年，星期三效率测试的目的

评估系统的能力识别体系中的弱点系统调优验证可伸缩性（resilience）和可靠性（reliability）用性能测试手段发现系统存在的问题设备选型提供部署方案的参考第四页，共三十八页，编辑于2023年，星期三效率测试的常用手段基准测试并发测试递增测试场景测试极限测试疲劳测试数据存储容量测试吞吐量测试……第五页，共三十八页，编辑于2023年，星期三基准测试基准测试是指测试环境确认以后，对业务模型中涉及的每种业务做基准测试。目的是获取单用户执行时的各项性能指标，为多用户并发和混合场景的性能测试性能分析提供参考依据。第六页，共三十八页，编辑于2023年，星期三并发测试并发测试是指并发不同数目的虚拟用户执行检查点操作，目的是对检查点进行压力加载测试。预测系统投入使用后在一定用户压力情况下的系统响应时间,根据此响应时间分析、确定系统存在的性能瓶颈，为系统的优化和调整提供依据。第七页，共三十八页，编辑于2023年，星期三递增测试递增测试是指每隔一定时间段（如5秒、10秒）并发不同数目的虚拟用户执行检查点操作，对检查点进行递增用户压力加载测试，从而模拟系统真实的使用情景，使用户预知系统投入使用后的性能水平。第八页，共三十八页，编辑于2023年，星期三场景测试根据历史数据统计结果以及系统用户的分布和使用频率，模拟不同用户执行不同操作，如10%的用户执行登录操作，50%的用户执行查询操作，40%的用户执行数据库更新操作，最大限度地模拟系统的真实场景，使用户预知系统投入使用后的真实性能水平。从而，对系统做出相应的优化及调整，避免实际情况中出现系统长时间不响应及崩溃的情况。第九页，共三十八页，编辑于2023年，星期三极限测试极限测试是指对系统核心功能点及可能存在压力瓶颈的功能点进行性能极限测试，即该功能点所能承受的最大用户并发数。通过极限测试，用户可预知系统投入使用后，能否满足实际的需求。第十页，共三十八页，编辑于2023年，星期三疲劳测试该测试是指对系统核心功能点进行疲劳强度测试，即用系统稳定运行情况下能够支持的最大并发用户数，持续执行一段业务时间（如48小时），记录交易平均响应时间，交易正确率，应用服务器和数据库服务器CPU利用率、内存使用情况等参数，考察应用服务器和数据库服务器是否出现宕机、内存泄漏等情况。该测试通常需要和场景测试进行结合，从而可以最大限度地模拟真实环境下，系统长时间连续运行条件下，系统是否能够保持在稳定运行状态。第十一页，共三十八页，编辑于2023年，星期三吞吐量测试模拟多用户进行执行提交任务操作，测试系统单位时间内可执行任务数是否可以达到预期的指标。第十二页，共三十八页，编辑于2023年，星期三数据存储容量测试数据库存储一定容量后，在不同的数据存储量情况下，重新执行各项操作，求得系统响应时间。比较不同数据存储容量情况下，执行不同任务操作的系统响应时间，使用户预知未来一段时间随着数据存储容量的变化，执行不同任务操作响应时间所发生的变化。

第十三页，共三十八页，编辑于2023年，星期三网络性能测试含义测试网络带宽、延迟、负载和端口的变化对用户的响应时间的影响实际应用主要是测试用户数目与网络带宽的关系第十四页，共三十八页，编辑于2023年，星期三效率测试局限不能穷尽所有的情况或案例不能100%的达到需求第十五页，共三十八页，编辑于2023年，星期三效率测试的步骤分析系统并制定测试目标选择相关技术和工具准备测试环境录制脚本并设计测试用例设计测试场景运行测试用例并确定系统健康运行监测后台资源分析测试结果并制作报告第十六页，共三十八页，编辑于2023年，星期三分析系统并制定目标分析系统系统类别系统构成系统功能制定目标确定客户需求和期望确定实际业务需求确定系统需求测试点通常按照4-8原则，时间占到整个测试周期的2/3以上登录、查询、数据更新操作、文件上传等第十七页，共三十八页，编辑于2023年，星期三选择相关技术和工具对各种性能测试工具进行评估选择符合现有软件架构的性能测试工具第十八页，共三十八页，编辑于2023年，星期三设计测试场景虚拟用户的操作步骤要尽量类似真实用户的操作操作的数据要类似于真实用户实际使用数据，以防止应用缓存技术对负载测试带来的负面影响在案例设计时要充分考虑到需求中用户对模块使用的频率第十九页，共三十八页，编辑于2023年，星期三准备测试环境系统使用何种操作系统需要监控哪些指标需要安装哪些服务是否需要准备数据需要哪些用户同一个用户是否可以重复使用第二十页，共三十八页，编辑于2023年，星期三录制脚本并设计测试用例从登录开始加入检查点尽可能模拟用户的数据一定要退出系统（logout）并发时加入同步点第二十一页，共三十八页，编辑于2023年，星期三修改调试脚本发现脚本中动态内容出现的位置并用变量进行替换替换的方式分为：创建数据池文件（txt、cvsordat）使用Central数据池—数据不能重复使用Local数据池—数据可循环使用通过ActiveData菜单插入变量值第二十二页，共三十八页，编辑于2023年，星期三运行测试用例并确定系统健康通过并发两个用户确定脚本的可并发性不能只进行一次测试（初始化、缓存、网络）配置选项（选择脚本、用户数、机器）执行测试查看执行状态（进度、错误信息）查看测试结果（数据是否正确、license）采集数据停止测试第二十三页，共三十八页，编辑于2023年，星期三监测后台资源网络访问方式、Agent方式、SNMP方式CPU内存磁盘网络第二十四页，共三十八页，编辑于2023年，星期三分析测试结果并制作报告收集相关信息进行数据统计分析寻找性能瓶颈响应时间是否满足要求事务响应时间随用户变化图有无剧烈变化套用效率测试模板第二十五页，共三十八页，编辑于2023年，星期三测试工具培训基础QALOADQALoad是进行性能测试，负载测试和强度测试的工具QALoad可以对应用负载测试一直达到应用最大并发用户数QALoad可以对应用进行强度测试，从而找到应用可承载的最大并发用户数QALoad可以测量应用的响应时间，给出应用的最终用户性能体验其它用途：系统优化，监测服务器资源，容量规划，基准性能指标，与其他工具结合获得更多的功能第二十六页，共三十八页，编辑于2023年，星期三QALOAD所支持的协议通信层Winsock,IIOP,WWW,WAP,NetLoad数据层ODBC,MSSQLServer,Oracle,OracleFormsServer,Sybase,DB2,ADO应用层SAP,Tuxedo,Uniface,QARun,JAVA第二十七页，共三十八页，编辑于2023年，星期三QALOAD体系结构

Workbench

PlayerMachines

Conductor

Analyze20vu’s50vu’s75vu’s

ApplicationUnderTestQALoad的三大组成组件第二十八页，共三十八页，编辑于2023年，星期三安装环境

Windows环境+最新的补丁IEJDKVisulstudio+补丁PDF阅读器第二十九页，共三十八页，编辑于2023年，星期三工具演示

录制脚本修改脚本设置测试场景运行测试脚本分析测试数据制作测试报告第三十页，共三十八页，编辑于2023年，星期三性能测试关注的主要指标响应时间并发或在线用户数吞吐量(应用和数据库)内存（Memory）磁盘（PhysicalDisk）处理器（Processor）网络第三十一页，共三十八页，编辑于2023年，星期三响应时间在某数据量的情况下，完成某功能模块所需要的时间第三十二页，共三十八页，编辑于2023年，星期三内存（Memory）CommittedBytesinUseAvailableBytesPageFaults/secPages/sec第三十三页，共三十八页，编辑于2023年，星期三磁盘（PhysicalDisk）DiskTimeIdleTimeAvg.DiskQueueLengthCurrentDiskQueueLength第三十四页，共三十八页，编辑于2023年，星期三处理器（Processor）ProcessorTimeUserTimeProcessorQueueLength第三十五页，共三十八页，编辑于2023年，星期三网络BytesTotal/secPackets/sec第三十六页，共三十八页，编辑于2023年，星期三回顾效率测试流程准备测试环境选择测试工具录制脚本并设计用例设计测试场景执行测试用例/