微软产品测试管理

微软软件测试陈宜微软全球技术中心

议程软件测试概述软件测试组测试计划和级别Bug的发现和管理I软件测试概述什么是软件测试测试的目的与任务软件质量的定义测试与软件成本测试部分常用术语什么是软件测试?质量保证--系统的监督和评估项目的各个方面以确保满足质量标准测试是分析并确定产品是否满足客户的需求和期望的所有活动测试的目的与任务目的--保证软件质量，确保产品满足设计的要求和客户的需求，同时降低软件的开发成本和维护成本，并最终签发(Signoff)产品质量任务根据特性规格说明制定测试计划开发必要的测试工具编写测试用例执行系统、全面、深入的测试，在开发过程中找出所有可能存在的Bug

跟踪并管理产品质量,定期报告质量状态负责最终的发布认可(Signoff)测试与软件成本成本–越早发现bug，修正的机会越大,开发和后期维护的代价越小Specreview编码阶段 Beta阶段本地化发布后质量越高，软件发布后维护费用越低部分常用术语QA-QualityAssurance质量保证Bug-缺陷，问题BlockingBugShowStopperBug/ReleaseKiller-致命问题Milestone-里程碑TestCase-测试用例StressTest-附压测试BVT-BuildVerificationTestAd-hoc测试-随机测试BuddyTestDogFoodZBB(ZeroBugBounce)ZBR(ZeroBugRelease)RTM/RTWII软件测试组微软测试组在整个项目中的位置与程序员的关系与程序经理的关系测试Team的主要职责测试组成员的职责微软测试组在整个项目中的位置和设计组,开发组及用户教育等并列的队伍测试组负责产品的质量控制测试人员和开发人员的比例大约是1：1沟通和联络后勤测试开发用户教育产品规划产品经理与程序员的关系测试组不是开发组的助手，合作又各司其职程序员不能写完代码扔过墙，等待测试工程师找到所有的BugRAID是桥梁对有分歧的Bug程序员不能擅自关闭测试人员对发现的Bug要尽可能提供详细的信息与程序经理的的关系没有隶属关系系，合作又各司其其职程序经理提供供详细的规格格说明程序经理要参参与Review测试计划测试人员要报报告测试状态态及产品状态态测试队伍的主主要职责测试队伍的组组成经理，组长，，测试工程师师主要职责测试计划测试测试过程项目与资源管管理交流与业务测试工程师的的主要责任创作相关的测测试计划和测测试用例设计或改编相相关的测试工工具识别可自动测测试的区域参与组内的测测试计划和测测试用例以及及测试脚本分分析工作手动／自动测测试Ad-Hoc测试按照需求规格格说明查证并并验证各项功功能发现并报告Bug，更踪Bug状态评估Bug对产品其它区区域的主要影影响。测试组长的主主要责任确定测试的策策略参与对整个产产品的完整测测试计划的制制定参与并管理测测试评估Bug对用户的影响响，推荐Work-Around.独立的跟踪关关键Bug的状态管理测试工作作和对应的资资源.参与面试新人人交流状态和存存在的问题，，并驱动问题题的解决促进组内的对对间接问题的的交流.测试经理的主主要责任定义时间进度度表定义质量标准准参加BugTriageSignoff产品品发起和计划长长期的测试过过程，使之规规范化积极开发测试试人员的技术术技能.组建测试队伍伍，雇用测试试工程师合理安排各种种资源.负责制定产品品测试所需的的预算III测测试计划和和级别测试计划的主主要内容测试级别测试计划的主主要内容2-1引言背景信息质量目标责任测试的方法论论测试计划的主主要内容2-2Milestone的处理测试文档自动测试策略略集成测试策略略API测试策策略性能测试Performance(Benchmark)Testing测试资源的规规划兼容测试AdHoc测试策略本地化测试策策略全球化测试策策略Beta策略ReleaseCriteria对第三方的依依赖测试周期：与与项目的里程程碑配合测试级别单元测试--针对单独代代码部分进行行的测试子程序简单函数组件测试--测试多个单单元和数据对对象间的互操操作性被调用的Subroutines,Data,etc.集成测试--测试集成组组件的互操作作性Exe和Dll系统测试--测试系统的的鲁棒性和与与外部系统的的交互性附压/性能测测试系统安装/应应用程序的兼兼容性CoffeeBreak!IVBug的发现现和管理什么是Bug及常见类型RAID/BMS有效地报告BugBug的严重程度和和优先级Bug的处理BugTriageActiveBug数量的趋势Bug及常常见类型功能未实现，，和规格说明明书不一致不能工作：死死机，没反应应不兼容边界条件界面、消息、、提示不够准准确，不友好好把尚未完成的的工作也作为为一个Bug文档与帮助信信息中的缺陷陷也是BugRAIDRAID是客户端的工工具，Bug数据库整个产品组的的中央记录和和控制丰富的查询功功能，有效地地跟踪项目的的状态，为产产品发布提供供判断标准准确的定义了了描述Bug要用到的属性性PostponedBug所有的记录无无法删除，对对于每个记录录只能一直添添加内容报告新Bug查寻并确认不不重复从标题开始可能查找多次次最后是查找Bug的描述部分如果找到类似似的Bug，检查是否需需要加入新的的注释。填写标题，简简明描述该问问题Bug记录中的有效效信息StatusAssignedToIssueTypeSeverityPriorityChangeDate，ChangeByOpenedDate,By,RevSource,BetaID,HowfoundLanguageResolution:Bydesign,Fixed,Duplicate,NotRepro,Won’tFixArea，，SubAreaPlatform附件附图报告新新Bug--环环境境描述系系统配配置，，如：：OS内存大大小处理器器类型型浏览器器类型型和版版本其他应应用程程序报告新新Bug--描描述述帮助开开发人人员再再现Bug..组成列出起起始参参数再现步步骤预期和和实际际的结结果已测试试的其其它有有用信信息一旦保保存所所用描描述信信息将将无法法修改改，只只能添添加Bug的的严重重程度度死机,数据据丢失失,主主要功功能组组完全全丧失失,系系统悬悬挂主要功功能丧丧失，，导致致严重重的问问题，，或致致命的的错误误声明明次要功功能丧丧失,不太太严重重,如如提示示信息息不太太准确确微小的的问题题,对对功能能几乎乎没有有影响响，产产品及及属性性仍可可使用用.如如有个个错别别字活Bug新建一一个Bug时的状状态BugRegression表明Bug等待待修正正评估开开发进进度产产品质质量的的重要要指标标处理Bug对Bug的处理理结果果必须重重新分分派给给报告告该Bug的人员员对修正正的Bug需要确确认标准的的处理理结果果：故意的的重复已修正正无法重重现延期修修正永不修修正外部解决/关闭闭BugBug的解决决方法法=故意的的重复无法重重现延期修修正永不修修正外部Bug的解决决方法法=已修正正BugregressionBug的的Triage何时TriageTriage成员主持:ProgramManager成员:PM/QA/Dev/LPM,Builderand经理.讨论,要求Fix的理由由Fix可能能带来的的风险险Fix要求被被拒绝绝时要要采取取的行行动ActiveBug数数量量的趋趋势代码完完成前前：很很少代码完完成后后：增增长很很快接近Beta:下下降接近RC:奔奔向零零产品质质量和和里程程碑的的信号号每天新新建的的Bug与修正正的Bug相比较较.Active状态Bug的总数数TesterRaidPMOthersBuilderDevSLMSrvBldSrvRlsSrvExchangePublicFolderABug’sLife—100%Raiddriven1.Fileabug2.Triagethebug3.Devinvestigatethebug4.AskCheckin5.Builderverifypermission6。OKcheckin7.Checkinbugfix8.Autosyncatnight9.Mgrdailybuilds10.PassBVT11.Mgrdailyreleases12.Testertoverifythefix,close/re-activatethebugaccordinglyFile/viewbugs回答问问题？？9、静静夜夜四四无无邻邻，，荒荒居居旧旧业业贫贫。。。。12月月-2212月月-22Thursday,December8,202210、雨雨中中黄黄叶叶树树，，灯灯下下白白头头人人。。。。15:31:2315:31:2315:3112/8/20223:31:23PM11、以以我我独独沈沈久久，，愧愧君君相相见见频频。。。。12月月-2215:31:2315:31Dec-2208-Dec-2212、故人江海海别，几度度隔山川。。。15:31:2315:31:2315:31Thursday,December8,202213、乍乍见见翻翻疑疑梦梦，，相相悲悲各各问问年年。。。。12月月-2212月月-2215:31:2315:31:23December8,202214、他乡生白白发，旧国国见青山。。。08十二二月20223:31:23下下午15:31:2312月-2215、比不了得就就不比，得不不到的就不要要。。。十二月223:31下下午12月-2215:31December8,202216、行动出成果果，工作出财财富。。2022/12/815:31:2315:31:2308December202217、做前，能够够环视四周；；做时，你只只能或者最好好沿着以脚为为起点的射线线向前。。3:31:23下午3:31下下午15:31:2312月-229、没没有有失失败败，，只只有有暂暂时时停停止止成成功功！！。。12月月-2212月月-22Thursday,December8,202210、很多事情努努力了未必有有结果，但是是不努力却什什么改变也没没有。。15:31:2315:31:2315:3112/8/20223:31:23PM11、成功就是日日复一日那一一点点小小努努力的积累。。。12月-2215:31:2315:31Dec-2208-Dec-2212、世间成成事，不不求其绝绝对圆满满，留一一份不足足，可得得无限完完美。。。15:31:2315:31:2315:31Thursday,December8,202213、不知香积寺寺，数里入云云峰。。12月-2212月-2215:31:2315:31:23December8,202214、意志坚强的的人能把世界界放在手中像像泥块一样任任意揉捏。08十二月月20223:31:23下午15:31:2312月-2215、楚塞塞三湘湘接，，荆门门九派派通。。。。。十二月月223:31下下午午12月月-2215:31December8,202216、少年年十五五二十十时，，步行行夺得得胡马马骑。。。2022/12/815:31:2415:31:2408December202217、空空山山新新雨雨后后，，天天气气晚晚来来秋秋。。。。3:31:24下下午午3:31下下午午15:31:2412月月-229、杨柳散和和风，青山山澹吾虑。。。12月-2212月-22Thursday,December8,202210、阅读一切切好书如同同和过去最最杰出的人人谈话。15:31:2415:31:2415:3112/8/20223:31:24PM11、越是没没有本领领的就越越加自命命不凡。。12月-2215:31:2415:31Dec-2208-Dec-2212、越是无能的的人，越喜欢欢挑剔别人的的错儿。15:31:2415:31:2415:31Thursday,December8,2022