第三章-测试设计和开发

1、1软软 件件 测测 试试 技技 术术2第三章第三章 测试设计和开发测试设计和开发3.1 测试设计流程3.2 总体设计3.3 开发测试用例3.4 评审测试用例33.1 测试设计流程测试设计流程 测试设计活动的输入是测试计划，测试计划应该说明将用到的方法和测试工作的范围。 测试设计活动的输出是将在系统测试和确认测试中使用的评审过的测试用例集合。43.2 总体设计总体设计定义设计目标定义设计目标清楚地说明每项测试的目标使每项测试的目的单一，可以对应到规格说明书中的一项需求 只说明测试将完成什么工作，而不是说明如何完成定义输入说明定义输入说明定义测试环境和配置定义测试环境和配置编写测试设计文挡编写测试

2、设计文挡53.3 开发测试用例开发测试用例 什么是测试用例？什么是测试用例？测试用例是为特定目标开发的测试输入、执行条件和预期结果的集合。 3.3.1 了解测试用例了解测试用例 什么是好的测试用例？什么是好的测试用例？好的测试用例应该容易发现软件错误。好的测试用例要有可重复性。好的测试用例必须清晰地定义一个或多个期望的结果和测试通过和失败标准。没有冗余。6 测试用例的作用测试用例的作用指导测试的实施 作为编写测试脚本的“设计规格说明书” 评估测试结果的度量基准 分析缺陷的标准7 什么是测试过程？什么是测试过程？IEEE将测试过程定义为“说明执行一系列测试用例的步骤。测试过程是为了评估一系列功能

3、而进行软件项分析的步骤” 。3.3.2 定义详细测试过程定义详细测试过程 测试用例和测试过程的区别？测试用例和测试过程的区别？测试过程是由一系列的测试用例组成的。 83.3.3 定义预期结果定义预期结果测试过程的每一步都需要明确预期的结果。步骤步骤动作动作预期结果预期结果通过通过/失败失败1在主菜单中单击“成绩输入”按钮显示成绩输入对话框2在成绩栏输入“101”显示错误信息“无效的成绩”3在成绩栏输入“-1”显示错误信息“无效的成绩”4在成绩栏输入“85”成绩显示为“85分”9 预期结果的来源：项目专家或其他方面的专家将知道如何确定输出结果用户文档可以包含一些用户场景范例需求文档也可以提供必要

4、的信息其他相关文档也可以提供相关线索最终用户也许能够描述所期望的响应结果10 测试用例文档由简介和测试用例两部分组成。简介部分描述了测试目的、测试范围、定义术语、参考文档、概述等。测试用例部分逐一列示各测试用例。 测试用例详细信息包括：用例编号、用例名称、测试等级、入口准则、验证步骤、期望结果、出口准则、注释等。3.3.4 测试用例内容测试用例内容11 最简单的测试用例也将包含：用例编号、输入、期望结果。 测试用例ID输入预期结果实际结果测试统计利率贷款期限(年)贷款金额(元)月支付总支付总利息月支付总支付总利息通过/失败测试日期测试人员TC-0018%3080000587.01TC-0028

5、.5%3080000615.13TC-0038.5%1580000787.7912 测试的一项基本原则是：被测试的系统始终应该处于一种已知的状态。因此测试用例往往需要说明初始条件。 说明 测试用例ID： TC-001 软件版本： 子系统： 用户名字段测试 操作系统： 测试人员姓名： 测试日期： 初始设置 1打开注册会话框 2在用户名字段放入字符“王” 3确保所有其他输入字段为空输入 1将光标置于用户名字段 2输入字符“帅”预期结果 用户名字段出现字符“王帅”实际结果 通过 失败13 如果没有测试用例或者仅有简单的测试功能描述，测试过程难以控制，测试结果将毫无可靠性可言。 简单的测试用例可靠性低

6、，重用性差，可能导致不同人员理解不同。 详细的测试用例可靠性高，而且便于估计执行所需时间，易于控制。3.3.5 测试用例参数化测试用例参数化14测试用例越详细越好？15 时间要求时间要求测试时间是否充足？ 执行者执行者测试执行者对系统的了解程度？ 建议程度建议程度将测试用例交给其他人执行时不需要过多的解释。16样例样例 登录登录需求：需求：用户名长度为6至10位（含6位和10位）用户名由字符（a-z、A-Z）和数字（0-9）组成不能为空、空格和特殊字符密码规则同用户名规则17简单简单能够正确处理用户登录一般一般 输入正确的用户名和口令可以进入系统 输入用户名或口令错误无法进入系统18详细详细操

7、作步骤操作步骤预期结果预期结果输入正确的用户名和口令（均为6位），点击OK按钮进入系统输入正确的用户名和口令（均为10位） ，点击OK按钮进入系统输入正确的用户名和口令（均为6至8位之间），进入系统用户名为空，提示输入用户名不能进入系统用户名为空格，提示无效用户名不能进入系统用户名小于6位，提示用户名太短不能进入系统19定义定义 参数化参数化是一个将测试数据与测试逻辑（步骤）分开，简化测试用例的过程；方式是将用例中的一些输入、输出等作为参数，数据则单独列出，在执行时选择相应的数据执行。20样例样例 登录登录步骤：步骤：1、输入2、输入3、点击OK按钮结果：结果：21测试数据（一）测试数据（一）

8、“用户名用户名”“口令口令”“预期结果预期结果”说明说明“user10”“pass10”进入系统正确的用户名和口令(6位)“user789”“pass789”进入系统正确的用户名和口令(7-9位)“user000010”“pass000010”进入系统正确的用户名和口令(10位)“”“pass”提示输入用户名不能进入系统用户名为空“空格”“pass”提示无效用户名不能进入系统用户名为空格UserUserpass提示用户名太短不能进入系统用户名小于6位user0000011userpass提示用户名太长不能进入系统用户名大于10位22为什么要参数化？为什么要参数化？没有将测试数据和测试逻辑分开的

9、测试用例可能显得非常庞大，不利于测试员理解，导致难以控制和执行；通过将用例参数化，可以简化用例，使测试用例逻辑清晰，数据与逻辑的关系明了，易于理解；有利于提高测试用例的复用性；23哪些内容需要参数化？哪些内容需要参数化？测试用例中需要通过使用不同数据来重复执行测试的部分；包括：输入（数据或操作等）输出（结果数据或预期结果等）24测试数据（二）测试数据（二）“用户名用户名”“口令口令” “预期结果预期结果”说明说明“user”“userpass”提示用户名太短不能进入系统用户名小于6位“user0000011” “userpass”提示用户名太长不能进入系统用户名大于10位253.3.6 白盒测

10、试用例设计白盒测试用例设计白盒测试作为结构测试方法，是按照程序内部的结构测试程序，对软件的过程性细节做细致的检查，测试人员利用程序内部的逻辑结构及有关信息，设计或选择测试用例。 2627u白盒法又称为逻辑覆盖法，其测试用例选择，是按照不同覆盖标准确定的。语语句句覆覆盖盖判判定定覆覆盖盖条条件件覆覆盖盖条条件件组组合合覆覆盖盖弱弱强强判判定定条条件件覆覆盖盖路路径径覆覆盖盖281 1、语句覆盖：、语句覆盖： 选择足够的测试用例，使得程序选择足够的测试用例，使得程序中每个语句至少都能被执行一次。中每个语句至少都能被执行一次。2 2、判定覆盖：、判定覆盖： 执行足够的测试用例，使得程序执行足够的测试

11、用例，使得程序中每个判定至少都获得一次中每个判定至少都获得一次“真真”值和值和“假假”值。值。3 3、条件覆盖：、条件覆盖：执行足够的测试用例，使得判定中执行足够的测试用例，使得判定中的每个条件获得各种可能的结果。的每个条件获得各种可能的结果。4 4、判定、判定/ /条件覆盖：条件覆盖： 执行足够的测试用例，使得执行足够的测试用例，使得判定中每个条件取到各种可能的值，并使每个判判定中每个条件取到各种可能的值，并使每个判定取到各种可能的结果。定取到各种可能的结果。白盒法常用的覆盖标准白盒法常用的覆盖标准295 5、条件组合覆盖：、条件组合覆盖： 执行足够的例子，使得每个执行足够的例子，使得每个判

12、定中条件的各种可能组合都至少出现一次。判定中条件的各种可能组合都至少出现一次。 6、路径覆盖：路径覆盖： 执行足够的例子，覆盖程序中所执行足够的例子，覆盖程序中所有可能的路径。有可能的路径。白盒法常用的覆盖标准白盒法常用的覆盖标准30白盒法步骤：白盒法步骤：例：用白盒法测试以下程序段：Procedure（VAR A，B，X：REAL）；BEGIN IF （A1) AND (B=0) THEN X:=X/A ; IF (A=2) OR (X1) THEN X:=X+1END;1 1）选择逻辑覆盖标准。）选择逻辑覆盖标准。2 2）按照覆盖标准列出所有情况。）按照覆盖标准列出所有情况。3 3）选择确

13、定测试用例。）选择确定测试用例。4 4）验证分析运行结果与预期结果。）验证分析运行结果与预期结果。逻辑结构逻辑结构31白盒法举例白盒法举例Procedure （VAR A,B,X:REAL）； BEGIN IF（A1) AND (B=0) THEN X:=X/A ; IF (A=2) OR (X1) THEN X:=X+1 END;A1ANDB=0X:=X/AA=2OR X1X:=X+1YNYN逻辑结构逻辑结构321、语句覆盖、语句覆盖使得程序中每个语句至使得程序中每个语句至少都能被执行一次。少都能被执行一次。A1ANDB=0X:=X/AA=2OR X1X:=X+1abcde满足语句覆盖的情况

14、：满足语句覆盖的情况： 执行路径：执行路径：aceace选择用例：选择用例：(2,0,4),(2,0,3)(2,0,4),(2,0,3) 用例格式：用例格式： 输入输入(A,B,X)(A,B,X)，输出，输出(A,B,X)(A,B,X)YNYN332、判定覆盖、判定覆盖使得程序中每个判定至少使得程序中每个判定至少为为TRUE TRUE 或或FALSEFALSE各一次。各一次。A1ANDB=0X:=X/AA=2OR X1X:=X+1abcde覆盖情况：覆盖情况：应执行路径应执行路径ace abd 或：或： acd abe选择用例选择用例(其一）：其一）： (2,0,4),(2,0,3) ace

15、(2,0,4),(2,0,3) ace (1,1,1),(1,1,1) abd (1,1,1),(1,1,1) abd (2,1,1),(2,1,2) abe (2,1,1),(2,1,2) abe (3,0,3),(3,1,1) acd (3,0,3),(3,1,1) acdYYNN343、条件覆盖、条件覆盖A1ANDB=0X:=X/AA=2OR X1X:=X+1abcde使得判定中的每个条件使得判定中的每个条件获得各种可能的结果。获得各种可能的结果。应满足以下覆盖情况：应满足以下覆盖情况：判定一判定一: A1, A1, B=0, B0判定二判定二: A=2, A2, X1, X1选择用例：

16、选择用例： (2,0,4),(2,0,3) (2,0,4),(2,0,3) (1,1,1),(1,1,1) (1,1,1),(1,1,1) NNYY2 2A1A20 0B=04 4X11 1A1A=21 1B01 1X1注意注意: :(1,0,3),(1,0,4)(1,0,3),(1,0,4)(2,1,1),(2,1,2)(2,1,1),(2,1,2)满足条件覆盖，但不满足判满足条件覆盖，但不满足判定定覆盖。覆盖。354、判定、判定/条件覆盖条件覆盖同时满足判断覆盖和条同时满足判断覆盖和条件覆盖。件覆盖。A1ANDB=0X:=X/AA=2OR X1X:=X+1abcde应满足以下覆盖情况：应满

17、足以下覆盖情况： 条件条件: A1, A1, B=0, B0 A=2, A2, X1, X1 应执行路径应执行路径ace abd 或：或： acd abe选择用例：选择用例： (2,0,4),(2,0,3) (2,0,4),(2,0,3)（ace)ace) (1,1,1),(1,1,1) (abd) (1,1,1),(1,1,1) (abd)YYNN365、条件组合覆盖、条件组合覆盖使得每个判定中条件的各种使得每个判定中条件的各种可能组合都至少出现一次。可能组合都至少出现一次。A1X:=X/AA=2X:=X+1abcdeB=0X1YNYNYNYN编译系统下的执行情况：编译系统下的执行情况：部分

18、路径未被执行。部分路径未被执行。满足以下覆盖情况：满足以下覆盖情况： A1, B =0 A1, B0 A1, B =0 A1, B0 A=2, X1 A=2, X1 A2, X1 A2, X1选择用例：选择用例：(2,0,4),(2,0,3) (2,0,4),(2,0,3) ace(2,1,1),(2,1,2) (2,1,1),(2,1,2) abe (1,0,3),(1,0,4) (1,0,3),(1,0,4) abd(1,1,1),(1,1,1) (1,1,1),(1,1,1) abe376、路径覆盖、路径覆盖覆盖程序中所有可能的路径覆盖程序中所有可能的路径A1ANDB=0X:=X/AA=

19、2OR X1X:=X+1abcdeYYNNA B X覆盖路径2 0 31 0 12 1 13 0 1a c e a b da b e a c d38语句覆盖语句覆盖判定覆盖判定覆盖 条件覆盖条件覆盖 判定判定-条件覆盖条件覆盖 条件组合覆盖条件组合覆盖 路径覆盖路径覆盖用例覆盖程度用例设计容易度39等等价价分分类类法法边边值值分分析析法法错错误误推推测测法法因因果果图图法法3.3.7 黑盒测试用例设计黑盒测试用例设计黑盒测试不考虑程序的内部结构与特性，只根据程序功能或程序的外部特性设计测试用例。判判定定表表法法场场景景法法401、等价分类法、等价分类法基本思想：根据程序的I/O特性，将程序的定

20、义域划分为有限个等价区段 “等价类”，从等价类中选择出的用例，具有“代表性”。 等价类分为： 有效等价类 对于程序的规格说明是合理的、有意义的输入数据构成的集合。 无效等价类 对于程序的规格说明，是不合理的，是没有意义的输入数据构成的集合。41 应应按照输入条件按照输入条件（如输入值的范围，值的个数，值的集合，输入（如输入值的范围，值的个数，值的集合，输入条件必须如何）划分为有效等价类和无效等价类。条件必须如何）划分为有效等价类和无效等价类。例如：每个学生可选修例如：每个学生可选修1-31-3门课程门课程 可以划分一个有效等价类：选修可以划分一个有效等价类：选修1-31-3门课程。门课程。 可

21、以划分两个无效等价类：未选修课，选修课超过可以划分两个无效等价类：未选修课，选修课超过3 3门。门。又如：标识符的第一个字符必须是字母。又如：标识符的第一个字符必须是字母。 可以划分为一个有效等价类：第一个字符是字母。可以划分为一个有效等价类：第一个字符是字母。 可以划分一个无效等价类：第一个字符不是字母。可以划分一个无效等价类：第一个字符不是字母。 A A、为每个等价类编号；为每个等价类编号；B B、使一个测试用例尽可能覆盖多个有效等价类使一个测试用例尽可能覆盖多个有效等价类C C、特别要注意的是：一个测试用例只能覆盖一个无效等价类。特别要注意的是：一个测试用例只能覆盖一个无效等价类。等价分

22、类法步骤等价分类法步骤422、边值分析法、边值分析法 基本思想： 选择等价类的边缘值作为测试用例，让每个等价类的边界都得到测试，选择测试用例既考虑输入亦考虑输出。 分析步骤： A、先划分等价类。 B、选择测试用例，测试等价类边界。 边界选择原则： A、按照输入值范围的边界。 B、按照输入/输出值个数的边界。 C、输出值域的边界。 D、输入/输出有序集的边界。43按照输入值范围的边界。 例如：输入值的范围是-1.0至1.0，则可选择用例 1.0、1.0、-1.001、1.001。按照输入/输出值个数的边界。 例如：输入文件可有1-255个记录，则 设计用例：文件的记录数为 0个、1个、255个、

23、256个。输出值域的边界。 例如：检索文献摘要，最多4篇。设计用例：可检索0篇、1篇、4篇，和5篇（错误）。 D、输入/输出有序集（如顺序文件、线性表）的边界。 应选择第一个元素和最后一个元素。边值分析法举例边值分析法举例边界值分析的基本思想边界值分析的基本思想 边界值分析的基本思想是：使用在最小值、略高于最小值、正常值、略低于最大值和最大值处取输入变量值；每个边界都要作为测试条件。边界值分析方法选择测试用例原则边界值分析方法选择测试用例原则(1)如果输入条件规定了值的范围,则应该取上点、离点、内点作为输入数据。1.2m1.4m边界值边界值 离点、上点、内点离点、上点、内点 内点：域内得任意点

24、都是内点。 上点：就是指得边界上得点，无论此时得域是开区间还是闭区间，上点就是域的上限与下限值。 离点：指得就是离上点最近的点，这里就跟是闭区间还是开区间就有关系了，如果是开区间，那么离点就在域内，如果是闭区间，那么离点就在域外。(开内闭外)1,101,10上点110离点内点( (1,101,10) )上点110离点内点1,101,10) )上点110离点内点练习练习5,305,30) )上点530离点内点51黑盒法应用实例（一）黑盒法应用实例（一）例 某某FORTRAN编译系统的设计和程序编写工作已经完成，现需编译系统的设计和程序编写工作已经完成，现需对对DIMENSION语句的实现设计测试

25、用例。已知语句的实现设计测试用例。已知DIMENSION语句语句的语法规则是：的语法规则是： DIMENSION语句用以规定数组的维数。语句用以规定数组的维数。 形式为：形式为：DIMENSION AD；AD 其中，其中，AD是数组描述符，其形式为是数组描述符，其形式为 n( d ,d ) 其中，其中，n是数组名，由是数组名，由1-6个字母或数字组成。为首的必须是字个字母或数字组成。为首的必须是字母；母；d是维数说明符，数组维数最大为是维数说明符，数组维数最大为7，最小为，最小为1，它的形式为，它的形式为 lb: ub lb和和ub分别表示数组下界和上界，均为分别表示数组下界和上界，均为-65

26、534至至65535之间之间的整数，也可是整型变量名（但不可是数组元素名）。若未规定的整数，也可是整型变量名（但不可是数组元素名）。若未规定lb，则认为其值为则认为其值为1，且，且ub=lb。若已规定了若已规定了lb，则它可为负数、零或则它可为负数、零或正数。正数。DIMENSION语句也和其他语句一样，可连续写多行。（以语句也和其他语句一样，可连续写多行。（以上规则中，上规则中， 内为任选项，小写字母代表语法单位，内为任选项，小写字母代表语法单位，表示它前面表示它前面的项可重复出现多次。）的项可重复出现多次。）52FORTRAN语言的语言的DIMENSION语句语句ADDIMENSION A

27、LPHA(2:5, 3:10),BETA(-4:4, 1:7), n dd d = lb: ub1617-6553465535 字符数 维数 界值53解解第一步第一步 确定输入条件，列出等价类表确定输入条件，列出等价类表输入条件有效等价类无效等价类数组描述符个数数组描述符个数数组名长度数组名长度数组名构成数组名构成数组名以字母开头数组名以字母开头数组维数数组维数上界是上界是整型变量名整型变量名整型变量以字母开头整型变量以字母开头上下界取值上下界取值是否定义下界是否定义下界上界对下界关系上界对下界关系下界定义为下界定义为下界是下界是语句多于一行语句多于一行1 （1），），1（2）16（4）有字母

28、（有字母（7），有数字（），有数字（8）是（是（10）17(12)常数（常数（15）整型变量（）整型变量（16）有字母（有字母（19）有数字（）有数字（20）是（是（22）-6553465535（24）是（是（27），否（），否（28）（29），），=（30）负数负数(32)，0(33)，正数，正数(34)常数（常数（35），整型变量），整型变量（36）是（是（39），不是（），不是（40）无数组描述符（无数组描述符（3）0（5），），6（6）有其它字符（有其它字符（9）不是（不是（11）0（13），），7（14）数组元素名数组元素名(17)，其它（，其它（18）其它（其它（21）不是（不是（

29、23）65535 （26）500500=500500500，状态为已过期重要级别中预置条件无输入501操作步骤输入金额：501选择已过期单击确定按钮预期输出批准单、提货单和通知单都不发出测试用例测试用例282测试用例编号TC_003测试项目订购单的检查测试标题金额=500，状态为已过期重要级别中预置条件无输入499操作步骤输入金额：499选择已过期单击确定按钮预期输出发出批准单、提货单和通知单测试用例测试用例3场景法我们申请一个项目，需先提交审批单据，再由部门经理审批，审核通过后由总经理来最终审批，如果部门经理审核不通过，就直接退回.每个事件触发时的情景便形成了场景。而同一事件不同的触发顺序和

30、处理结果形成事件流。通过运用场景来对系统的功能点或业务流程进行描述，从而提高测试效果。场景法一般包含基本流和备选流，从一个流程开始，通过描述经过的路径来确定过程，经过遍历所有的基本流和备选流来完成整个场景。3相关概念基本流：采用直黑线表示，是经过用例的最简单的路径（无任何差错，程序从开始直接执行到结束）备选流：用不同的彩色表示，一个备选流可能从基本流开始，在某个特定条件下执行，然后重新加入基本流中（如备选流1和备选流3）；也可能起源于另一个备选流（如备选流2），或者终止用例而不再重新加入到某个流（如备选流2和备选流4）。4场景法场景如下：场景1：基本流；场景2：基本流，备选流1；场景3：基本流

31、，备选流1，备选流2；场景4：基本流，备选流3；场景5：基本流，备选流3，备选流1；场景6：基本流，备选流3，备选流1，备选流2；场景7：基本流，备选流4；场景8：基本流，备选流3，备选流4；5例如银行例如银行ATM的取款操作，一般的使的取款操作，一般的使用场景：用场景：用户插入有效银行卡输入正确密码输入取款金额ATM机吐钱退卡8687基本流输入银行卡号，输入密码，输入取款金额，ATM机吐钱，退卡备选流1银行卡号无效备选流2密码错误备选流3银行卡账户余额不足备选流4ATM机内现金不足ATM机取款模块的业务流机取款模块的业务流88场景1：成功提款基本流场景2：账户不存在/账户信息有误基本流备选流

32、1场景3：密码输入有误（还有输入机会）基本流备选流2场景4：密码输入有误（没有输入机会）基本流备选流2场景5：账户余额不足基本流备选流3场景6：ATM机内现金不足基本流备选流4ATM机取款模块的测试场景机取款模块的测试场景89ID场景/条件帐号密码输入金额账面金额ATM机内金额预期结果1场景1：成功提款VVVVV成功提款，账户余额被更新为400元2场景2：帐号不存在/账户信息有误In/an/an/an/a提示银行卡账户错误，操作终止3场景3：密码输入错误（还有输入机会）VIn/an/an/a提示密码错误，请重新输入4场景4：密码输入错误（没有输入机会）VIn/an/an/a提示密码连续输入错误

33、，ATM机吞卡5场景5：用户帐号余额不足VVVIV提示取款账面金额不足，重新输入取款金额6场景6：ATM机内现金不足VVVVI提示ATM机内金额不足，重新输入取款金额ATM机取款模块的测试用例机取款模块的测试用例90ID场景/条件帐号密码输入金额账面金额ATM机内金额预期结果1场景1：成功提款95588012012314536781234561005005000成功提款，账户余额被更新为400元2场景2：帐号不存在/账户信息有误12345556666734n/an/an/an/a提示银行卡账户错误，操作终止3场景3：密码输入错误（还有输入机会）955880120123145367811111n

34、/an/an/a提示密码错误，请重新输入4场景4：密码输入错误（没有输入机会）9558801201231453678654321n/an/an/a提示密码连续输入错误，ATM机吞卡5场景5：用户帐号余额不足955880120123145367812345610005005000提示取款账面金额不足，重新输入取款金额6场景6：ATM机内现金不足955880120123145367812345610005000500提示ATM机内金额不足，重新输入取款金额ATM机取款模块的测试数据机取款模块的测试数据913.3.8 黑盒测试与白盒测试比较黑盒测试与白盒测试比较 黑盒测试主要是为了发现以下几类错误：是否有不正