可用性测试报告

1、如何进行可用性评估和研究报告框架什么是可用性评估？一一理解可用性 为什么要做评估？ 一一探明评估目标 评估哪些方面？一一确定评估指标 选择哪类评估？ 一一选择评估方法 评估前需要哪些准备？ 一 一评估准备 如何实施评估？一一评估实施 如何撰写评估报告？ 一一评估报告什么是可用性评估？一一理解可用性 可用性定义(ISO9241-11 ):产品在特定环境下特定用户用于特定用途时所具有的效果、效 率和用户主观满意度.如何开展可用性评估和研究"/> 500)this.width = 500;" /images/picError.gif" />为什么要做评估?探

2、明评估目标研究导向：证实与证伪产品导向：发现问题,改善设计为什么要做评估？ 一一研究导向我创造了一个全新的技术,我想知道用户对这个创新技术的反响,以确认它是否有价值.验证性评估我创造了一个可替代现有技术的新技术,我想知道它是否比现有技术更有价值(比照).比照性评估为什么要做评估？ 产品导向(1)战略上的目标1使我的产品所提供的功能用户真正想要和 想用,建立起清楚的产品定位.2使我的产品在同类产品中更具核心竞争力.功能是产品的核心价值, 当同类竞争产品之间的功能相差不大时,可用性和用户体验就升格为核心价值.Idea：可用性/用户体验是产品竞争的最后一座堡垒.3使我的用户满意我的产品 一一信赖我的

3、产品的品牌 一一成为我的产品的 骨灰级粉丝为什么要做评估？ 产品导向(2)具体目标(1)建立可用性标准对当前版本进行可用性评估,为下一版本的产品提供可用性标准.(2)限制开发本钱在开发周期的早期就能够发现设方t上的问题(原型测试)VS Coding的本钱非常高(3)降低开发风险等待产品发布后再获得用户的反响,风险太高(4)降低技术支持和维护本钱用户容易学习和使用产品,自然就很少打技术支持的热线 ,也无需太多的时间去维护产品(5)提升销售额好用的产品自然就会有良好的口碑,良好的口碑成就更高的销售额要评估哪些方面？ 一一确定评估指标自姆 可以蝴究 者操纵的变 量因谑：用户反响评牖林 反映因变鼬 用

4、户秘讹或 量化的教据学习朋 加遢费 翎出舔度 任务是否完成丸9 cijr£4 匕一日一 僚 口或 .T-间率裴 时频赏 作作错 珈而鸳总体肺效率珊弦果说才 对照局部的戳大?¥二忌衣 5清昏LLF学词随着自变醐 变化而姚的 用户行为何开展可用性评估和研究"/> 500)this.width = 500;" /images/picError.gif" />选择哪类评估？一一选择评估方法1、用户参与(1)比照实验：用户数：多组设计的可用性比拟；用户数：每组12人以上.2可用性观察测试：通过观察找出界面可用性问题,提出设计改良建议；可以是正

5、式的实验室观察,也可以是非正式的观察.用户数：2人以上,一般612人.2、用户不参与1启发式评估可用性专业人员根据已有的可用性原那么,对界面进行逐一评估2认知走查法可用性专业人员将自己 扮演成为用户,通过一定的任务对界面进行检查评估.3 GOMS模型预测4击键层模型预测选择哪类评估？一一选择评估方法评估方法的选择,取决于：1我的评估目标一一如前面所述研究导向：验证我的设计 Idea是否有利于用户观察测试等；比拟两个或多个设计Ideas比照实验产品导向：发现问题,改善设计观察测试、启发式评估、认知走查等；证实我的产品到达可用性目标观察测试、比照实验等2我希望获取的数据的类型量化数据比照实验质性数

6、据其他评估方法3我关于评估和与用户打交道的价值观念用户参与的评估评估前需要哪些准备？ 一 一评估准备、人员组成二、人员培训三、观察者安排四、测试方案五、测试任务设计六、招募测试用户评估前需要哪些准备？ 一一评估准备用户参与的评估一、人员组成一个可用性评估组中至少要有两位实施人员虽然一个人也可能完成可用性测试,但他/她必须是经过严格练习的可用性专家,必须能够即时处理所有的任务.他 /她需要：1照看好测试测试用户使所有测试用户都感觉良好并完成得比拟顺利观察测试中发生的事情,安排治理测试场景作为测试的促进者,并提出问题如果需要2观察时要做好笔记3如果你用了录音设备,还要照看好它们.所有这些,一个人难

7、以办到两人组成小组,有如下好处：1测试结束时,会有两种视角来看待测试结果2其中一人可以照看测试用户并坐在测试用户的旁边,另外一个人可以做记录,并照看好记录设备3两个人必须都可以观察测试用户并听到测试用户说话如果空间和人员足够, 还可以用更多的人参加可用性测试小组如工程经理、开发人员等小组中的成员都应该观察、聆听并作笔记.二、人员培训评估小组中至少有一个成员是可用性专业人员.所有的其他成员必须知道如何 ：1在可用性测试期间如何与用户进行沟通 2客观观察的方法3聆听用户真实意图的方法4将观察所看到的和所听到的与推论对观察做出假设和结论区别开来5有效地作笔记的方法6询问时,不引导或责备用户三、观察者

8、安排观察者：想亲眼目睹整个观察过程的任何相关人员还有哪些人需要对可用性测试进行观察？很多人.努力为这些观察者安排位置.1负责产品设计的团队应该过来,进行观察和聆听.2负责产品内容编辑的人员应该过来,进行观察和聆听.3那些对可用性工程表示过疑心或对你的用户知识技能分析表示过疑心的经理和治理者们应该过来,进行观察和聆听.4可用性测试是许多设计者、开发者、编辑和经理第一次看到真正的用户使用产品.这些人需要看到可用性测试这一真实过程.在典型的可用性测试中,你不想将超过一个以上的观察者与用户一起待在一个房间.因此,你需要为其他观察者安排另外的空间.可用性实验室中通常具有一个独立的房间,在这个房间里,观察

9、着可以通过单向玻璃或监视器来观察可用性测试过程.如果你把测试安排在一个会议室,你可以在隔壁为观察者搭建一个房间.你可以在观察室里放置影音设备,将将录像投到一个大监视器上.四、测试方案评估范围：我需要评估什么内容 ？评估指标：我关注想评估产品的哪些方面？测试用户：我应该请什么用户来参加测试？评估环境：在什么地方实施评估？在固定的实验室？会议室？或其他拥有可移动实验室的地方？在会议室或其他没有任何录音设备的地方？远程？评估预算：这次评估我大概要花多少钱？五、测试任务设计选择用户将要尝试的相关任务准备、试验并精炼为这些任务所设计的任务场景.注意：保证这些任务场景写得很清楚,在测试时间分配上比拟合理.

10、如果是比照实验,还需要考虑你的实验设计测试内设计、测试间设计、混合设计无关变量的消除与平衡顺序效应的平衡练习效应的消除满意度问卷六、招募测试用户招募那些当前的或潜在的用户来参加测试考虑请一个专门招募可用性测试的测试用户的公司来帮助招测试用户如果自己招募,可以建立一个用户库以便将来的测试之用.如何实施评估？一一评估实施预测试找找亲近的人、与测试用户背景相似的人或其他部门的人如人力资源部、会计部等过来,请他们帮助过来做预测试预测试用户一般2个人左右预测试能够帮助我们对评估的过程进行预演,从而找出我们在评估设计可能存在的问题或没有考虑到的情况,尽量减少在正式的评估中出现不愉快的或影响评估的客观性的或

11、不可预知的问题.检查软硬件是否有冲突任务描述是否有问题实验者的口头说明是否清楚实验者先自己测试,将任务完整过一遍.测试实施一、评估人员介绍测试的目的自我介绍姓名,称呼：*公司的研究人员所在机构和他的主要目标公司主要是做 可用性测试方面的介绍这次研究的目的该系统是否符合用户的使用方面的要求声明这个测试的对象是 / 软件,而不是用户本人声明他们的参与是完全自愿的,他们可以在任何时候要求停止提供知情同意书,请他们阅读,并要求他们签名,同时可收集用户的人口学、知识等信息.让用户参观测试设备,并解释每局部的功能,告诉他们将使用什么设备让用户了解将要对他们的声音和行为进行记录.保密声明,征求同意.二、出声

12、思维练习在做什么？看到了什么？怎么想的？有什么疑问？三、任务介绍用户使用系统之前尽可能告诉用户有关系统的信息告知用户任务.一次告知一个任务.任务描述页,同时口头上向他们表述.询问用户是否有关于研究目标、过程或任务的问题.答复这些问题,但是不能答复类似于 我该怎样做这项任务？ 的问题,如有用户问到,可以跟他们说：那正是我需要观察的情况,我想看看系统是怎样帮助你完成这个任务的.四、开始测试用户采用出声思维法完成任务.如果用户沉默5-10秒,告诉他 请一直说如果用户开始解释他们的步骤而不是报告工作记忆区的内容,先让其停止,然后说：靖不要向我解释你正在做什么.表现得就好似你一个人在解决问题时一样自言自

13、语.适时让用户休息五、结束测试答复那些现在就可以答复的问题,或让用询问用户是否还有更多的关于系统或研究的问题.户和可以答复这些问题的人联系.询问用户关于所测试产品的意见和改良建议.感谢用户的参与,重申他们的参与将帮助我们确定系统的问题,从而可以改良系统.用户不参与的评估：启发式评估评估准备人员组成人员培训评估过程一、人员组成要考虑用35个可用性专业人员如何开展可用性评估和研究"/>500)this.width = 500;" /images/picError.gif" />、人员培训 评估小组中所有成员均为可用性专业人员.所有的成员必须对可用性评估原那

14、么有一致的理解能够在一个显而易见的可用性范例中取得一致的评估检查到的问题、对问题的解释；设计建议可以不一致了解评估实施过程共同形成评估任务能够形成可用性专业人员评估的报告标准和呈现方式Jakob Nielsen的启发式原那么1.0 -约 1990简单而自然的对话采用用户的语言使用户的记忆负担减至最低一致性提供反响提供清楚的退出标志提供快捷方式提供良好的出错消息预防错误帮助和文档2.0 -约 1994美观和最小化设计系统和现实世界相匹配运用再认而不是回忆一致性和标准化系统状态可视化用户限制和自由度使用的灵活性和效率帮助用户识别、诊断、恢复错误 错误预防帮助和文档评估过程评估小组(最好3-5人)评估一个用户界面每个评估者根据启发式原那么独立地、依次地进行检查评估不同的评估者可能会发现不同的问题评估者聚在一起,合并他们的发现共同估计问题的严重性任务报告/头脑风暴如何修正该问题,指出哪种设计建议/解决方案比拟好如何撰写评估报告？一一评估报告评估报告的风格因不同的目标、不同的阅读对象而不同.通用工业标准可用性测试报告标准(CIF, ANSI/NCITS 354, 2001)标题页实施