2023年通信公司测试指标表

序号,测试内容,评价规则,测试方式,类型说明,测试结论

1,话术配置,参选人具备话术可视化开发训练能力：,测试代表按甲方现场提供的话术模板配置话术，并上线。,否决项。,通过（）

,,可按现场提供的话术模板配置话术，实现话术可视化编辑及管理，可快速响应定制或修改机器人话术的需求，实现话术实时上线。,,未按话术模板配置，即否决。,未通过（）

2,提供打分报表,"根据甲方现场提供的号码进行外呼测试，累计接通率>=50%时（累计接通率=（累计接通号码量（需剔重）/号码总量）*100%），按要求提供外呼打分报表明细（报表须可展示每个用户的每个回访问题的打分结果，且具体到分值，并提供录音链接）。甲方测试组现场抽测10通有效通话录音（“有效通话”即：至少有一项打分的通话，未达到10通有效通话则全部测试），计算分值准确率。

分值准确率=（抽测的通话中系统准确识别的用户打分个数/抽测的通话中用户打分总数量）*100%。例如，抽测的10通电话中用户给20个问题进行了打分，经甲方测试组听取录音后判定系统准确识别了18个，则分值准确率为(18/20)*100%=90%。",测试代表发起外呼任务，外呼任务结束后，提供打分报表。,"否决项/评价项。

接通率<50%，或未按要求提供打分报表明细，或分值准确率低于75%，即否决。",通过（）

,,,,,未通过（）

,,,,,,

,,,,,接通率：

,,,,,分值准确率：

,,,,,按要求提供外呼打分报备明细：是□否□

3,线路资源,"现场可提供010及0551开头固话号码线路且均能拨通。

现场可提供010及0551开头固话号码线路且仅能拨通1条或提供其中1条上述号码线路且能拨通。",测试代表使用010、0551号码对甲方测试组的一位成员的手机号进行外呼（需在批量测试中实现），该评委可收到一通010外显的呼叫或0551外显的呼叫。注：需确认该评委手机号码未设置拦截。,"否决项/评价项。

010或0551号码均未提供，或提供至少1条上述号码线路且均未拨通，即否决。",通过（）

,,,,,未通过（）

,,,,,,

,,,,,A、现场可提供010及0551开头固话号码线路且均能拨通：

,,,,,是□否□

,,,,,B、现场可提供010及0551开头固话号码线路且仅能拨通1条或提供其中1条上述号码线路且能拨通：

,,,,,是□否□

,,,,,,

4,响应能力,根据甲方现场提供的测试口径和测试号码须在1个小时以内完成外呼任务（含话术配置、外呼策略配置、线路配置及提供打分报表）。,测试代表进行外呼任务，甲方测试组现场计时。,否决项。,通过（）

,,,,不满足要求，即否决。,未通过（）

5,外呼策略配置,参选人具备外呼策略可视化配置能力：,现场演示可视化配置界面。现场批量导入目标号码100个，设置外呼线路及外呼时段，遇忙音/关机等未接通情况时系统能自动立即再次拨打。,评价项。,A、可满足上述需求（）

,,可实现目标号码批量导入，并指定外呼线路（010或0551）及外呼时段，遇忙音/关机等未接通的情况时能按指定的时间窗口再次拨打。,,,B、不满足上述需求（）

6,外呼信息查询,现场外呼测试完成后对外呼信息进行查询。,测试代表登录系统演示外呼结果，并根据甲方测试组要求查询信息。,评价项。,A、可查看当前任务和历史任务信息，可根据外呼时间、外呼号码等信息查询外呼结果（）

,,,,,B、可查看当前任务和历史任务信息，但无法根据外呼时间、外呼号码等信息查询外呼结果（）

,,,,,C、无法提供外呼任务查询方式（）

7,并发保障,有高并发业务处理能力，具备500路及以上的并发处理能力，可以实时压测500路及以上。,测试代表演示系统实时并发情况。,评价项。,A、1000路及以上（）

,,,,,B、[500，1000)路（）

,,,,,C、500路以下（）

8,语音播报效果,可以根据业务场景需求支持定制特定音库，听取合成语音后凭主观印象评价。,测试代表现场拨测，定制多个场景的声音，甲方测试组进行评价。,评价项。,A、支持3个及以上音库，声音自然，和真人相识度高（）

,,,,,B、支持3个及以上音库，但声音生硬不自然（）

,,,,,C、支持3个以下音库（）

9,知识库功能,应答通用型的客户问题，比如:闲聊寒暄，身份质疑，可全部识别并有效回答。,测试代表现场拨测一次，并按指定话术进行询问，甲方测试组对机器人应答情况进行判断。,评价项。,A、应答通用型的客户问题，比如:闲聊寒暄，身份质疑，可全部识别并有效回答。（）

,,,,,B、测试过程中出现跳转错误（）

10,投诉意向识别,客户表现有投诉意愿时，系