T-CRSS 0012-2023 服务机器人中文语音交互系统 性能测评方法

学兔兔ｗｗｗ．ｂｚｆｘｗ．ｃｏｍ标准下载

学兔兔ｗｗｗ．ｂｚｆｘｗ．ｃｏｍ标准下载

J28CRSS

T/CRSS

0012—2023服务机器人

中文语音交互系统性能测评方法

robots-Speech

interactive

重庆市机器人学会  发

布学兔ｗｗｗ．ｂｚｆｘｗ．ｃｏｍ标准兔下载学兔ｗｗｗ．ｂｚｆｘｗ．ｃｏｍ标准兔下载兔学兔ｗｗｗ．ｂｚｆｘｗ．ｃｏｍ标准下载T/CRSS

00122023兔学兔ｗｗｗ．ｂｚｆｘｗ．ｃｏｍ标准下载

10 10 10 10 10

12学兔兔ｗｗｗ．ｂｚｆｘｗ．ｃｏｍ标准下载T/CRSS

2023学兔兔ｗｗｗ．ｂｚｆｘｗ．ｃｏｍ标准下载 本文件按照

《标准化工作导则

限责任公司、重庆凯瑞认证服务有限公司、重庆三峡学院。洋、陈仕聪、谭泽富。II学兔兔ｗｗｗ．ｂｚｆｘｗ．ｃｏｍ标准下载T/CRSS

00122023学兔兔ｗｗｗ．ｂｚｆｘｗ．ｃｏｍ标准下载

3096-2008

36464.2-2018,3.1]

36464.2-2018,3.2]

21024-2007,3.1]

36464.2-2018,3.3]

code

speech

accuracy学兔兔ｗｗｗ．ｂｚｆｘｗ．ｃｏｍ标准下载T/CRSS

2023学兔兔ｗｗｗ．ｂｚｆｘｗ．ｃｏｍ标准下载

3.93.103.11

chat

response

speech

36464.2-2018,3.13]3.12

wakeup3.13

a)

b)

c)

d)

e)

a)

b)

c)

15~20cmd)

4870-1991

学兔兔ｗｗｗ．ｂｚｆｘｗ．ｃｏｍ标准下载T/CRSS

00122023学兔兔ｗｗｗ．ｂｚｆｘｗ．ｃｏｍ标准下载e)

误的发声波形截断无法理解声音、舌音、感叹等都属于误的，需让发声者f)

16bit

g)

h)

注1：82~392

64~523

123~493

注2：82~392

160~1200

123~493

220~1.1

a)

b)

音人员的择应在符系统对发人员限制条件下，可能选择有代表性统计分布律的发音员，特别考虑不同音、不同龄、不同速、不同育背景、同说话韵c)

20

d)

e)

于非特定的中文语交互系统特别应强对有一定音的中文应能力和文语调问

a)

b)

5sa)

b)

c)

d)

0.3se)

5.1

f)

噪声录制格式为

16bit

采样的

格式，录制的噪声幅度最大值不能超过

30000(g)

h)

i)

学兔兔ｗｗｗ．ｂｚｆｘｗ．ｃｏｍ标准下载T/CRSS

2023学兔兔ｗｗｗ．ｂｚｆｘｗ．ｃｏｍ标准下载用一实物建被设备际工时的用场景或被测备置实际作时使用景中常见家用服务机器人使用场景为客厅，模拟家居客厅环境参考：正常标准白墙房间（无异形，最好不超过30平方米）内布置大小方桌各一个，常见规整尺寸的沙发、电视柜、电视、落地空调、落地灯、装饰隔板、窗帘等等家具，家具大小尺寸样式无具体要求，尽量贴合真实客厅场景，房间所处位置的实际生活噪声不超过7.3.5的要求即可，无需再次叠加新的背景噪声。当被测设备带有智能家居控制功能时，应为其配置可被控制常见商用服务机器人使用场景为办事大厅、展览厅、会场等，可将待测机器人及测试设备带入实际场景中进

a)

个点声源扰只能用个音箱设播放，要虑点声源扰的距离角度，以点声源的b)

散场的背噪声一定用多个音设备同时放，比如间的四个角，分别置音箱，c)

外场景的声和室内景的噪声考虑混响比如要在音室模拟外的噪声景，且要d)

e)

声场景（器人本身声器播放又被麦克接收到的声）要考机器人本播放语音

50dB

80dB-

a)

30cm±5cmGB/T364641m1mb)

a)

b)

c)

d)

学兔兔ｗｗｗ．ｂｚｆｘｗ．ｃｏｍ标准下载T/CRSS

00122023学兔兔ｗｗｗ．ｂｚｆｘｗ．ｃｏｍ标准下载6.2.2）及其摆放高度，

a)

b)

c)

d)

a)

b)

a)

℃～40b)

c)

d)

75e)

f)

g)

除个别项目有单独的规定外，一般用扬声器或人工嘴播放测试语料次，在此过程中，测试人员可

7.5.1.1

7.5.1.2

7.5.2.1

学兔兔ｗｗｗ．ｂｚｆｘｗ．ｃｏｍ标准下载T/CRSS

2023学兔兔ｗｗｗ．ｂｚｆｘｗ．ｃｏｍ标准下载7.5.2.2

8.1

7.5.3.1

7.5.3.2

8.2

7.5.4.1

7.5.4.2

7.5.5.1

7.5.5.2

8.3APP7.5.5.3

........................ ｚｆ学兔兔ｗｗｗ．ｂｘｗ．ｃｏｍ标准下载T/CRSS

00122023ｚｆ学兔兔ｗｗｗ．ｂｘｗ．ｃｏｍ标准下载

7.5.6.1

7.5.6.2

7.5.7.1

7.5.7.2

7.5.8.1

7.5.8.2

a)

项目测试员应全程与过被测音交互系的其他所项目测试并具备服机器人测b)

其他所有目测试完后，多名试人员进综合判定以文字描的方式体在原始记

7.5.9.1

7.5.9.2

学兔兔ｗｗｗ．ｂｚｆｘｗ．ｃｏｍ标准下载T/CRSS

2023学兔兔ｗｗｗ．ｂｚｆｘｗ．ｃｏｍ标准下载男女测试人员各人，通过其他项目的语音反馈结果，测听合成语音同真人语音在音质、可懂度、8.4

a)

，能连续进行到相邻二轮对话记

b)

a)

分：优（聊天内容种类丰富且持续轮数多），

分：良（聊天持续轮数多），

分中（聊

b)

识别准确率90%以上分，识别准确率之间分，识别准确率之间分，识别准确60%不在打分范围内）进行打分，分：优（接近人类自然语音状态）；分：良（机械合成感不明显）；10评分标准

部理语义，并1545

确理语义，并的语进行回答为中国五岳之首峰玉皇顶海拔

1545

句式内容有错误

60本理语义，但漏字内容有误在山东省中部为中国五

1545

然与文化遗产，世界

5A

......

统基理解语义据库支持回答对用进行提示但我知道泰山在山东

有全理解语义不够效，语料

统没理解语义：你在说什么，我听．ｃｘｗｏｍ标准学兔兔ｗｗｗ．ｂｚｆ下载T/CR