小学 粤教（B版）信息技术 六年级 语音式人机交互 课件

1、语音式人机交互一、语音式人机交互实验分析二、创造工坊目录李老师，听说教师餐厅里的贩卖机只要对它说出你想要的饮品，它就能自动取出来，真是太厉害了！ 当然啦，语音式人机交互技术就是这么方便这么牛！一语音式人机交互实验分析语音式人机交互实验分析 目前通过语音实现的语音人机交互方式在生活中随处可见，例如语音助手，只需要说出语音指令就能够实现打开窗帘、打开电视、打开电灯等简单的操作，通过语音还能够和机器进行对话，控制机器人做一些简单的操作。读一读语音助手机器人小爱同学 小爱同学是小米公司应用在其手机和智能音箱等产品中的智能语音助手。通过小爱同学，不仅可以实现和智能设备的对话，还可以用语音的方式来设定闹钟

2、、提醒事项、拨打电话、查询天气情况、导航路线、播放音乐、查找美食、答疑解惑等等。语音式人机交互实验分析这节课我们学习语音式人机交互方式，首先需要了解语音式人机交互方式的实现过程，实现过程如下图所示。语音式人机交互实验分析 在这个实验中，人的大脑控制嘴巴发出的语音通过输入设备传递到硬件系统中，然后通过软件系统的处理，把处理结果通过喇叭反馈给我们的耳朵，机器人的运动过程反馈给我们的眼睛，这就是整个语音式人机交互的过程。语音式人机交互实验分析语音合成模块积木编程实验室输出设备，控制机器人抓取饮料语音输入设备1.1 语音合成模块 语音合成模块是一种能够模拟人发声的装置，它使用语音合成技术把文本转化成声

3、音，通过喇叭或者耳机播放出来。1.2 什么是语音合成 语音合成（Text-To-Speech，TTS）是通过机械的、电子的方法产生人造语音的技术，是人与计算机语音交互必不可少的模块，它能让机器人或者计算机程序把我们输入的文字“说”出来，把输入的任意文本转换成语音输出。 当前，人们使用机器学习的方法建立语音模型，再用大量的语音数据去训练语音模型，语音合成的质量越来越好，机器说话的声音更接近人声，语气语调也更加自然，例如小米的小爱同学和三星的 Bixby的发音。 语音合成技术1.2 什么是语音合成1.3 语音合成的应用 我们的生活中处处都有语音合成的身影，比如阅读听书、订单播报、语音导航等等。 阅

4、读听书语音导航仪1.4 语音合成模块指令在AI传感器套件中语音合成模块共有 6 个积木，如下图所示。1.4 语音合成模块指令积木块一的数字位置可以填写需要合成的语音的文本信息（注意：语音合成模块只能合成出中文语音，无法合成连贯的英文语音，如果输入英文就会逐个读出字母），语音合成模块只能连接控制器的 port2 端口。 积木块二的功能是设置合成的语音音量，音量的范围是 015。 1.4 语音合成模块指令积木块三的功能是设置语音合成模块播放的第几首音乐，一共有 15 首音乐可供选择。 积木块四的功能是设置语音合成模块播放的音效，一共有 8 种音效可供选择。1.4 语音合成模块指令积木块五的功能是设

5、置语音合成模块播放的提示音，一共有 25 种提示音可供选择。积木块六的功能是设置语音合成模块的状态，有播放、暂停、上一首音乐、下一首音乐可供选择。1.5 语音识别模块指令添加人工智能扩展模块，如图所示。1.5 语音识别模块指令 积木编程实验室中语音识别模块共三个积木，如图所示。可选择自动模式采集音频或手动模式采集。识别后的结果放在椭圆形的语音识别结果积木中，可用变量等显示出来，也可以判断字符是否包含需要的关键词。1.5 语音识别模块指令 在语音识别处点击“打开识别窗口”，测试语音识别结果，确定能正常采集语音并能正常识别语音，如图所示。试一试请同学们使用下列几个积木加上变量把语音识别的结果显示出

6、来。序号模块123二创造工坊2.1 实验室（1）任务发布任务 1：语音控制播放音乐。 （2）任务分析任务 1：在这个任务中，需要用语音识别模块识别人发出的语音指令，通过判断语音指令是否包含某些关键字来控制语音合成模块是否播放音乐。在播放音乐前会说出一段语音提示来告诉使用者。2.1 实验室任务 2：语音控制机器人抓取饮料（2）任务分析任务 2：在这个任务中使用语音识别模块，当语音识别模块识别到关键词“咖啡”时，语音合成模块播放声音“马上为您拿取咖啡”并控制机器人移动到摆放咖啡模型的位置，接着机器人带着抓取到的咖啡模型移动到放置位置，最后机器人把咖啡模型放置好，语音合成模块播放“请您饮用”。（饮料

7、模型和饮料模型放置的位置可以自己设定） （1）任务发布2.1 实验室（3）任务物品摆放图 任务2物品摆放参考图2.1 实验室（4）流程图根据任务分析，阅读“语音控制播放音乐”流程图，如图所示。 2.1 实验室（3）流程图根据任务分析，阅读“语音控制机器人抓取饮料”流程图，如图所示。 2.2 物料间USB Type-C接口线电源适配器机器人+末端工具语音合成模块4Pin连接线饮料模型控制器+线材2.3 接线室用 Type-C 接口线将控制器与电脑连接，用 10Pin 串口通信线将机器人与控制器连接，用 4Pin 电源线连接控制器与机器人。将语音合成模块连接在控制器的 Port2 端口，如图所示。 2.4 代码屋任务 1：语音控制播放音乐。 2.4 代码屋任务 2：语音控制机器人抓取饮料。 2.5 课堂展示展示你的程序吧！回顾什么是语音合成？2. 怎么使用语音合成模块？怎么使用