人机交互技术及其应用(科普)

人机交互技术及其应用(科普)人机交互技术及其应用（科普）信息技术的高速发展对人类生产、生活带来了广泛而深刻的影响。高科技成果为人们带来便捷、快乐的同时，也促进着人机交互技术的发展。作为信息技术的重要内容，人机交互技术比计算机硬件和软件技术的发展要滞后许多，已成为人类运用信息技术深入探索和认识客观世界的瓶颈。因此，人机交互技术已成为21世纪信息领域亟需解决的重大课题和当前信息产业竞争的一个焦点，世界各国都将人机交互技术作为重点研究的一项关键技术，例如，在美国21世纪信息技术计划中，将软件、人机交互、网络、高性能计算列为基础研究内容，美国国防关键技术计划也把人机交互列为软件技术发展的重要内容之一，在我国的“863”、“973”和自然科学基金等项目中，也将人机自然交互理论与方法作为信息技术中需要解决的关键科学问题。人机交互的概念人机交互（Human-ComputerInteraction，HCI）是关于设计、评价和实现供人们使用的交互式计算机系统，且围绕这些方面主要现象进行研究的科学，狭义的讲，人机交互技术主要是研究人与计算机之间的信息交换，它主要包括人到计算机和计算机到人的信息交换两部分。人们可以借助键盘、鼠标、操纵杆、数据服装、眼动跟踪器、位置跟踪器、数据手套、压力笔等设备，用手、脚、声音、姿势或身体的动作、眼睛甚至脑电波等向计算机传递信息，同时，计算机通过打印机、绘图仪、显示器、头盔式显示器、音箱等输出或显示设备给人提供信息。人机交互与计算机科学、人机工程学、多媒体技术和虚拟现实技术、心理学、认知科学和社会学以及人类学等诸多学科领域有密切的联系，其中，认知心理学与人机工程学是人机交互技术的理论基础，而多媒体技术和虚拟现实技术与人机交互技术相互交叉和渗透。作为是信息技术的一个重要组成部分，人机交互将继续对信息技术的发展产生巨大的影响。人机交互的研究内容人机交互的研究内容十分广泛，涵盖了建模、设计、评估等理论和方法以及在移动计算、虚拟现实等方面的应用研究与开发，在此列出几个主要的方向：人机交互界面表示模型与设计方法（ModelandMethodology）一个交互界面的好坏，直接影响到软件开发的成败。友好人机交互界面的开发离不开好的交互模型与设计方法。因此，研究人机交互界面的表示模型与设计方法，是人机交互的重要研究内容之一。可用性分析与评估（UsabilityandEvaluation）可用性是人机交互系统的重要内容，它关系到人机交互能否达到用户期待的目标，以及实现这一目标的效率与便捷性。人机交互系统的可用性分析与评估的研究主要涉及到支持可用性的设计原则和可用性的评估方法等。多通道交互技术（Multi-Modal）在多通道交互中，用户可以使用语音、手势、眼神、表情等自然的交互方式与计算机系统进行通信。多通道交互主要研究多通道交互界面的表示模型、多通道交互界面的评估方法以及多通道信息的融合等。其中，多通道整合是多通道用户界面研究的重点和难点。认知与智能用户界面（RecognitionandIntelligentUserInterface）智能用户界面（IntelligentUserInterface，IUI）的最终目标是使人机交互和人－人交互一样自然、方便。上下文感知、眼动跟踪、手势识别、三维输入、语音识别、表情识别、手写识别、自然语言理解等都是认知与智能用户界面需要解决的重要问题。虚拟环境（VirtualEnvironment）中的人机交互“以人为本”的、自然和谐的人机交互理论和方法是虚拟现实的主要研究内容之一。通过研究视觉、听觉、触觉等多通道信息融合的理论和方法、协同交互技术以及三维交互技术等，建立具有高度真实感的虚拟环境，使人产生“身临其境”的感觉。移动界面设计（MobileandUbicomp）移动计算（MobileComputing）、普适计算（UbiquitousComputing）等对人机交互技术提出了更高的要求，面向移动应用的界面设计问题已成为人机交互技术研究的一个重要应用领域。针对移动设备的便携性、位置不固定性和计算（1）手语识别和合成中国科学院计算所研制成功了基于多功能感知的中国手语识别与合成系统，它采用数据手套可识别大词汇量（5177个）的手语词。该系统建立了中国手语词库。对于给定文本句子(可由正常人话语转换而成)，自动合成相应的人体运动数据。最后用计算机人体动画技术，将运动数据应用于虚拟人，由虚拟人完成合成的手语运动。它可输出大词汇量的手语词，为中国聋哑人的教育、生活提供了有用的辅助工具，使他们用手语与正常人的交流成为可能。（2）手势遥控器澳大利亚、台湾、日本的一些科学家和公司已经发明了手势遥控装置，能够使用简单的手势进行家用电器，如电视、DVD、音响等的操作，进行开关、音量调节、换频道等。例如，握紧拳头表示“开始”，将手掌舒展开表示“开机”，用Ｖ字形手势，再将手掌横过来表示“选择频道”，翘起大拇指则表示“向上调频道”等。日本松下公司已经试制了电视机用手势输入遥控器，遥控器在功能上类似于游戏手柄，用户拿着它通过挥动就可实现对3D电视的控制。种手势装置的工作原理并不复杂，用户将内置有摄像头的遥控装置安装在与电视和使用者均无视线阻隔的书架或桌子上即可，装置内的软件可识别用户事先储存的简单手势，然后向一个可操控多种电器的遥控器发出信号，最终电器将按照使用者手势“行事”。（3）教育领域：人机交互技术在教育领域的应用正在兴起，特别是基于人手的交互应用，如虚拟白板，虚拟实验，以及方便课堂教学的其他应用，例如腾讯的QQ手势达人，它可以通过普通摄像头来进行手势控制，抛弃了从电脑诞生之日起就一直使用的键盘和鼠标，完全由手势控制PPT的演示，提供了PPT的启动播放、上翻页、下翻页、结束播放等四个常用手势命令。（4）游戏控制：该类应用主要是通过对手势的识别进行游戏的控制，例如基于微软Kinect的体感游戏控制等。（5）医学领域应用外科手术操作学习/模拟可以通过构建“手眼协调、实时交互、双手操作”的虚拟现实系统提供通用的医学外科手术模拟与操作学习。这些技术将可以用到需要双手协同、手眼协调的各类精细操作任务中，例如医疗领域的牙科手术、腹腔镜微创手术、眼科手术等，当然也可以还可以用到军事、航天等训练领域。这样可以节约学习成本，提高学习的效率与准确性。人手运动功能虚拟康复依据康复医学发展的需要和趋势，可以将触觉人机交互技术与人手运动功能相结合进行人手虚拟康复。例如，可以将具有力反馈功能的、能够提供主动运动、被动运动、助力运动和阻抗运动等多种康复训练模式的人手康复交互装置的设计理论和方法与传感器进行集成，对人手运动技能进行建模，模拟人手虚拟康复，从而通过视频捕获病人的人手运动，进行康复监督和建议。（5）工业领域：虚拟制造与设计在工业领域，可以通过基于人手的人机交互进行虚拟装配、产品设计等工作，从而可以节约成本，提高熟练度和便利。（6）商业领域：包括娱乐产品设计，商业展览，交互式橱窗，KTV点歌等领域都可以通过基于人手的交互设计提高互动性和新颖性、便利性。例如，非接触式互动橱窗，该个系统有四个摄像头，两个用于追踪手部的动作，两个用来追踪脸部和眼睛。经过该橱窗的行人，可以通过手势来获取商品信息人机交互的未来在人机交互领域，更加大胆的创新精神正在被唤醒，视频捕捉技术、语音识别技术、红外遥感技术、多通道等等技术的整合发展，必然给人机交互技术的带来前所未有的突破。新的技术层出不穷，人机交互技术的发展将带给人们更多的科技技术的期盼和惊喜。在未来的计算机系统中，将更加强调“以人为本”、“自然、和谐”的交互方式，以实现人机高效合作。概括的讲，新一代的人机交互技术的发展将主要围绕以下几个方面：1.集成化：人机交互将呈现出多样化、多通道交互的特点。桌面和非桌面界面，可见和不可见界面，二维与三维输入，直接与间接操纵，语音、手势、表情、眼动、唇动、头动、肢体姿势、触觉、嗅觉、味觉以及键盘、鼠标等交互手段将集成在一起，是新一代自然、高效的交互技术的一个发展方向。2.网络化：无线互联网、移动通信网的快速发展，对人机交互技术提出了更高的要求。新一代的人机交互技术需要考虑在不同设备、不同网络、不同平台之间的无缝过渡和扩展，支持人们通过跨地域的网络（有线与无线、电信网与互联网等）在世界上任何地方用多种简单的自然方式进行人机交互，而且包括支持多个用户之间以协作的方式进行交互。另外，网格技术的发展也为人机交互技术的发展提供了很好的机遇。3.智能化：目前，用户使用键盘和鼠标等设备进行的交互输入都是精确的输入，但人们的动作或思想等往往并不很精确，人类语言本身也具有高度模糊性，人们在生活中常常习惯于使用大量的非精确的信息交流。因此，在人机交互中，使计算机更好地自动捕捉人的姿