中国期刊库

教育   经济   科技   财会   管理   
医学   法学   文史   工业   建筑   
农学   水利   计算机   更多>>
 首 页   论文大全   论文精品   学术答疑   论文检测   出书咨询   服务流程   诚信通道   关于我们 

新式交互设备在人机交互技术课程中的应用

人气指数: 发布时间:2017-10-24 17:00  来源:http://www.zgqkk.com  作者:沈莹,张林
分享到:

 

  摘 要:人机交互是一门研究如何设计、评估和实现交互式系统及相关知识的学科。为了让学生深入了解新式的人机交互方式,在课程实践环节引入新式交互设备,学生对新设备表现出浓厚的兴趣,利用这些设备自行设计许多新颖的应用软件,开拓思路,增加开发经验,提高自学新知识的能力。文章对上述课程实践进行阐述。 
  关键词:人机交互;人机交互设备;新型交互设备;Kinect;Leap motion 
  1 背 景 
  人机交互(human-computer interaction)是一门研究如何设计、评估和实现交互式系统及相关知识的学科[1]。人机交互是计算机学科中的传统学科,从计算机诞生的第一天起,人们就在考虑如何设计出更好的人机交互方式。传统的鼠标键盘等交互设备已经不能满足用户的需求,人们希望能够高效便捷地对电脑进行操作,因此诞生了语音交互、手势交互和动作交互等新颖的交互技术。另外人机交互也不局限于某种单一的交互方式,而是多种交互方式并存,共同完成交互任务。 
  作为一门专业基础课,用户交互技术课程在教学内容上结合软件工程概念,目的在于培养学生理解用户交互界面设计的原则,掌握新式用户交互技术的原理,能够自行设计开发基于新式交互技术的应用程序,使学生在相关行业领域中具有更高的创新性和竞争性。传统的人机交互课程往往局限于介绍认知模型、设计界面元素等知识点,不能引导学生进行实例开发,更不要说接触日新月异的新式交互设备。为了让学生更加深刻地了解人机交互技术的最新进展,可以在课程中引入多种新式交互设备,包括Kinect、Leap motion、智能手表、VR设备等,并基于这些设备设计相应的实验和项目。 
  2 新式交互设备 
  人机交互方式经历了命令行交互阶段、图形用户界面交互阶段和自然和諧的交互阶段[2]。在命令行交互阶段,由于计算机价格昂贵、普及性不高,与计算机进行交互的是专业的程序员。随着硬件成本的降低,计算机进入了千家万户,面向普通用户的软件越来越多,命令行界面也逐渐发展为图形界面,并且界面上的交互元素种类日渐丰富和美观。由于图形界面易于理解,操作简单,因此目前这种交互形式占据了主导地位,成为使用各种软件的主要手段。 
  为了适应人们的娱乐、教育、购物及社交需求,许多新式交互设备开始崭露头角。这些设备彻底改变了传统的人机交互概念,现在我们可以通过手势、动作、语音等更自然的方式来操作计算机,这些提高了交互的效率,增加了交互的趣味性,最终使得人与计算机的关系变得更加紧密。新型交互设备的出现使得人机交互方式进入一个新阶段,为这门学科带来了新挑战。 
  新式交互设备可以分为体感互动设备、语音交互设备、可穿戴式设备、虚拟现实设备等。每种类型的设备包含的具体产品见表1。由于分类并不是相互独立的,因此某些设备会同时出现在不同分类中。 
  2.1 体感互动设备 
  Kinect是微软开发的Xbox360主机的周边设备。Kinect里安装了3个镜头,中间的镜头是RGB彩色摄像机,用来获取物体的彩色图像。左边镜头是红外线CMOS 摄影机,右边镜头是红外线发射器。这3个镜头配合工作可以采集到视场中物体的彩色信息和深度信息。Kinect附带的软件可以识别使用Kinect的玩家,最多能识别6个人。除此之外,Kinect还能获取人的全部关节(joint),从而得到玩家的骨架模型。另外,人的手部关节也一样能被识别出来(包括所有指尖和关节),因此,Kinect也可以作为手势识别的设备使用。 
  Kinect已从1.0版本升级到了2.0版本,目前主要作为参与游戏互动的工具,但是考虑到Kinect的强大功能,除游戏以外其他的应用(例如教育培训)也在利用它完成不同的功能需求。 
  Leap motion是一款体感控制器。它通过红外线追踪手部移动,并且准确识别出手指的各个关节和骨骼位置。Leap motion与Kinect类似,但是只能进行手势识别。通过Leap motion,用户可以通过双手动作来操作计算机。跟传统的鼠标键盘输入相比,Leap motion的使用显然更加自然有趣。 
  2.2 语音交互设备 
  随着深度学习的出现,语音识别算法的识别精度越来越高,最近在数据库上的测试甚至超过了人类水平,因此语音识别软件变得非常普及[3-4]。这种交互方式虽然不需要特殊的设备支持,但是仍有些新出现的语音交互设备值得关注。亚马逊最近推出了一个名为Echo的设备,用户可以将智能家居中的电器连上Echo,通过命令Echo完成对电器的自动化操作。另外前面介绍的Kinect除了包含深度相机外,还有一个语音识别装置,Kinect附带的驱动软件能够记录用户声音并且分析用户命令。 
  2.3 可穿戴式设备 
  由于可穿戴式设备体积小,使用简单,功能强大,它们受到了广大用户的青睐。目前最热门的产品要数智能手表,另外微软也推出了一款用于混合现实的眼镜Hololens。 
  无论是智能手表还是混合现实眼镜,可穿戴式设备的使用还是离不开动作交互和语音交互技术,因此这种新式交互设备实际是体感互动设备和语音交互设备的混合体。 
  2.4 虚拟现实设备 
  虚拟现实设备为用户构建出3D虚拟环境,用户通过操作手柄与虚拟环境互动。此类设备包括虚拟头盔、沉浸式虚拟现实系统(CAVE)等。虚拟头盔需要戴在用户头部,头盔里的目镜为用户投影3D虚拟环境,头盔内的运动感知装置捕捉用户头部运动,尤其是头部转动方向。CAVE利用立体投影构造出高级虚拟仿真环境,用户借助虚拟现实交互设备(例如数据手套、Google Glass、位置跟踪器等)获得身临其境的沉浸式感受。虚拟现实设备为用户提供了更加逼真的使用环境,使得用户体验更舒适。 
  3 新式交互设备在课程中的应用 
  为了将新式交互设备引入到用户交互技术课程中去,我们设计了3个课程实践项目让学生参与。整个课程采取“知识点教学+算法代码实现+实例开发”的形式[5]。课堂教学教授学生各种交互技术的基本算法,如手势识别算法、语音识别算法等。实验课上教师会提供学生以上算法的代码框架,要求学生进行代码修改,理解不同参数的意义,观察代码修改引起的识别效果的变化。最后,学生分组利用Kinect和Leap motion开发包或者语音识别开发平台进行项目实例开发,学会搭建基本环境,最终实现一个完整的系统。

  中国期刊库(http://www.zgqkk.com),是一个专门从事期刊推广、论文发表的网站。
  本站提供如何发表论文,寻求论文发表合作,快速发表论文,发表论文格式指导等解决方案:省级论文发表/国家级论文发表/核心期刊论文发表//职称论文发表。


  【免责声明】本文仅代表作者本人观点,与论文发表_期刊发表_中国期刊库专业期刊论文发表网站无关。论文发表_期刊发表_中国期刊库专业期刊论文发表网站站对文中陈述、观点判断保持中立,不对所包含内容的准确性、可靠性或完整性提供任何明示或暗示的保证。请读者仅作参考,并请自行承担全部责任。

 
QQ在线咨询
论文发表热线:
180-1501-6272
微信号咨询:
zgqkkcom
咨询电话:18015016272 投稿邮箱:zgqkk365#126.com(#换成@)
本站郑重声明:文章只代表作者观点, 并不意味着本站认同。所载文章、数据仅供参考,使用前请核实,风险自负。
部分作品系转载,版权归原作者或相应的机构  若某篇作品侵犯您的权利,请来信告知 
Copyright © 2002-2018 . 期刊库 版权所有