多通道交互景观混合现实系统的研究与实现文献综述
2020-04-07 16:08:12
文 献 综 述
前言:
人机交互的发展过程就是从人适应计算机到计算机不断适应人的发展过程。人机交互的发展经历了早期的手工作业阶段、作业控制语言及交互命令语言阶段、图形用户界面(GUI)阶段、网络用户界面阶段、多通道与多媒体的智能人机交互阶段。伴随着人机交互的发展,人机交互的输入与输出设备也在不断发展,从鼠标、键盘、手柄到触摸屏,再到现在的体感传感器。而体感交互技术又是目前人机交互技术中最为前沿和热门的领域之一,这其中基于微软kinect的应用开发却又最为广泛。有了”Kinect体感”,电脑从此以后就可以通过观察人的动作、聆听人的声音,来理解人的指令,更加自然地和人交流了。这种操作界面称为自然用户界面(NUI)。
一、系统开发的简介:
1、项目简介:
该系统主要有6个模块,分别是:视频分割、视频标注、语音驱动、手势、体态定位、触摸定位等模块。
2、国内外研究现状和趋势:
2.1 Kinect应用现状:
Kinect是一种3D体感摄影机,除了语音指令和体感操作指令外,Kinect没有其他形式的用户输入,其输入系统的关键是由麦克风和摄像头组成的感应器系统。Kinect”体感操作”带来了全新的用户体验和交互设计,用户体验、交互设计、创新技术是Kinect成功的三要素。其关键技术特性归纳为:骨骼跟踪、动作识别、人脸识别、语音识别。Kinect目前刚刚走出探索应用阶段,它使人机交互从二维世界扩展到三维空间,而且是进入到了非接触的交互体验(Touch-Free NUI),相信下一个5年将是”体感操作”自然人机交互的时代!
2.2Kinect研究趋势: