论文部分内容阅读
随着科学技术的不断发展,多媒体系统已经成为人们日常生活、办公不可或缺的一部分。传统的多媒体系统操作复杂、灵活性差、可移植性差,已经不能满足人们的要求,寻求更加智能的多媒体控制系统已经成为关键。Kinect传感器的问世改变了传统的人机交互方式,使得交互手段更加灵活、自然,因此将Kinect传感器与多媒体技术相结合具有巨大的应用价值。本文从人脸识别和手势识别两个交互手段出发对多媒体教学演示系统进行研究,本文主要研究内容如下:首先,介绍了人机交互技术,并对教学演示系统的研究现状,人脸识别和手势识别的国内外研究现状分别进行介绍。总结了Kinect的硬件结构和相关参数,实现了彩色图像、深度图像、骨骼跟踪的数据采集。其次,构建基于Kinect的人脸识别系统。研究和实现了几种图像预处理的方法,对实时视频图像进行人脸检测和定位,采用主成分分析法对人脸进行识别,并给出自拍人脸数据库在不同光照条件下的识别效果,然后将人脸识别系统应用在教学演示系统中用于PPT文件的打开。再次,通过Kinect传感器对人体手势动作进行追踪,分析手势动作的特征,对手势运动轨迹进行提取,定义系统中使用的四种手势集,分析手势识别在不同光照条件和距离下的识别结果,将手势识别动作映射到键盘上用于PPT文件的智能控制。最后,对系统软件设计进行实现,给出自拍人脸数据库的建立和模型训练的文件创建,对手势识别前端界面进行设计,然后给出系统流程图并对系统整体进行实现,验证系统的可行性。