基于全景环带成像系统的增强现实和表情识别学习系统研究

来源 :浙江大学 | 被引量 : 0次 | 上传用户:weizai111
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
增强现实将虚拟场景与真实场景融合在一起。真实场景提供视觉、触觉和声音的体验,虚拟场景提供更加形象的动画和音效。因此,将增强现实应用在学习领域,可以提高学习的兴趣。但现有学习领域的增强现实系统缺少对学习状态的监督。这是由于相机的视场角有限,无法同时拍摄用户,难以获得用户的状态。全景环带成像系统可以解决这个问题。本文对基于全景环带成像系统的增强现实和表情识别学习系统进行研究,最终提出相应的解决方案。本文首先在研究全景环带成像系统模型和相关标定技术的基础上,实现原始图像的插值展开。系统通过SURF特征提取和基于欧氏距离的特征匹配实现基于自然特征的三维注册功能。匹配过程采用KD-TREE优化算法提高匹配速度,并通过RANSAC算法筛选出高质量的匹配点,减少误匹配。之后根据图像的匹配结果,计算三维虚拟模型到二维图像的投影变换。最后通过键盘和鼠标进行交互。系统通过AdaBoost和MTCNN神经网络实现人脸检测,通过SVM和卷积神经网络实现表情识别,最后根据识别结果进行语音交互实现学习状态的监督。该方法使用全景环带成像系统,结合深度学习和SURF算法,解决了传统增强现实中相机视场小的问题。引入人脸检测和人脸表情识别则提供了更多的交互和监督方式。
其他文献
随着时代的发展,纪录片的探索不断创新。纪录片作为视听媒体,具有社会和文化传播功能,创作者使用纪录片来展示社会现实的意义。人物纪录片是纪录片的重要分支,人物纪录片以“人物”为基础来传达创作者的表达意图。因此,本文以笔者的毕业设计《山叁子》为例,来进行对于人物纪录片拍摄的探索与分析。梳理人物纪录片的拍摄方法,阐述人物纪录片的研究背景和意义。探讨纪录片中故事的叙事模式,人物情感表达的重要意义等创作途径。
随着电子信息技术的不断发展,互联网在社会生活中所发挥的作用日益重要。然而,随之而来的网络安全问题层见叠出。国家、企业、个人等采取并不断更新法律、技术等手段来积极应
在工程实践环境中,绝大部分工业系统的本质以非线性采样数据系统的形式呈现。对比一般系统,这一类系统本身具有极高的自动化性能,但因现代工业系统规模日益增大,该类系统结构
无人机集群自组网(Flying Ad Hoc Networks,FANETs)成为了目前无人机集群技术的热点之一。随着无人机集群运动速度范围变大、任务场景多样化,传统路由协议中固定路由参数难以
位于HIV-1病毒膜上的包被三聚体(envelope trimer;Envtrimer)由三个gp120分子和三个gp41分子通过非共价连接构成。通过gp120与免疫细胞膜上相关受体的相互作用以及由此导致的Envtrimer的一系列构象变化,HIV-1才能完成对细胞的入侵;同时,gp120的构象变化还与病毒的免疫逃避直接相关。对于CD4依赖型HIV-1病毒株,侵染的第一步是gp120与细胞表面受体
近些年来,我国的航天航空事业处在高速发展阶段,空间科学及基础设施正在逐步发展和完善。卫星的研制迎来了新的黄金时期,卫星技术发展迅猛。最近几年,呈现出了卫星的数量大幅增长、卫星的系列型号不断丰富的趋势。在厂测试的卫星及近几年发射的卫星所包括的数据量越来越大,其需要完成的任务和功能也与之前的卫星有所不同。为此,数据管理和数据分析功能有待进一步的提高完善。然而先前的卫星长管信息系统平台只能适用于传统卫星
我国草地面积辽阔,约占国土面积的40%,是世界上草地资源数量最多的国家之一。其中,牧草作为草地资源的重要组成部分,含有多种微量元素以及维生素,是饲养家畜的首选饲料,并作
政治演讲是政治家用以阐明立场、宣传主张、影响民众的手段。在国内外的政治活动中,它都发挥着重要作用。但是,在对政治演讲进行口译时,重现其中的人际意义固然重要,却也因受不同文化背景、表达习惯及其他干扰因素的影响而充满挑战。评价理论是系统功能语言学的发展和延伸,是实现人际意义、进行话语分析的重要手段。它自建立以来,就广为国内外学者所关注。评价系统包括态度、介入和级差三个子系统。态度系统关注人们的情感表达
能源是人类赖以生存和社会发展不可或缺的部分,面对日益严重的化石能源枯竭问题以及其滥用所带来的环境问题,新能源的研发和使用备受关注。微波能作为一种清洁、高效的能源目
本文采用数值模拟与PIV测量两种研究方法,对同一几何结构的Taylor-Couette流场进行测量和研究分析,采用涡旋强度法对PIV测量和数值模拟所获得流场中的涡旋结构分别进行识别,