面向AR飞行训练的跟踪注册和交互技术研究

来源 :南京理工大学 | 被引量 : 0次 | 上传用户:njpolice
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
增强现实技术可用于辅助飞行员的特情模拟训练,在飞行员看到的真实世界中的无人机遥操作场景上叠加虚拟的训练信息、操作规范、特情任务等。增强信息根据特情流程以及无人机状态反馈以文字、模型特效、语音等方式准确地显示给飞行员,指导飞行员完成任务,模拟特情发生的场景予以训练。三维注册技术是增强现实的关键技术之一,是将三维虚拟物体无缝地叠加到现实环境中的前提。首先,本文设计了基于先验特征和卡尔曼滤波融合的跟踪注册方法。基于先验的颜色和形状特征识别预置的人工标志,提高复杂背景下的识别正确率与识别速度。使用solve Pn P方法解算相机位姿变化,得到屏幕区域的定位。在定位的基础上,基于卡尔曼滤波方法融合基于先验特征的视觉定位系统与AR设备自身的SLAM定位系统,提高观测距离较近、空间内三维特征较少的情况下跟踪的鲁棒性。其次,由于显示样式的不同关系到飞行员的认知负荷与操作效率,本文研究增强现实环境中的信息呈现方式。面向飞行员的认知特性,设计了视觉信息为主,必要时以听觉信息进行多通道补偿的提示方案。对于视觉信息,设计文字、动效、模型相结合的表达方式。对于文字信息,考察空间位置、颜色、尺寸等要素,通过实证研究,设计高效的显示样式。设计基于屏幕亮度估计的光照一致性方法,获取环境光照,并以附加光源形式模拟屏幕亮度变化,达到更好的虚实融合效果,减轻亮度差异造成的视觉疲劳。最后,本文基于多源数据进行交互效能评估,利用凝视点动态信息、操作的反馈信息等设计特征,预先使用随机森林方法对样本进行训练,得到交互效能的分类器,应用于提示系统,优化增强现实信息表达机制。创建了融合文字颜色、尺寸、空间、动效、模型与特效、语音辅助的感知强度模型,设计显示样式组合方案。根据特情紧急程度、信息固有价值,以及交互效能的实时计算,自适应地得到提示信息的感知强度需求,进而确定显示样式。
其他文献
精密加工的复杂锻件现已成为众多设备中不可替代的核心部件,承担着核心支承、特种结构、重载荷等重要作用。目前,此类工件大多采用人工探伤的方式进行检测,其存在较多的检测盲区,效率低下,且检测结果的准确度过于受人为因素的影响。为了保证锻件的质量和可靠性,研究基于机器人的超声波自动检测系统具有重要的实用价值。首先,制定了总体设计方案。根据复杂锻件结构特点及检测要求,设计了一套复杂锻件超声波自动检测系统,以期
高光谱遥感图像具有光谱分辨率高的特点,但受成像传感器的限制,高光谱图像空间分辨率较低,极大影响了高光谱图像的应用,因此提高高光谱图像的空间分辨率是研究热点问题。高光谱遥感图像超分辨技术通过软件方法,利用低分辨率高光谱图像重建高分辨率图像。传统的矩阵分解方法依赖高分辨率RGB图像提供额外的空间信息,否则重建精度不够。深度学习方法直接从数据学习特征,能够描述数据的深层特征,通过这些内在信息能够达到较高
学位
学位
行星减速器作为飞行器舵机系统重要组成部分之一,与舵机系统的传动精度和工作效率密切相关,影响飞行器飞行精准程度。本文基于舵机系统传动装置的技术要求,设计一款新型行星减速器并进行动力学特性研究。根据余度策略技术以及行星齿轮设计理论对行星减速器进行结构设计。包括齿轮、行星架、箱体的设计和轴承的选型,并绘制二维工程图纸、装配三维模型;利用理论计算法和有限元计算法校核行星减速器危险齿轮的强度,分析行星架受力
学位
作为自然语言处理领域中一个经典方向,细粒度情感分析主要研究如何准确判断观点实体的情感倾向性问题,近年来已经获得了广泛而深入的探索。然而在现实生活中,人们在社交媒体上发布的内容已经从单一的纯文本模态信息转变为图文并茂的多模态信息。以往的细粒度情感分析模型由于只考虑文本内容,无法对多模态信息进行建模,从而存在不能准确判断观点实体情感倾向的问题。多模态细粒度情感分析是近期提出的一个新的研究方向。该方向旨
目前,随着我国人口老龄化的不断加深,独居老人的数量逐渐增多。另外,由于社会发展带来的人们工作节奏的加快,加班时间增多,导致年轻人陪伴老人或者在家活动的时间逐渐减少。因此,当家中只有老人独居或者家中长时间无人时,面对家庭环境中出现的一些安全隐患如煤气或者天然气泄露、家中起火、水龙头未关闭以及家中出现陌生人等而无法得到有效的检测,将会给家庭造成较大的损害。基于这样的一个应用场景,本课题设计了一款用于家
学位