面部运动障碍视频分析与智能诊断研究

来源 :东南大学 | 被引量 : 0次 | 上传用户:b188413920
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着人工智能技术与医疗健康领域的不断融合,人工智能在医学影像、辅助诊断和疾病预测等方面得到了广泛应用。医学当中常见的一类病症就是面部运动障碍,将人工智能技术应用于面部运动障碍识别并实现数字化辅助诊断具有重要的研究意义。由于任务自身的难点以及数据集构建过程困难,目前与面部运动障碍疾病相关的研究较少。本文综合运用多种计算机视觉技术,基于视频图像对面部运动障碍进行分析与研究,并提出两种识别算法。本文主要工作概况如下:首先,对与面部运动障碍识别类似领域的微表情识别相关研究进行了回顾,对人脸对齐的相关工作进行了梳理。随后介绍了面部运动障碍数据集的构建过程并分析两种常见症状的运动模式和特点。接着基于卷积专家约束局部模型的人脸对齐算法和人脸图像空间分割算法对样本进行预处理,提取归一化后的眼部区域图像序列作为研究对象。然后,提出了一种基于机器学习的面部运动障碍识别算法。根据各类型面部运动障碍疾病患者的面部运动规律,构造积分算子与差分算子分别计算图像序列的积分平均图和运动能量图,通过分析本文应用场景的特点,将面部运动障碍识别的多标签分类任务转换为两个二分类问题,使用传统的特征提取方法和分类模型对面部运动障碍进行识别。实验结果表明,积分平均图和运动能量图能够有效的描述不同类型的面部运动障碍,取得了较好的识别效果。最后,提出了一种基于3D卷积神经网络的面部运动障碍识别算法。针对人工描述特征复杂度不足并丢失较多时序特征的问题,构建深度网络模型提取图像序列中的运动特征。使用光流法对原始图像序列进行处理并与原灰度通道叠加,作为网络的输入。设计了一种3D卷积神经网络用于提取图像序列中的运动信息,并融合长短期记忆神经网络对面部运动障碍进行识别。实验结果表明,相比于传统机器学习的方法,深度模型学习到的特征更为丰富,有效地提升了面部运动障碍识别的准确率。
其他文献
作为一类亲脂疏水有机污染物,卤代有机物(HOCs)由于其潜在的生态风险而受到越来越多的关注。纳米零价铁(NZVI)是一种具有高反应活性、高比表面积的环境功能材料,可以实现HOCs的还原脱卤降解,但是其易团聚、易失活的特性限制了NZVI的工程应用。将NZVI负载于生物炭(BC)上制得的新型材料(BC-NZVI)能够较好地保留NZVI与BC的优点,使得BC-NZVI更具应用于实际HOCs污染修复的潜力
为应对能源危机和污染问题,世界主要汽车市场纷纷将电动汽车的发展上升至国家战略。中国是汽车生产和销售大国,发展电动汽车产业,是使我国由汽车大国转变成为汽车强国的重要机遇,也是应对能源和环境问题的必由之路。2014年之前,政府政策倾向于以购置补贴为主,然而我国电动汽车产销量却始终未有大的突破;2014年之后,政府产业政策进入调整阶段,税收减免、充电价格优惠、路权和政府购买等政策多项并举,同时政府开始大
无人直升机能够完成悬停、垂直起飞降落、侧向飞行、倒立飞行等动作,灵活地在恶劣环境中进出,在民、商、军等领域均有广泛应用。无人直升机是一个典型的多输入多输出、强耦合、欠驱动、非线性系统,且由于推力产生的复杂空气动力学性质,还存在很大的参数和模型不确定性。此外,实际飞行时系统还易受外部干扰影响。因此研究高性能的飞行控制方法极具挑战性和探索价值。本文就无人直升机抗干扰姿态和高度跟踪控制算法展开研究,设计
在中国经济高速增长的过程中,外商直接投资(FDI)一直发挥着重要的积极作用。但随着世界经济增速放缓、全球贸易保护主义抬头,全球FDI流量减少,我国FDI增速也有所下滑。此外,随着我国经济进入“新常态”,产能过剩和环境污染问题日益突出,党的十九大报告提出要深化“供给侧结构性改革”并实行最严格的生态环境保护制度。面对不容乐观的国际投资环境与愈加严重的国内环境问题,结合现阶段中国经济的现状研究环境规制对
当下城市土地资源日渐紧张,超高层建筑日益增多,建筑基坑也向更大更深的方向发展。这些城市深基坑工程周边环境往往很复杂,常存在各类既有构筑物,比如地铁隧道、高层建筑、市政管线、城市道路、高架桥等,使得城市深基坑施工面临许多风险因素。因此,建立一套涵盖各类构筑物的安全指标体系,并在此基础上对紧邻构筑物作安全风险评估具有深远的意义。本文在深基坑紧邻构筑物指标体系和风险评估方法方面进行了一系列研究,并依托上
聚磷腈是一类由磷氮单双键交替连接所组成的高分子化合物,通过不同性质的亲和基团取代磷原子上活泼的氯,可以合成物理和化学性质不同的各种物质,如制成低温弹性材料、耐高温、阻燃材料、液晶、低温涂料与粘合剂、高分子电解质、生物医学材料、非线性光学材料以及农药
著名笛子演奏家江先渭先生于1962年创作了《姑苏行》这首笛曲作品,昆曲的音乐元素被采用到这首乐曲的旋律创作,也使作品的音乐风格充满着浓郁的江南韵味。《姑苏行》这首竹笛独奏曲受到了广大人民的喜爱,被称之为民族音乐的典范。《姑苏行》这首乐曲体现的情感与作品的形态结构形成了完美表达的艺术效果,通过独特的演奏技法笛曲所蕴含的江南风味表现得淋漓尽致,人们追求的这种和谐、安宁的时代特征凸显了出来,展示了内心中
学生的职责就是学习,而认真上好每一节课是最基本的任务,也是汲取知识、培养课程逻辑思维能力的最基本途径。然而,近年来高校学生上课出勤率低的问题非常普遍,已成为高校教学与教育管理中不得不面对的"顽疾"。本文以湖北文理学院为个案,分析了在校大学生上课出勤率低的原因,并在此基础上提出了具体的对策。
近年来,随着全球主要经济体复苏,新兴经济体的经济增长稳中向好,但经济表现依然弱于危机前的趋势水平。不仅如此,在经济增长缓中趋稳的背后,新兴经济体面临的收入分配差距扩大、外汇市场波动频繁、保护主义升级等诸多问题不可忽视,新兴经济体在努力实现长期稳定的经济增长过程中,仍面临着较大的风险和挑战。在诸多不利影响因素中,收入差距分配扩大已成为必须引起警惕的世界性现象,几乎所有国家都受到了不平等问题的影响,但
词汇教学在第二语言教学中占据重要位置,亦在语言要素教学及国际汉语教学中居重要地位。现阶段世界范围内低龄汉语学习者逐年增多。在儿童汉语教学领域中,针对儿童的初级汉语词汇教学必须要采取不同于成人甚至区分不同国家的模式和方法。目前在儿童的对外汉语教学研究中针对词汇教学模式的研究较少,已有研究显示主题式教学模式在儿童汉语教学应用中行之有效。因此,本论文依托初级汉语综合课词汇教学实践,以缅甸东方孔子课堂教学