基于深度学习的人体动作识别研究

来源 :电子科技大学 | 被引量 : 0次 | 上传用户:SAGDGJGU
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
信息的指数爆炸增长对数据的处理和分析提出了更高的要求,其中,动作数据的增长尤为可观,这也使得动作检测、动作检索和动作识别等动作相关学习任务受到了工业化的推动;动作识别在人机交互、安全监控、动感游戏等领域的应用前景受到研究者的格外关注,而且,随着硬件和传感器技术的快速发展,各种动作数据的获取更加容易,动作数据的快速分析更加便捷;基于各种动作模态数据的动作识别技术都得到了不错的发展与探究,其中,骨骼运动序列因其简洁的表示动作方式,对光照、背景不敏感的特性而受到动作识别研究学者的青睐,但当前基于骨骼序列的研究大多是从提取全局运动特征入手,或辅以局部特征来做动作识别,这使得细节化的运动特征容易被忽略;本文从另一个角度出发,通过融合局部运动特征的方式来达到动作识别的目的。本文使用深度学习的方法,基于人体骨骼运动序列的动作识别的主要工作如下:(1)对骨骼运动序列进行预处理和运动表示转换;数据的预处理包括将原始表示的笛卡尔坐标系转换为柱坐标系和将骨骼运动序列的时间长度进行归一化;运动表示的转换是将全局的关节运动表示转换为基于局部部位关节的运动表示方式,这包括两个步骤:划分部位关节点和新运动表示的计算。(2)基于新运动表示构建动作识别网络模型,探究基于局部部位运动特征融合的动作识别方法;复合了LSTM和CNN作为网络的基本层,来提取运动的时空特征,基于LSTM-CNN层使用多流网络来提取各个部位的局部运动特征,并采用得分融合的方式来预测动作类别;该模型分别在两个数据集上进行了实验,验证了模型的识别性能。(3)为了提升模型的识别准确率和降低平均误差,引入残差网络结构和空间配置项来优化模型;在多流网络中,使用恒等映射的方式为LSTM-CNN层的输入输出提供快捷连接,将单层的LSTM-CNN层扩展为残差块;使用标签映射的空间配置方式来不同程度地放大关节点的运动。(4)所提出的动作识别方法与其它基于CNN和RNN的方法进行了类比,实验表明本文提出的方法优于其中的一些方法,并跟识别率高的方法具有可比性。
其他文献
目的探讨外套管在辅助内镜取出食管第一狭窄处枣核的临床应用价值。方法回顾性分析本院2008年10月-2016年8月收治的枣核嵌入食管第一狭窄处的41例患者,分别接受经外套管辅助
基于分析当前指标优化方法与网络急剧发展不适应的矛盾,结合2G网络自动化研究成果,讨论智能专家处理系统在2G指标优化中的应用。
本刊讯:2012年8月,安捷伦科技公司日前宣布推出14款FieldFox手持式分析仪,可在现场测试环境中提供与台式仪器媲关的精度。该系列分析仪包括:FieldFox微波分析仪、FieldFox微波矢
随着时代的发展,音乐在我们生活中所占的地位越来越重要,在我们生活中起到的作用也越来越多,可以帮到我们的地方也越来越多.舒缓的音乐可以安抚人们浮躁的情绪,积极向上的音
目的动态观察钙敏感受体(calcium-sensing receptor,CaSR)在大鼠肾草酸钙结石形成过程中的表达,探讨CaSR在大鼠肾草酸钙结石形成中的作用。方法选取60只Wistar雄性大鼠,随机
随着我国社会经济的发展,科学技术的不断进步,数字化技术已经应用于教学课堂当中,其中在小学科学体现比 较明显。小学科学会在课堂中进行很多实验,通过运用数字化教学仪器和
<正>2017年以来,杨凌示范区坚持把精准扶贫作为&#39;头等大事&#39;&#39;第一民生工程&#39;和最大的政治任务,坚持以精准扶贫统揽经济社会发展全局,以提高&#39;四率一度&#39;
期刊
目前,金堆城露天矿的铲装作业过程中,设备、人员以及现场环境较为复杂,安全检查表已经沿用多年,相应的安全管理制度也相对滞后。这给矿山的安全生产、文明建设带来了极大的隐
中等职业学校在室内装饰设计课程教学中存在的问题比较突出.通过强化课程中理论与实践相结合,充分运用项目式教学与工作室模式相结合开展教学,建立以校外专业设计师、专业教
本文通过研究新时代环境下,“候鸟家庭”家庭教育的缺失对学生基础教育阶段的影响,以及分析研究国内外 的基础教育阶段家校协同教育实施情况,分析了当前我国基础教育阶段的家