基于多模态的在线学习情感分析模型设计与实现

来源 :南京师范大学 | 被引量 : 2次 | 上传用户:arieswys
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
作为“互联网+教育”的新兴产物,在线学习近几年的发展如火如荼,但师生空间上的分离状态导致情感交流缺失是目前在线学习面临的巨大挑战。为了更加深入地了解学习者的情感倾向和学习状态,本文提出了一种基于多模态的在线学习情感分析模型,为在线学习情感分析提供了新的视角。首先,针对目前在线学习情感分析的研究现状与存在的问题,提出建立基于评论文字、表情符号、面部表情、肢体动作4种模态数据的在线学习情感分析模型。该模型主要包括4个关键步骤:多模态数据的采集、多模态数据的预处理、多模态数据的特征提取、多模态数据的融合。在数据采集阶段,分别使用爬虫技术和摄像头捕捉技术来获取数据。在预处理阶段,对于评论文字和表情符号,预处理包括:评论文字提取、分词、词性标注三个步骤;对于面部表情和肢体动作,预处理包括:图像增强、灰度化、几何归一化三个步骤。在特征提取阶段,评论文字采用TF-IDF方法;表情符号采用构建情感词典的方法;面部表情采用LBP直方图对面部特征进行提取;肢体动作采用人脸与基准脸的相对大小对身体前倾、后仰状态进行判断。最后采用基于支持向量机后验概率的加权求和方法对多模态数据进行决策层融合。接着,对本文提出的基于多模态的在线学习情感分析模型进行实验,实验表明:与已有工作相比,该模型无需穿戴设备、无需收集语音,降低了学习成本和学习环境要求,具有更强的实用性和推广性;与单模态数据情感分析模型相比,该模型具有更高的准确率,可以更加深入地了解学习者的情感倾向和学习状态。最后,本文实现了基于多模态的在线学习情感分析原型系统,给出了开发环境与工具,着重介绍了学习行为采集、学习行为检测以及多模态情感分析等功能模块的实现。通过实验表明,系统运行效果良好,能够分析在线学习者的情感倾向并了解在线学习者的学习状态。
其他文献
<正> 目前我国仔猪断奶前死亡率约为15%~20%,直接影响养猪业的发展。因此,研究提高断奶前仔猪成活率是养猪生产中亟待解决的问题。分析仔猪死亡原因及提高成活率措施如下。1 被
苏太猪是苏州市太湖猪育种中心以太湖猪为基础母本,通过导入外血、横交固定、继代选育等技术措施,经10年的努力培育出的二元母猪新品种,我们对其繁殖性能指标进行了观察记录,
近年来,由于环保对策及节能的要求,利用太阳能发电及风力发电等自然能源的分散型电源增加了。由于这类电源的发电机输出功率依赖于天气,在与现有的交流供电系统并网时,将引起交流
本文从词的结构、语义的角度.将现代汉语副词分为词族副词和非词族副词两大类。所谓词族副词是指结构上有相同语素,而语义上同义的一组组副词(这些副词占所考察的668个副词的76
<正> “七·七”抗战爆发后,山西成为抗日前线,国内许多知名作家,纷纷奔向山西,他们把文艺同民族的命运紧密连在一起,把迅速地、及时地反映抗战,服务抗战,当作自己创作的神圣
会议
利用PCR反应扩增含第5外显子和第6内含子的牛生长激素基因,经限制性内切酶HpaⅡ酶切,得到CC,CU两种基因型。C,U等位基因频率在各种牛品种中分别为;西门塔尔牛1,0;鲁西黄牛1,0;纯种皮埃蒙特牛0.8125,0:1875:皮埃蒙特&#21
一般来说,低压电力系统母联备自投采取两种方式实现,一是采用常规继电器线路实现,二是采用可编程序控制器(PLC)实现。低压电力系统母联备自投保护是近年来在高压系统备自投成熟
采用电化学的方法研究X65管线钢母材及其高频电阻焊(high-frequency welding-HFW)焊缝对电化学充氢的吸收能力.结果表明,随着充氢时间的增加,母材和焊缝中的扩散氢的含量有着一
以深圳市汉京半山公馆工程项目施工为例,介绍滑坡体地质条件下采用放坡、抗滑桩、挡墙、格构梁、锚索、锚杆组合支护体系作为深大基坑支护结构施工经验,探讨深大基坑在周转场
皱胃阻塞主要是由于迷走神经调节机能紊乱,皱胃内容物滞积,胃壁扩张而形成阻塞,引起消化机能障碍、自体中毒和脱水的严重病理过程.现将具体诊疗情况介绍一下.