基于统计方法的异常数据检测及其修复

来源 :南京邮电大学 | 被引量 : 0次 | 上传用户:qq184343882
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着工业过程的复杂化,工业企业需求的增加以及控制理论和计算机技术的发展,软测量技术作为一种成本低廉,效果明显的方法,已成为现代工业控制领域的研究热点之一。而软测量的建模精度受到建模数据的影响,软测量模型的输入数据都来自工业现场。可是,工业生产过程中有很多影响因子,如噪声,传感器故障或者工作人员疏忽等都会使得所采集的某些数据出现异常,所以对建模数据的检测和修复就变得十分重要。论文主要从以下几个方面进行了研究。针对单个变量的数据(一维数据),采用小波变换的方法进行检测,通过伸缩和平移等运算功能对数据细致化的分析,因为小波变换的时频特性,能准确定位异常数据点位置;对于高维数据,采用主元分析法对数据进行处理,分别建立T2统计图和Q统计图。然后根据每个变量对T2统计图的贡献,对Q统计图进行更为细致的划分,选取其中和T2统计图显著相关的变量所构成的统计图联合检测,使得检查幅值较小的粗大误差能力加强。针对以前工业数据填补修复的一些缺点,本论文把深度学习方法运用到异常数据的修复,先对单变量时间序列数据进行多层次的特征提取,然后采用BP神经网络对特征变量进行训练,从非线性的角度对异常数据进行修复。以PTA工业过程采集的现场数据为例,采用小波分析和主元分析法分别对时间点异常和时间段异常的数据进行检测,并用深度学习方法对异常数据进行填补修复,仿真结果表明检测和修复效果都很好。
其他文献
目的噪声作为一种常见的职业性危害因素广泛存在于各工厂企业中,其对劳动者健康的影响是多方面的,长期暴露于噪声环境不仅可造成特异性的听觉损伤,还可对心血管系统、神经系
目的:建立一种基于FDA荧光信号的体外快速筛选抗肿瘤活性物质的方法。方法:通过筛选合适的FDA浓度,建立了荧光测定法,并对该方法进行了线性范围和精密度的考察以及可靠性验证
<正> 患者:女,33岁,农民。因间歇性夜间胸闷,心悸2年,于1991年11月7日来院诊治。体核:一般情况佳,心肺无异常。血、尿常规,肝、肾功能,电解质,血沉,挽“O”,RF,心肌抗体,GOT
<正> 现在,在苏联逻辑家中间,在形式逻辑上,在马克思主义辩证逻辑上以及在二者之间的相互关系上,都存在着极不相同的观点。一些人认为:形式逻辑包含于马克思主义辩证法之内,
随着我国社会经济的持续发展,为教育事业带来了发展的机遇,同时也对教育事业提出了更高的要求。体育教学作为高校教学的重要内容,也逐渐引起了人们的关注,如何提高高校体育教
在世界媒体格局中,英语信息占了80%,中文信息不到0.4%.西方主流媒体借助在全球传播体系中的强势地位影响受众,其中不乏对中国歪曲的报道.
<正>情报工作有两大基本目标:其一是提供有关对手或潜在对手及时、准确和相关的情报,消除情况认识中的不确实性,以支持决策者的决策,这样的情报工作通常称为积极情报或对外情
充分发挥云南的区位、资源、开放三大优势,以更广阔的视野扩大开放,全面推进互联互通,更加自觉主动服务和融入国家发展战略,建设区域性国际经济贸易、金融服务、科技创新和人
目的:评价补肾通络方对斑马鱼骨质疏松模型的干预效应,并明确其对破骨细胞分化的自噬调控机制。方法:选取新生3 d健康斑马鱼幼鱼260尾,25 mmol?L-1泼尼松龙(Pred)干预3 d,通过钙黄绿
本文基于2012年1月~2016年11月相关月度数据,利用结构向量自回归SVAR模型实证考察了利率市场化对影子银行发展和房地产市场的作用效果以及利率市场化进程中影子银行规模与房