【摘 要】
:
水资源异常数据检测是水资源信息处理和系统决策的关键环节,是取水信息监控系统正常运行的前提,也是推动智慧城市水资源管理与建设的重要支撑。随着物联网、互联网以及大数据技术的发展,水资源系统的信息化进程不断加快,数据的真伪性问题也越来越突出,水资源大数据的异常值检测面临着新的挑战。而传统的异常检测模式多采用人工抽检,效率低且误判率高,无法满足海量取水数据的异常检测需要。因此,研究有效的水资源异常值检测算
论文部分内容阅读
水资源异常数据检测是水资源信息处理和系统决策的关键环节,是取水信息监控系统正常运行的前提,也是推动智慧城市水资源管理与建设的重要支撑。随着物联网、互联网以及大数据技术的发展,水资源系统的信息化进程不断加快,数据的真伪性问题也越来越突出,水资源大数据的异常值检测面临着新的挑战。而传统的异常检测模式多采用人工抽检,效率低且误判率高,无法满足海量取水数据的异常检测需要。因此,研究有效的水资源异常值检测算法,解决水资源管理系统的真伪性问题,已经成为新型智慧城市乃至国计民生发展的重中之重。本文主要针对水资源数据的信息处理问题,开展了异常值分析与检测的方法研究。主要工作内容简述如下:1)提出了基于一类支持向量机(One Class Support Vector Machine,OC-SVM)的水资源异常检测与分析方法,解决了实际水资源数据正负样本不均衡且无标签的训练问题,并根据评分函数分别对水资源取水数据进行异常值特征分析。从一维、三维、七维三种情况分析并总结了日取水数据中各类异常值的特征,又从一维和二十四维两种情况对小时取水数据集中的异常值特征进行深入剖析,取得了很好的分析效果,为取水监测系统的异常检测提供了依据,为后续异常值检测模型的设计打下基础。2)提出了基于联合自编码器(Joint Auto-Encoder,JAE)的异常值检测方法。该方法设计了一种权重共享的联合自编码器网络,提出混合损失函数作为网络优化目标,并提出双阈值异常判定准则。该网络模型针对日取水数据的特点,解决了不均衡样本中特征提取难、异常门限值选取难等问题。在实验中,分别将JAE方法应用于合成数据集、MNIST数据集以及水资源数据三大数据集,并通过ROC和AUC值评估模型的性能,证明了JAE在异常值检测的有效性和适应性。同时,还将JAE方法与AE方法、OC-SVM方法、OC Deep SVDD方法进行了对比,证明了JAE在异常值检测的优越性。最后,通过水资源信息融合与决策支持平台,验证了JAE异常值检测算法的有效性,并将该算法应用于实际水资源异常数据的实时智能监控。
其他文献
核糖体是一种无膜结构的细胞器,其主要功能是负责蛋白质的合成。真核生物和原核生物的核糖体均由大亚基和小亚基组成,大亚基和小亚基又是由核糖体蛋白和rRNA组成的。核糖体蛋白种类繁多,在不同物种及同一物种不同组织中组成核糖体的蛋白都存在差异。核糖体蛋白是核糖体的重要组成元件,其突变后会严重影响核糖体的正常功能,部分关键核糖体蛋白的缺失会引起细胞正常生命活动失调,器官发育缺陷甚至致死。植物细胞中同源家族核
海洋独特的生态环境与陆地生态环境相比存在着巨大差异,造就了海洋与陆地迥异的生物物种,在新物质需求大而陆地新生物资源日益枯竭的当今,海洋中丰富的生物种类以及其多样的代谢产物给我们提供了新的出路。目前,对珊瑚、海绵、海葵等海洋无脊椎动物的共附生微生物及其代谢产物已有大量研究,但是还没有石磺海牛共附生微生物的相关报道,本文研究了这一具有重要意义的无脊椎动物的共附生微生物及其群感淬灭活性产物。本文对石磺海
在污染河流水体中,微生物群落对污染物减量发挥了重要作用,了解细菌群落对不同环境因素影响的时空变化响应,对水环境的监测、保护和恢复具有重要意义。茅洲河位于粤港澳大湾区的现代化都市之间,是我国水域严重污染的典型黑臭河流。黑臭水体中氨氮的去除是黑臭水处理的一项关键指标,利用脱氮微生物的代谢来去除黑臭水体中的氨氮具有经济高效、工艺简单、无二次污染等优点。异养硝化-好氧反硝化(Heterotrophic n
植物核苷酸转移酶(nucleotidyl transferase protein,NTP)可以催化核糖核酸(RNA)的非模板性加尾,从而改变RNA的稳定性。拟南芥核苷酸转移酶家族中共有10个成员,其中研究较多的是HESO1/NTP1和URT1/NTP3,且它们的功能也相对较为明确,但是其他8个成员的功能却鲜有研究。本研究首先对拟南芥10个NTP的组织特异性和亚细胞定位进行了研究。通过构建10个NT
现今,计算机视觉领域中目标检测算法主要分为两阶段(two-stage)和一阶段(onestage)两种类型。前者具有优秀的检测精度,但由于其检测速度较慢、部署时模型较大以及对硬件设备有较高要求。two-stage类算法主要在视频分析场景中使用,无法满足实时目标检测追求快速的硬性条件。one-stage类算法在检测精度上稍低于two-stage类算法,但其速度大幅提高能满足实时性需求。但是该类算法对
重金属转运ATP酶(Heavy metal transporting ATPase,HMA)是一种跨膜转运蛋白,一般含有6-8个跨膜片段,属于P型ATPase家族,主要通过水解ATP为金属转运提供能量。HMA蛋白在植物生长发育过程中参与金属元素的吸收与转运,在植物金属转运方面发挥着重要的作用。菜心属于十字花科芸薹属,是华南地区特色蔬菜,在餐桌上广受欢迎。近年来由于经济的快速发展,以及各种化学产品的
产甲烷菌是一类能利用简单化合物产生甲烷气体的厌氧菌。广古菌门(Euryarchaeota)目前含有七个产甲烷菌目,其中包括一个新的产甲烷菌类群:Methanofastidiosa(WSA2)。基因组分析等研究发现这类新型产甲烷菌具有独特的甲烷代谢通路以及广泛的生态分布,科学家推测它在全球生态调节以及碳循环中可能起到了不可忽视的作用。红树林湿地生态系统以其高生产力,高生物多样性且是CH4的主要来源备
二十二碳六烯酸(DHA,Docosahexaenoicacid),又被称为“脑黄金”,是含有六个双键的属于ω-3系列的长链多不饱和脂肪酸,对人体的多种生理活动具有十分重要的调控和促进作用。人体不能自身合成DHA,必需从外界获取。破囊壶菌Aurantiochytrium,作为一种海洋真菌,因其生长快、油脂含量高,被广泛应用于DHA油脂的生产研究中。本课题以破囊壶菌Aurantiochytrium s
过渡金属硫属化物在地壳中储量大,同时具有较高的HER(Hydrogen evolution reaction)催化活性,因此成为析氢阴极催化剂研究的热点。研究表明,过渡金属硫属化物的催化活性与其暴露出的边缘活性位点的数目直接相关。其中Mo Se2(硒化钼)具有优良的金属性和不同的晶相结构,因此受到了研究者们的重视。一般而言Mo Se2的HER催化活性取决于其暴露的边缘活性位点数目和本征导电能力。理
随着当前世界人口的急剧增长以及水污染问题的加剧,人类面临着淡水资源短缺的危机。太阳能海水淡化是解决水资源危机的有效途径之一。近年来,研究者们提出了一种局部加热太阳能海水蒸发的方法,大大提高了海水淡化的效率。太阳能吸收体是该蒸发系统的关键。本论文介绍了石墨烯气凝胶作为一种太阳能吸收体,其具有较宽且较高的光吸收、低导热系数、优异的机械性能、丰富的毛孔和自悬浮等性质。然而,石墨烯气凝胶本征的疏水性质阻碍