【摘 要】
：
在当今时代,计算机技术高速发展,信息化、数字化和智能化的社会正在逐步形成。在许多行业和职能领域中,数据已经成为一种极为重要的信息资产。丰富的数据资产固然可以为人们的分析和决策提供强有力的信息支撑,但是在数据采集和处理过程中可能由于录入错误、人为篡改和机械故障等原因,导致数据值缺失或异常、数据属性丢失或冗余等多种数据质量问题,这些问题可能对数据的后续使用带来严重危害,因此科学合理地对数据质量进行管控
论文部分内容阅读
在当今时代,计算机技术高速发展,信息化、数字化和智能化的社会正在逐步形成。在许多行业和职能领域中,数据已经成为一种极为重要的信息资产。丰富的数据资产固然可以为人们的分析和决策提供强有力的信息支撑,但是在数据采集和处理过程中可能由于录入错误、人为篡改和机械故障等原因,导致数据值缺失或异常、数据属性丢失或冗余等多种数据质量问题,这些问题可能对数据的后续使用带来严重危害,因此科学合理地对数据质量进行管控具有重要意义。本文旨在通过借鉴已有的数据质量管控经验,结合实际的业务生产需求,设计并实现一套数质量管控系统,为此重点做了以下工作:（1）调查研究数据质量管控的相关技术和理论基础,包括数据存储、同步、分析和计算的相关技术以及分布式集群的相关理论;（2）针对实际业务场景开展系统需求分析,重点从系统用户、系统角色、功能性需求和非功能性需求等方面进行分析与整理,并设计了多种类型的数据质量检查规则及数据质量评价指标;（3）在需求分析的基础上对系统的实现进行概要设计,包括总体架构、功能结构、整体流程、数据模型和运行环境等;（4）针对系统的核心功能点进行详细设计,明确系统各个模块的具体功能、逻辑流程、输入项、输出项、接口规范以及交互界面;（5）设计系统的具体部署与运行方案,包括数据质量检查的多线程实现方案、数据持久化层的部署架构、分布式缓存方案及集群部署方案等;（6）设计测试用例,对系统从功能性和非功能性方面进行测试与验证;（7）针对系统当前的实现状况及未来的改进方向提出总结与展望。通过数据质量管控系统的设计与实现,进一步明确了数据质量检查方案的各类规则检查逻辑以及数据质量评价体系,也为其他相关产品的设计与实现提供了参考依据。
其他文献
随着5G、大数据、人工智能、区块链等新技术催生传媒行业的转型,从平台建设升级到商业模式再创新、内容生产布局到全媒体技术矩阵打造,面对全新的渠道和内容创造环境,厦门广播电视集团再一次站在风口之上,如何适应媒体深度融合中全媒体格局的要求,亟需寻找创新点和突破口.厦门广电集团积极谋划和推进产业发展,打造具有竞争力的区域性新型主流媒体.笔者调研厦门广电集团,且以节目中心团队为考察重点,可见近年来集团推动媒体深度融合首要任务,寻找机制突破的创新,打开了成长的新空间.
自“汤沈之争”始,尽管戏曲形态不断演变,戏曲语言该侧重文学性还是舞台性,始终是戏曲研究的争论焦点之一.而随着近些年来小剧场戏曲的蓬勃发展,其舞台形式的日益先锋实验化,戏曲语言的文学性似乎受到了冷落与忽视,不免让人陷入“在戏曲舞台性的光芒笼罩下,其文学性是否可以就此忽视?”的思索之中,“意趣神色”还是“合律依腔”,再次成为一个问题.
近年来,快速发展的无人机技术使得无人机正在被广泛应用于各种通信场景,如空中中继、物联网设备数据收集器、空中基站等。与地面通信系统或基于高空平台的通信系统相比,低空无人机空中基站可以更迅速、灵活部署和重新配置,并且利用无人机的高移动性可获得短距离视线通信链路的几率更高,因而有更好的通信信道条件。因此空中基站的路径规划是一项重要的工作。在用户具有移动性的动态环境下,如何动态调整无人机空中基站的轨迹从而
第十七届中国戏剧节在“英雄城市”武汉开幕,好戏连台,观众如云,一种盛世光景里国强民安的振奋的精神在“九州通衢”的“三镇口岸”间氤氲洋溢.戏剧节上,许多优秀的院团带来音纯调亮、景浅意深的剧目,奉献了令观众惊艳叫绝的视听盛宴或者艺苑别境.福建泉州市高甲戏剧团创作的《范进中举》,就是其中一例.我忍不住要为编剧陈云升、导演周俊杰、音乐设计叶正萌和领衔主演的褚育江、陈情瑜、李伟强等主创人员喝彩,感谢他们的艺术创造,使得一个从经典讽刺小说改编的“轻题材”剧目,变成了一个有追求、有个性、有鲜明剧种特点和浓郁地域特色的优
在乡村振兴战略的指引下,畲族人物画创作对保护、活化、发展、推广畲族文化意义非凡.本文从理想审美的内化与外化,笔墨技巧的创新等方面阐述了畲族人物画创新途径,希望在福建这片畲族土壤里,探索出畲族人物画审美体系.rn在畲族人物画角色的定位中,笔者一改世俗眼中的“乡土”,追寻画面的“真朴”,将故事藏于笔墨中,在尘俗中守得一方净土,寻求心灵的解脱和栖居.《月醉三山》描绘了一个充满禅意的世界,画中畲女坐在山间,双手交合于唇间,低头冥想,远山白描素勾,清新淡雅,空明澄净,黑色的服饰映衬着亮洁的银饰,宛若山间的一轮明月,
南靖东溪窑属漳州窑系,为民窑,起源于明代初期,兴盛于明代中、后期和清代初期.杨巽从在《漳州什记》写道:“漳州瓷窑号东溪者,创始于前明,出品有瓶、炉、盘,各种体式具备.”至清朝末期,因推行“禁海令”政策,南靖东溪窑烧制技艺逐渐失传.rn明代初期,南靖东溪窑选址永丰溪流域,水路交通便捷,高岭土资源丰富,林木繁茂,非常适宜瓷器烧制.后因江西景德镇制瓷人才、技术的渐续融入,南靖东溪窑作坊达近百家,规模宏大,素有“十里窑场”之说,是漳州最大的窑场.南靖东溪窑瓷器远销东南亚、欧洲各国,国外诸多博物馆均有收藏、展示.
“旷代衣冠谁解识,令人终古泣斜阳”.在中国历史上,尤其是经济生活文化史中,衣冠始终是非常重要的部分.戏曲服装旧称“行头”,包括了戏衣、盔头和戏鞋.在经历不断流变甚至断代发展后,很多古代服装的痕迹都只能从戏曲服装上找寻.甚至在一些地方戏的戏曲服装中,还能看到古代服饰的地域差异.戏曲服装发展到当下,其最主要的作用便是进行角色包装.角色包装,即演员身上按剧本情景要求的服饰穿戴,是舞台人物角色情感反映外部形象,给观众最直观的视觉冲击.每个不同的穿戴代表一位舞台人物形象以及他的年龄、身份、地位、性格,甚至暗含人物之
前几年在编撰《连江名贤》《黄岐史略》时,我收集到许多福州地区英烈、闽海革命史迹资料,出于编剧职业的敏感,总会从剧本创作角度来审视所收集到的资料.今年恰逢中国共产党成立100周年,出于剧作家的创作使命感,我于去年秋天开始潜心梳理这些年来收集革命文献资料,思考建党百年题材创作问题.rn连江人民富有光荣的革命传统,连江革命史在福州革命史乃至福建革命史上都占有一席之地.土地革命期间,“二三革命”震撼八闽大地;抗日战争时期,抗日救亡运动席卷城乡,7000多名男儿奋战疆场;解放战争时候,数支游击队开展革命斗争,迎接共
随着计算机、通信、定位导航、天文观测等技术的飞速发展,众多领域对高精度时间同步技术提出了更高的要求。时间同步技术的实现途径有网络、短波、长波、卫星、光纤等,其中光纤具有稳定、低损耗、受环境影响小的特点,是时间同步准确度与稳定度最高的实现途径。光纤时间同步的常用方法有单向同步法,Round-Trip法、双向同步法,其中双向同步法通过双向传输抵消诸多环境因素影响,可以取得良好的同步效果,同时保证了远端