面向大数据的数据管理平台架构研究与应用

来源 :网络新媒体技术 | 被引量 : 0次 | 上传用户:gmzz2009
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
大数据管理对传统的基于关系数据库管理系统和文件管理服务器的处理能力和数据吞吐量提出了挑战,为了更好的利用大数据改进企业统计的科学性和及时性,实现应用系统获取结构化和非结构化数据,更快、更精准的统计,研究开发支持结构化和非结构化数据统一管理的数据管理平台成为一项非常迫切并且重要的任务。针对于大数据的数据管理平台具备存储容量大、存储多种媒体形式的特点,设计了基于Spark平台的并行计算数据管理平台原型S-BDMP和基于S-BDMP的数据服务管理平台的应用方案。大数据管理平台原型S—BDMP可以广泛应用于海量的结构化数据分析和非结构化数据的存储和处理。S-BDMP通过在国网甘肃省电力公司信息通信公司信息系统中的集成测试,使得原有信息系统在海量数据处理中有了很大的性能提升,并很大程度提高了系统吞吐能力。
其他文献
利用从发酵米粉中筛选出的一株植物乳杆菌Zhang-LL探讨其胃肠道耐受性及体外降胆固醇功效。本实验分别在p H1.5~3.0、胆盐浓度0.1%~0.5%的条件下模拟人体胃肠道环境,采用活菌
<正>有关研究指出,人的主要阅读能力,是在3—8岁期间形成的。如果在幼儿期间不及时启蒙阅读意识,激发阅读兴趣,养成阅读习惯,幼儿入学后就可能出现学习适应困难。因此,在学前
会议
对于基于认知无线电架构的多天线信道估计技术,由于传统零相关序列是在全部频谱可用前提下设计的,在复杂电磁环境的频谱限制下,传统零相关序列部分频域元素发生变化,且不再满足原
患者,男性,52岁,农民,江西省彭泽县人。2011年3月,患者凶腹胀、
近年来农村文化市场虽然有了一定的发展,但是在管理上还存在一些问题和不足亟待解决。因此加强农村文化市场管理,对促进农村文化市场的健康发展,社会主义新农村建设都具有十
通过分析2015年以来跨境电商发展的新趋势以及最新发布的跨境电商人才标准和人才需求目录的特征,并在此基础上讨论作为应用型本科院校的商务英语专业,应如何围绕“互联网+”时
随着城市建设的发展,传统路灯控制方式和维护手段已不能满足城市现代化发展的需求,并对资源造成巨大浪费。本文针对这种情况,设计了一种基于GPRS无线通信技术的智能路灯监控系统
采用超声萃取方法提取样品,建立了纺织品中16种邻苯二甲酸酯增塑剂含量测定的气相色谱–质谱(GC–MS)检测方法。以甲醇为萃取剂超声波辅助萃取,考察了超声萃取的温度和时间。
本文通过研究生态足迹理论方法,对现有房地产开发生态足迹模型进行改进,提出一个比较全面科学的评价房地产开发可持续性的方法,为城市发展规划和建设提供科学依据。采用文献
<正>食用菌产业是朝阳产业,是赤峰市设施农业生产的重要组成部分。为摸清全市食用菌发展的基本情况,尤其是产业发展中存在的主要问题,为有关部门决策和争取项目资金提供科学