基于Storm的海量数据实时聚类

来源 :计算机应用 | 被引量 : 0次 | 上传用户:shiwuxin
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
针对现有平台处理海量数据实时响应能力普遍较差的问题,引入Storm分布式实时计算平台进行大规模数据的聚类分析,设计了基于Storm框架的DBSCAN算法。该算法将整个过程分为数据接入、聚类分析、结果输出等阶段,在框架预定义的组件中分别编程实现,各组件通过数据流连通形成任务实体,提交到集群运行完成。通过对比分析和性能监测,验证了所提方案具有低延迟和高吞吐量的优势,集群运行状况良好,负载均衡。实验结果表明Storm平台处理海量数据实时性较高,能够胜任大数据背景下的数据挖掘任务。
其他文献
信息技术和电子商务的发展,对会计领域的影响是多方面、全方位的。信息技术对会计环境、会计假设、会计原则提出了全面的挑战。电子商务要求会计服务范围更加广泛,会计手段多
<正>1996年5月,广深铁路股份有限公司的股票在香港和纽约成功上市,共筹集资金45亿元人民币,超过中国证监会上市前所制定的29.5亿元人民币目标,市盈率为12倍,达到目标的高线.
俄国十月革命胜利的消息传入国内后,中国早期先进知识分子即从政党的角度,对列宁领导的布尔什维克党的阶级基础、理论来源、政党性质和组织原则进行了详细、准确地解读,认定
于1988年上映的《天堂电影院》是意大利著名导演朱塞佩·托纳托雷的代表作品。影片纯美的画面、灵动的音乐及其蕴涵在影像背后关于生命的深刻哲思都无不令人感怀。埃尼奥·莫
本文采用Granger因果检验与DCC-MVGARCH模型的研究框架,分别从价格溢出效应与波动溢出效应两个视角对境内人民币即期和远期市场,中国香港离岸人民币即期市场和NDF市场之间的
本文选取上海申康法人化管理模式、北京海淀契约式管理模式、潍坊自主化管理模式、无锡托管式管理模式和宿迁民营化管理模式五种典型基层公立医院管理体制改革实践模式作为研
就像普希金说的那句深入人心的名言:世界没我们想象那么好,但也没有我们想象得那样糟糕。无论在哪个时代,即便是最悲惨的人心不古世道浇漓的年代,抑或是环境多么冰冷的年月,
保育猪由于体重轻、年龄小,对饲养环境比较敏感,饲养环境好坏直接营养保育猪的生长发育,加强保育猪的饲养管理对养猪业的健康稳步发展具有重要意义。本文主要阐述了保育猪的
[目的]探讨老年病人压疮的相关因素,为制定针对性预防措施提供依据。[方法]对229例社区卧床老年病人是否发生压疮病人(年龄≥65岁)的年龄、性别、吸烟、喝酒、文化程度、居住
畲乡周湖村位于浙江省南部山区的景宁畲族自治县的境内,距县城约10公里左右的敕木山南麓,南依敕木山,前有小坑溪蜿蜒流过.敕木山之巅就是景宁有名的惠明寺,也是享誉全国的惠