基于Hadoop交通信息并行处理云平台的设计与实现

被引量 : 9次 | 上传用户:baiqing001
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着社会的发展和城市化的加快,机动车的数量呈现爆炸式的增长。但有限的地理空间和紧缺的土地资源,使得人、车、路之间的交通矛盾日益突出。并且随着计算机网络和信息采集技术的发展,日常需要处理的交通数据也逐步增多。而传统平台在面对大数据问题时显得捉襟见肘,这使得所面临的交通问题越来越严重。可喜的是,目前出现了许多成熟的大数据处理技术,为智能交通系统的发展带来了新的思路。本文设计的主要出发点是通过将Hadoop、HBase与现有交通云平台进行整合,实现新一代智慧交通云平台,从而增加平台大数据处理的能力,改善现有的交通系统。本文研究的主要内容有:1.Hadoop、HBase集群多节点部署:本文在基于v Sphere所构建的多虚拟节点上搭建Hadoop与HBase集群,作为新一代交通云平台的底层基础。2.交通基础服务的设计与实现:本文给出了两种交通服务的设计与实现方案,一种是针对原始交通数据所开发的数据中心统一化服务,从而解决数据输入的问题。另一种是为使已有云平台获得大数据处理能力而设计的并行计算和大数据存储服务。3.交通应用架构设计与案例实现:本文设计的交通应用架构体系体包括交通核心应用和交通智慧应用,其作用是验证新一代交通云平台功能。其中交通核心应用主要功能是基于Map Reduce框架对交通数据做计算与分析,而交通智慧应用是将计算结果以可视化的角度展示给用户。通过应用的成功部署、运行从而可以验证平台整合方案的可行性、正确性。4.Hadoop、HBase集群与原有交通云平台整合:本文在基于Socket通信方式的基础上,实现了Hadoop、HBase集群与原有云平台功能的整合,使得新一代智慧交通云平台拥有大数据处理的能力。用户通过整合后的平台入口上传并运行应用,从而获取大数据计算和存储能力。本文提出了通过融合Hadoop、HBase集群构建交通信息并行处理云平台的设计方案,从而解决交通领域大数据的难题。同时在此基础上给出了交通应用架构和服务设计方案,为智能交通系统的发展做出了贡献。
其他文献
随着人工智能的迅速发展,语音识别的技术越来越成为国内外研究机构的焦点。人们致力于能使机器能够听懂人类的话语指令,并希望通过语音实现对机器的控制。语音识别的研究发展
研究了丁烯氟虫腈、啶虫脒、杀虫单、烯啶虫胺4种单剂以及丁烯氟虫腈·啶虫脒、丁烯氟虫腈·烯啶虫胺、杀虫单·啶虫脒3种复配剂对褐飞虱的室内生物活性和田间药效。室内生物
我国东西部经济发展水平的差距,根本和直接的原因可归结为西部金融资源配置的区域性失衡。制约西部金融发展的主要因素有经济发展水平低、金融体制制约、金融抑制严重、资本市
以内蒙古呼伦贝尔草甸草原放牧草地和围封草地为实验样地,通过对两种样地羊草的水分关系、气体交换、渗透调节等生理生态学特性进行测定分析,比较研究放牧干扰对羊草的光合特
基于简单二次函数模型,结合非精确大步长Armijo线搜索技术,建立了一个新的求解无约束最优化问题的组合信赖域与线搜索算法,在目标函数梯度▽f(x)在R~n上一致连续条件下证明了算
随着计算机规模的不断扩大,应用软件的失效中止故障的发生几率也随之增长,如何保障软件的生存性,使其在遭遇失效中止故障时能快速恢复,持续地提供服务是一个急需解决的问题和
链霉菌来源的谷氨酰胺转胺酶(microbial transglutaminase,MTG)以酶原(pro-MTG)的形式表达,需要蛋白酶将其活化。蛋白酶有降解MTG及其底物的可能,且增加MTG的分离纯化成本。
目的:以采后黄冠梨为试材,系统研究梨果实在贮藏期间抗氧化能力的变化和涂膜处理对抗氧化活性的影响。方法:采用CaCl2和普鲁兰多糖涂膜处理梨果实,主要对梨果实不同组织部位
数字视频技术是国家重点发展的信息产业领域的重要组成部分,随着宽带网络和数字电视的迅速发展,特别是在数码相机、数码摄像机等高科技产品的推动下,视频点播、交互电视、视
多处损伤和广泛分布疲劳损伤是影响军用老化飞机结构完整性的主要因素之一。三维裂纹前缘应力应变场很复杂 ,除个别理想情况外 ,绝大部分迄今为止无解析解。采用三维 2 0节点