【摘 要】
:
Hadoop中的HDFS是大数据存储处理的关键技术之一,HDFS有着存储超大数据集高效可靠等优点,HDFS存储小文件有着明显的缺陷。HBase是有着非常高效的数据查询能力,本文目标是结合
论文部分内容阅读
Hadoop中的HDFS是大数据存储处理的关键技术之一,HDFS有着存储超大数据集高效可靠等优点,HDFS存储小文件有着明显的缺陷。HBase是有着非常高效的数据查询能力,本文目标是结合HDFS和HBase各自的优点,设计一个复合式的大数据存储系统,将大于64MB文件存储在HDFS中;大于10M小于64MB文件存储在HDFS中,将文件目录存储在HBase中,提高检索速度;小于10M的文件直接存储在HBase中,较好的解决了大量小文件存储时Name Node内存瓶颈问题。实验证明这种设计能够提高存储效率。
其他文献
本文以华能罗源2×660MW超超临界机组为例,对引风机采用电动机驱动和汽轮机驱动两种形式进行对比分析,结果表明,采用汽动引风机虽然增加了发电煤耗,但可以节省大量厂用电
目前有砟轨道在我国高速铁路中占有重要地位,研究有砟轨道质量状态的发展对高速铁路的养护维修工作具有重要意义。从轨道不平顺指数方面对胶济客运专线的轨道检查数据进行了
四川嘉陵江上石盘电航综合枢纽工程右岸厂房高边坡开挖施工中j采用梯段爆破和深孔预裂爆破技术,对边坡扰动较小,确保了边坡的稳定和安全,为类似工程高边坡施工提供借鉴和成功经
本文使用两种不同的计算方法对箱形伸缩式随车起重机起重臂强度进行计算,通过对各节起重臂危险截面的应力值进行对比,分析不同计算方法下各节起重臂应力值大小,总结出起重臂强度
随着煤矿采深不断增加,矿山压力日益突出,井下建造的普通灰砂砖风门墙体,已经不能经受围岩压力的不断增大,造成墙体严重损毁,墙体的破坏周期不断缩短。导致风门墙体维修频繁,
21201工作面为综放工作面,在端头作业过程中存在着安全系数低、耗费支护材料较大、占用生产时间较长、投入人员较多、劳动强度较大等问题。结合现场顶板特点,对端头支护工艺提
低压配电系统中,实现电涌保护器(Surge Protective Device,缩写成SPD)之间有效的配合,确保发生雷击瞬间各级SPD依次按级启动,从而保护设备免遭雷电损坏,需要对SPD各种能量配合