大数据时代的云存储技术

来源 :城市建设理论研究 | 被引量 : 0次 | 上传用户:naonao19890925
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
  【摘要】本文首先介绍了大数据时代介绍及云存储概念,其次探讨了云存储分类及优势,最后探究了云存储的结构模型及两大框架,并且提出了云存储发展需要注意的问题。
  【关键词】大数据;时代;云存储;技术
  中图分类号:TP334.5文献标识码: A 文章编号:
  
  一、前言
  随着我国信息技术领域的不断发展,我国的网络行业的发展迅速,并且取得了相应的成就。云存储技术的发展,使大数据的存储成为可能,使人们的生活更加便捷,各行业得到更好的发展,我们应该更多地了解云存储,使云存储为人类做贡献。
  二、大数据时代介绍及云存储概念
  1、大数据时代介绍
  大数据到底有多大?一组名为/互联网上一天的数据告诉我们,一天之中,互联网产生的全部内容可以刻满1.65亿张DVD;发出的邮件有2940亿封之多(相当于美国两年的纸质信件数量);发出的社区帖子达200万个(相当于5时代6杂志770年的文字量);卖的手机为37.8万台,高于全球每天出生的婴儿数量37.1万。
  2、云存储概念
  云存储是在云计算概念上延伸出来的一个新概念,它是指通过集群应用、网格技术或分布式文件系统或类似网格计算等功能联合起来协同工作,并通过一定的应用软件或应用接口,对用户提供一定类型的存储服务和访问服务。让云存储成为企业私有云,使得企业能够将资源切换到需要的应用上,根据需求访问备份的数据。它将备份服务器,备份软件、存储设备集合在一起,形成云存储。
  三、云存储分类及优势
  1、云存储分类
  按照服务对象可以把云存储分类如下:
  (1) 公共云存储。公共云存储可以以低成本提供大量的文件存储。供应商可以保持每个客户的存储、应用都是独立的、私有的,公共云存储可以划出一部分来用作私有云存储。
  (2) 私有云存储。通过私有云存储,一个公司可以拥有或控制基础架构,以及应用的部署。私有云存储可以部署在企业数据中心或相同地点的设施上。私有云可以由公司自己的 IT 部门管理,也可以由服务供应商管理。相比传统存储模式,云存储的租购模式显得更加灵活方便,其实,企业自己构建一个数据中心需要购买硬件等必备设施及复杂多变的维护管理。
  (3) 混合云存储。这种云存储把公共云和私有云结合在一起。主要用于按客户要求的访问,特别是需要临时配置容量的时候。
  2、云存储的优势
  存储容量大、成本低 :根据用户岗位和需求合理分配空间,用户不用担心空间不足。同时大大减少移动存储设备的使用,降低了企业成本。
  (1)易扩展 :根据服务器使用人数和空间扩展存储空间,不影响前端用户的使用。
  (2)可靠安全 :数据同步有效避免了介质存储数据造成丢失损坏的问题。同时对服务器采用磁盘阵列和磁带脱机备份方式,保障了云存储的安全。
  (3)高效便捷 :企业内部构建的私有云存储,高速局域网提高了访问速度。提高资源利用率 :将数据集中起来,用户可以在任何地点,依靠单机或移动设备随时访问数据。实现网内资源共享和协同工作,减少了传统的资源交换,提高资源利用率。
  四、云存储的结构模型及两大框架
  1、云存储的结构模型
  云存储系统的结构模型由 4 层组成。
  (1)存储层
  存储层是云存储最基础的部分。存储设备可以是FC光纤通道存储设备,可以是NAS和iSCSI等IP存储设备,也可以是SCSI或SAS等DAS存储设备。云存储中的存储设备往往数量庞大且分布多不同地域,彼此之间通过广域网、互联网或者 FC 光纤通道网络连接在一起。
  (2)基础管理层
  基础管理层是云存储最核心的部分,也是云存储中最难以实现的部分。基础管理层通过集群、分布式文件系统和网格计算等技术,实现云存储中多个存储设备之间的协同工作,使多个的存储设备可以对外提供同一种服务,并提供更大更强更好的数据访问性能。
  (3)应用接口层
  应用接口层是云存储最灵活多变的部分。不同的云存储运营单位可以根据实际业务类型,开发不同的应用服务接口。
  (4)访问层
  任何一个授权用户都可以通过标准的公用应用接口来登录云存储系统,享受云存储服务。云存储运营单位不同,云存储提供的访问类型和访问手段也不同。
  2、云存储技术的两大架构
  传统的系统利用紧耦合对称架构,这种架构的设计旨在解决 HPC( 高性能计算、超级运算 ) 问题,现在其正在向外扩展成为云存储从而满足快速呈现的市场需求。下一代架构已经采用了松弛耦合非对称架构,集中元数据和控制操作,这种架构并不非常适合高性能 HPC,但是这种设计旨在解决云部署的大容量存储需求。各种架构的摘要信息如下:
  (1)紧耦合对称 (TCS) 架构。
  构建 TCS 系统是为了解决单一文件性能所面临的挑战,这种挑战限制了传统 NAS 系统的发展。 HPC 系统所具有的优势迅速压倒了存储,因为它们需要的单一文件 I/O 操作要比单一设备的 I/O 操作多得多。业内对此的回应是创建利用TCS 架构的产品,很多节点同时伴随着分布式锁管理 ( 锁定文件不同部分的写操作 ) 和缓存一致性功能。这种解决方案
  对于单文件吞吐量问题很有效,几个不同行业的很多 HPC 客户 已经采用了这种解决方案。这种解决方案很先进,需要一定程度的技术经验才能安装和使用。
  (2)松弛耦合非对称 (LCA) 架构。
  LCA 系统采用不同的方法来向外扩展。它不是通过执行某个策略来使每个节点知道每个行动所执行的操作,而是利用一个数据路径之外的中央元数据控制服务器。集中控制提供了很多好处,允许进行新层次的扩展:
  ①存储节点可以将重点放在提供读写服务的要求上,而不需要来自网络节点的确认信息。
  ②节点可以利用不同的商品硬件 CPU 和存储配置,而且仍然在云存储中发挥作用。
  ③用户可以通过利用硬件性能或虚拟化实例来调整云存储。
  ④消除节点之间共享的大量状态开销也可以消除用户计算机互联的需要,如光纤通道,从而进一步降低成本。
  ⑤异构硬件的混合和匹配使用户能够在需要的时候在当前经济规模的基础上扩大存储,同时还能提供永久的数据可用性。
  ⑥拥有集中元数据意味着,存储节点可以旋转地进行深层次应用程序归档,而且在控制节点上,元数据经常都是可用的。
  五、云存储发展需要考虑的主要问题
  由于云存储具有传统数据存储模式不具备的诸多优势,越来越多的中小企业正在将自己的数据中心逐渐转移至云端。而大型企业除了租用公共云存储服务以外,也开始着手建立自己的私有云存储数据中心。但是,云存储仍处于快速发展阶段,云存储要想得到广泛应用,还有待进一步完善和改进。
  1、安全问题。数据存储在云计算中心,安全问题始终是用户最为关注的问题。用户的敏感信息和个人隐私数据如何才能保证其具有安全性和私密性,云存储服务提供商应根据分布式文件中可能存在的安全威胁和安全需求,来制定相应的安全策略,以便在计算机中实施相应的保护机制,确保用戶数据避免丢失或被窃。
  2、可靠性问题。可靠性是数据存储系统最基本也是最关键的一项指标。数据的备份复制是云存储管理中心必须考虑的问题,而且数据的备份复制可以大大提高云存储系统的可靠性和性能,同时能够增强系统的容错能力。如果云存储数据遭到破坏,云存储服务提供商应该能够快速全面地恢复数据,确保用户数据的完整性。
  六、结束语
  随着信息时代的到来,我国的互联网络发展迅速,在网络上的数据是相当巨大的。云存储的发展,使得我们能够存储更多的数据,以方便我们日后快捷的使用,云存储不仅仅是存储,更多的是应用,是云计算时代的一场存储革命。相信未来的云存储技术会得到更好的发展。
  参考文献
  [1]刘贝,汤斌.云存储原理及发展趋势[J].科技信息,2011(05).
  [2]朱光磊.云存储技术的发展应用趋势探析[J].电脑知识与技术,2011.
  [3]宋凯,耿义.云存储技术[J].科技天地,2002.
  [4]高东升.大数据时代的云存储技术[J].技术应用,2008.
其他文献
【摘要】本文首先介绍了WEB数据库的概念,其次探讨了WEB数据库安全性的内容、WEB数据库的安全要求及受到的安全威胁,最后重点探究WEB数据库的安全访问技术分析。本文的研究有重要的理论意义,对WEB数据库安全的保证有提供依据。  【关键词】WEB;数据库;安全;访问;技术  中图分类号: C37 文献标识码: A 文章编号:    一、前言  随着全球化的进程的不断推进,我国的信息技术行业取得了巨
【摘要】本文首先介绍了个人计算机维护现状,然后探讨了维护或优化方案、接入与非接入网络个人计算机的信息安全问题。本文的研究具有重要的理论与实践价值,为个人计算机的系统维护与安全防范提供依据。  【关键词】个人计算机;系统维护;安全;防范  中图分类号:G623.58文献标识码: A 文章编号:    一、前言  随着现代信息技术的快速发展,我国的计算机行业取得了前所未有的成就。个人计算机的发展,使人
【摘要】随着信息化技术的发展,许多网络都已实现无线网络的全覆盖,这使得上网变得更加方便快捷。但是不得不注意的另一个问题就是网络的安全性问题,本文主要阐述无线网络的安全防范措施。  【关键词】无线网络,安全防范措施  中图分类号:P624.8文献标识码: A 文章编号:    前言  无线网络作为一种新兴的便捷性网络资源,已经逐渐得到普及,尤其是在办公场所。然而,在逐渐快速化的现代生活,网络的安全性
摘要:文章从地层评价方法、储层保护措施建议等方面对页岩气钻井储层保护技术进行了论述。  关键词:页岩气;钻井;储层保护  中图分类号: TE2 文献标识码: A 文章编号:  随着我国经济的发展,城市化、工业化进程的加快,对能源需求急剧增加,能源的供需矛盾也越来越突出。当今世界各国纷纷寻找替代能源,以解决能源不足问题。天然气的开发生产占世界能源的及其重要地位,尤其非常规天然气类型和赋存形式多样,分
【摘要】随着人们生活空间的不断扩大,人们对于信息存储设备以及许多高科技产品的要求却是朝着最小化发展。CPU作为具有计算能力的电路结构,既成了成千上万的晶体管,甚至作为控制器,所以CPU的维护以及优化也就显得尤为重要。本文主要介绍有关CPU的维护以及优化技巧。  【关键词】CPU的维护,CPU的优化  中图分类号: TP332 文献标识码: A 文章编号:    前言  CPU的重要性自然不言而喻,
摘要:在当前我国加快推进社会主义现代化建设的重要战略时期,城市化进程越来越快,建筑工程施工也得到长足的发展,对工程施工的造价管理的要求也越来越严格。本文将重点分析建筑工程中的地基基础工程造价管理,对建筑施工项目节约成本的具体方法进行探讨。  关键词:建筑地基 基础工程 施工造价 管理  中图分类号:TU723文献标识码: A 文章编号:    前言  地基基础施工中桩基础、地下连续墙等工程施工的主
【摘要】本文首先介绍了基于内容的视频检索技术含义、基于内容的视频检索的特点及现状,其次探讨了镜头边界检测、关键帧的选取、特征提取及视频聚类。本文的讨论具有重要的理论价值,同时也为基于内容的视频检索技术提供依据。  【关键词】基于;内容;视频检索;技术  中图分类号:TN941.2文献标识码: A 文章编号:    一、前言  自从改革开放以来,我国的信息技术取得了前所未有的发展,同时也推动着其他行
摘要:随着我国经济的不断发展,水利工程建设的规模也在不断的扩大。水利工程事关国计民生,因此其质量问题是人们最为关心的焦点。然而,在水利工程建设中,很多因素都会导致其质量受到影响,所以加强水利工程建设质量管理是当前我国水利工程建设中的重要工作中之一。  关键词:水利工程;质量管理;措施  中图分类号:TV文献标识码: A 文章编号:  引言  就工程项目而言,质量管理是一个企业最为重要的管理内容,只
【摘要】网络技术是我国重要的技术类型之一,对我国国民经济的增长和人民生活水平的提高都有着重要的影响,无源光网络技术作为一种新的技术类型,以其独特的优势在各个领域得到了广泛的应用,因此,探讨无源光网络技术具有重要的社会现实意义。  【关键词】无源光,网络技术,分析,探讨  中图分类号: G250.72 文献标识码: A 文章编号:    一、前言  无源光网络技术是一种比较先进的网络技术之一,在各个