个人网格数据访问关键技术研究

来源 :中国科学院计算技术研究所 | 被引量 : 0次 | 上传用户:sl604
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
本文主要解决了个人网络计算环境中以个人为中心访问、组合和共享数据时遇到的问题。以个人为中心的特征包括用户拥有独立的数据空间,自主向数据空间中添加、命名、组合和共享数据。在这种使用模式下,应用开发人员需要对不同数据服务中的数据进行访问与组合、实现个人数据空间以及保证系统的可扩展性,这给应用开发带来很大的难度。本文中提出个人网格数据服务系统来实现个人网络计算环境中数据访问的共性需求,重点研究了对分布在不同数据服务中的同类数据进行统一的表示、访问与组合问题,并研究如何在分布分散的个人网格数据服务系统中对数据查询进行性能优化。   本文首先研究虚拟资源如何对关系数据、文件和有多个元数据属性的文件进行表示,通过将物理数据映射成虚拟资源,能够对同一类型的数据通过统一的访问接口进行访问和组合。本文利用个人数据空间作为用户数据的组织和使用单元,并在个人数据空间基础上设计和实现了一个分布分散的个人网格数据服务系统。根据个人网络计算环境中的负载特征和系统拓扑结构的特点,本文研究了适合系统的查询处理执行方式和查询优化技术,并提出了适合系统的虚拟资源缓存和数据缓存管理方法。本文的主要贡献如下:   1.提出了个人网格资源空间模型RSM(Resource Space Model)。资源空间模型以双结构表示的虚拟资源为基础,由物理数据空间和虚拟资源空间构成,通过映射和引用实现物理数据与虚拟资源及虚拟资源之间的关联,实现对同一类型的数据通过统一的访问接口进行访问和组合。本文研究了物理数据同资源空间的连通性性质,给出并证明了物理数据连通性的充分必要条件;提出了将文件和有多个元数据属性的文件生成虚拟资源时的正确性约束,并证明了在满足特定的模式发布规则和投影运算规则时,文件集合类型虚拟资源组合后仍然满足正确性约束。   2.提出了虚拟资源移动优先的查询执行策略。在个人网格数据服务系统中,存在两种查询执行方式:递归执行与查询重写后执行。这两种查询执行方式分别采用的是数据移动和虚拟资源移动的查询执行策略。本文形式化分析和比较了这两种查询执行策略下查询处理时间。分析表明:仅由一个结点完成查询的情况下,两种执行方式下查询处理时间近似相等,与集中式数据集成系统下查询处理时间可视为相同。当查询由多结点协同完成时,递归执行方式的查询处理时间要比查询重写方式的查询处理时间多k∑n=1(TDNM-TVNM),其中K是结点间的传输次数,TDNn是虚拟资源数据在结点间的传输时间,TVNn是虚拟资源对象在结点间的传输时间。在虚拟资源移动的查询执行策略下,本文研究了如何通过并行执行对查询处理进行优化。实验结果验证了查询优化效果。   3.提出了一个适合个人网格数据服务系统的数据缓存管理方法。这种数据缓存管理方法的特点包括根据虚拟资源全局标识进行语义相关判断和属性预取方法,与通用的语义缓存方法相比,这种数据缓存管理方法能够提高缓存命中率,降低数据查询的网络访问次数。分析表明,与通用语义缓存管理方法相比,该方法可以取得以下效果:消除了缓存项合并时信息遗失情况;查询与缓存项包含匹配时,消除了网络访问;将查询与缓存项相交匹配需要处理的3种情况变成只需要处理1种情况,这种情况下的网络访问次数从至少2次变成1次,其余2种情况转化为包含匹配的情况,可从缓存中得到查询结果。实验验证了数据缓存的效果。
其他文献
随着科学技术的不断发展,数字技术得到了飞速的发展,因而数字技术被广泛的应用于各个领域,例如数字电视、数码相机、数码摄像机等等。人工智能领域要发展,必然要进行数字化的改革
随着移动互联网的快速发展和大数据时代的到来,越来越多的网站提供了图片服务。热点人物一直都是人们关注的对象,网民也喜欢从网络中搜索热点人物的图片进行欣赏。但是在网络上
随着万维网(World Wide Web)的迅猛发展,Web用户数量的急速增加,大规模的用户数据已经成为一类重要的数据资源,受到研究和应用领域的共同关注。用户数据可以划分为两种类型:一类
随着计算机和网络技术的飞速发展,政府部门信息化建设得到很大的发展。税务部门是政府信息化建设进行较早且信息化应用水平较高的部门之一,其应用范围包括征管、稽查、纳税评估
随着计算机互联网技术的飞速发展,信息爆炸时代已经来临,如何在浩如烟海的网络资源中获取潜在的,有价值的信息就成为了非常关键的问题,因为这些信息可能在用户的管理和决策中发挥
随着互联网应用的发展,推荐系统也越来越受到大家的关注,并且在工业界以及学术界都取得了巨大的成功。传统单一维度的推荐系统已经不能满足用户个性化的需求,而上下文相关的推荐
交互式多视点视频是一种面向未来应用的全新多媒体,具有立体视觉与灵活交互等特征。对于交互式多视点视频的研究集成了计算机技术、通信技术、流媒体传输、立体显示技术、交互
随着社会的发展与进步,人们不断涉及和需要解决很多复杂的实际应用问题。传统的方法对于一些复杂的问题不能求得很好的解,所以演化算法得到了很大的重视,取得了很大的发展。演化
随着人类对地下水资源的无节制开采,地面沉降、水资源短缺等一系列环境问题越来越严重,如果不加以制止,后果将不堪设想。地下水资源的可视化是挖掘地下水隐含信息,实现地下水资源
随着网格技术的不断发展,各种类型的网格应用被开发部署,网格应用的多样性导致网格系统设计的复杂性。网格系统不仅需要提供对网格应用的管理支持,还需要提供对应用运行时的管理