基于云计算的Web教育爬虫

来源 :东北师范大学 | 被引量 : 4次 | 上传用户:dingjk3883085
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
云计算技术是当前计算机科学的一个热门技术。云计算技术整合了网络资源,为能够以任何形式接入互联网的用户提供了方便。对于高校来说,云计算技术的出现无疑会为高校教学和管理带来巨大的变革。单从教学资源而言,由于互联网上的资源数量成指数增长,面对如此巨大规模的资源,云计算的分布式存储模式无疑是解决海量存储的一个有效手段。高校可以通过各种公共云、私有云、企业云以及教育云的构建和参与,来实现对海量教育资源的存储。云计算技术在解决了海量教育资源的存储问题的同时,也提供了大量基于各种不同技术的资源检索方式。由于云计算分布式存储模式,基于分布式搜索技术的各种搜索技术开始引起研究者们的注意。如何利用这些技术帮助云搜索,帮助高校、教师、学生有效的检索教育云中的资源,成为了研究云计算检索的教育者们的一个研究方向。本文通过对云计算和云计算辅助教学的探讨,提出云计算技术对于教学,尤其是远程教学起到一定的促进作用。通过对分布式存储、数据挖掘技术以及分布式搜索技术进行研究,证明基于分布式搜索技术是解决云计算搜索技术的一种有效手段。最后通过设计使用分布式网络爬虫nutch来查找分布式存储模式下的资源,期待为今后的研究者们提供一种思路。
其他文献
“夜雨八方战孤城,平明剑气看刀声。侠骨千年寻不见,碧血红叶醉秋风。”仗剑倚马,踏遍江湖,几多情愁,是谓豪杰。这是多少热血男儿追逐的梦想。2009年,隆鑫通过走细分路线来满
通过对黑龙江省高等学校高水平男子篮球队运动员身体基本情况、基本体能、专项体能进行分析建立体能评价体系,客观、定量的评价黑龙江省高等学校高水平男子篮球队运动员体能
本文以某巷道工程为实例,在分析巷道围岩相关影响因素的基础上,进一步对注浆锚索在软岩破碎巷道维修支护中的应用及效果进行探究,希望以此为软岩破碎巷道维修支护设计的完善
众所周知,听力一直为中考的必考内容,且占分值比例较大,但同时听力也是令广大师生头痛的问题,我认为,提高初中学生听力能力是目前初中英语教学的关键.作为教师,我们应该提高
词块是自然语言中兼具句子特征和词汇特征的语言结构(包括半固定或固定短语),并以整体的形式存储在大脑中。近年来,随着语料库语言学及语用学的发展及应用,词块日益受到国内外语
学位
初中思想品德课程是一门以学生生活为基础,以引导和促进初中学生思想品德发展为根本目的的综合性课程,在培养学生德育方面具有指导意义.从思想品德课堂生活化教学的现状出发,
从注意力的角度研究阅读障碍的成因是当前该领域的一个研究热点。本研究基于前人的研究,以阅读障碍儿童(以下简称为DD),生理年龄匹配组儿童(以下简称为CD)、阅读水平匹配组儿
随着新课程改革的不断推进,我国的初中数学教学中暴露出很多问题。学好数学,能够应用于生活中的各方面,有益于学生个人的长远发展,而初中数学是以后数学学习的基础。主要从两
期刊
以往关于孤独症谱系障碍者面孔识别的研究都较一致的证明了孤独症谱系障碍者对面孔存在一定的识别障碍,但孤独症谱系障碍者是否会在对不同民族进行面孔识别时存在“本族效应