基于Scrapy和Elasticsearch的校园网搜索引擎的研究与实现

来源 :科技资讯 | 被引量 : 0次 | 上传用户:curarchy
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
针对通用搜索引擎无法及时收录校园网内信息和收录时间滞后的问题,基于Scrapy框架和Elasticsearch全文搜索引擎,提出了一个完善的校园网搜索引擎解决方案。该文主要分析了Scrapy的运行流程,对Elasticsearch的搜索机制进行了研究,在此基础上设计了校园网搜索引擎的系统架构,给出了系统的网页抓取模块、索引检索模块、页面展示模块的关键实现技术。最后通过实验验证,相比于传统的通用搜索引擎,该文设计的校园网搜索引擎的搜索结果相关性更好,数量更多,对于校园网内新信息的收录情况更好。
其他文献
陕京二线输气管道工程的部分标段位于黄土塬地区,该地区地形复杂,地势险峻,主要由冲沟和黄土坡组成,施工作业场地狭小,如果采用大开挖法施工,不仅对环境、植被破坏大,土方量大,而且地
众筹是大数据时代背景下互联网金融的新商业模式,其中文化创意产业融资是众筹商业网站平台上的主要项目内容。通过分析众筹出版融资模式的运营机制,提出众筹是我国出版业可以
分析芒针调气法与"圆运动"关系。芒针针长深刺,结合了长针和毫针的优点,贵在调气。芒针调气重脾胃,调肝肺,可宣畅上焦、疏调中焦、通利下焦,使"轴"得固,"轮"随之旋转,"圆运动
21世纪以后,随着我国经济的快速发展,航空运输量在不断增加,导致空中交通航线拥挤、机场航班时常延误、管制员的工作量超负荷等问题频发。因此,对空中交通管制安全间隔问题进
印染行业是我国最大的工业废水产生行业之一,其废水具有可生化性差、色度高、碳氮比低、有机物含量大、成分复杂以及水温、水质、水量变化大等特点。针对印染废水的这些特点,目
结合某橇装钻机刹车毂裂纹失效实例,查找刹车毂产生裂纹非正常失效的主要原因。对比使用的三种刹车毂材料,对其进行技术及经济性分析。
随着我国改革开放的不断深入,人们的物质生活已获得很大程度有改善,城市化进程逐渐加快日趋明显,而新农村建设也不甘落后一路高歌猛进。如今国家无不在倡导建设低碳环保型社
过去一般认为 ,前列腺特异性抗原 (PSA)主要存在于男性体内 ,临床上测定PSA主要用于对男性前列腺癌的诊断和鉴别诊断。近年来研究证实 ,PSA亦存在于女性体内 ,并且有着重要意
翻译作为一种特殊形式的交际认知活动,融入了会话理解及认知推理的建构过程。关联理论着眼于交际与认知的关系,因此对翻译具有强大的解释力。本文欲借会话含意其初始之名探析
随着工农业的发展和人口的增加,产生了大量的氨氮废水,这些废水排入江河湖泊会造成富营养化等危害,目前对氨氮废水的处理技术主要有物理化学法和生物处理法,这些方法存在着产