论文部分内容阅读
提出基于同源网页去重与内容去重的策略.通过对网址URL进行哈希散列完成对同源网页的去重,并对内容相同或近似的网页采用基于主题概念的去重判断.实验表明,该方法有效且去重效果良好.基于上述算法实现了教育资源库教育资讯搜索引擎系统.
网页去重策略
【摘 要】
：
提出基于同源网页去重与内容去重的策略.通过对网址URL进行哈希散列完成对同源网页的去重,并对内容相同或近似的网页采用基于主题概念的去重判断.实验表明,该方法有效且去重
【机 构】
：
上海交通大学计算机科学与工程系,上海远程教育集团
【出 处】
：
上海交通大学学报
【发表日期】
：
2006年05期
其他文献
<正>日前,中国船舶工业集团为两艘20万吨级远洋船实施了"手术",使之获得思考、学习和自我诊断能力,并能告知船东"怎么航行最赚钱"。它将是中国制造的第一批智能化船舶,对航运
期刊
<正>随着全球环境问题不断加剧,国内外相继出台环保要求,如何供应低硫船用燃料油,如何回收船用燃料油尾气,如何监管燃料油是否低硫,如何使用低硫燃料油等成为行业内广泛关注
目的比较随机临床试验中等渗性碘克沙醇与非离子型低渗性对比剂(LOCM)的肾毒性。方法本Meta分析系统地检索了MEDLINE、EMBASE、BIOSIS、Web of Science、
Objective To comp
根据调研发现煤矿、钢厂和电厂的储煤场地环境污染严重,在国家环境保护与治理的大形势下都将进行棚化封闭管理。邯郸九龙煤矿对周围环境产生了很大影响,为了响应国家的号召,
主题饭店在国际舞台上日益受到关注,主题饭店作为饭店业发展的的必然趋势,是每一个饭店管理者应该了解的。在这样的发展前景下,探讨黑龙江省主题饭店的经营现状及发展趋势的
明代江南五府上供白粮乃宫廷御用。为保证大内供给,朝廷不惜一切代价足收多收白粮,白粮征收成为江南一大重役。明代白粮制度的腐朽可从加耗与改折这两个制度反应出来。自明中
从事经济史研究的学者，大概有两种路子。一种是学历史的，选择经济史作为方向。另一种是学经济的，不搞现实经济而搞经济史研究。一般说来，学历史的比较重视历史的方法，而学经济的则