基于Map-Reduce的自适应双语短语挖掘系统

• 作 者: 李彬 杨世泉 陈文杰
• 机 构: 中国人民解放军78300部队自动化工作站,阿里云计算有限公司
• 出 处: 昆明学院学报
• 发表日期: 2013年3期
• 关键词: 自适应模式 双语短语 Map-Reduce并行计算框架 分布式计算 adaptive pattern bilingual term Map-Reduce par

对于跨语言信息检索,统计翻译等应用,双语短语都是极其重要的资源.提出了基于自适应模式的双语短语挖掘算法,该算法可以自动的学习当前Web页面的翻译模式,然后利用学习到的模式抽取当前页面中的双语短语.同时,将自适应双语短语挖掘算法与Map-Reduce并行编程模型融合起来,大大提高了系统的运行效率,并且通过实验验证了该方法的有效性.