ETL技术在数据仓库系统中的研究与应用

• 作 者: 黄诗瑶
• 机 构: 广州市地下铁道总公司运营事业总部线网管控中心清分系统部,广州 510030
• 出 处: 第十届中国智能交通年会
• 发表日期: 2015年期
• 关键词: ETL技术 数据仓库系统 地铁清算系统 应用概况 问题 数据核对 数据抽取 任务调度

　　本文从ETL技术在广州地铁清算系统数据仓库的应用概况出发，首先，分析了应用中存在的数据抽取失败、作业配置不合理、数据核对过程中产生锁表现象等问题；其次，从解决上述问题、提高ETL效率的角度出发给出了优化查询语句、调整任务调度配置以及采用合理的内存配制策略的建议，并在应用中逐一实施。结果表明，在实际的应用中这几点建议都是有效的。最后，提出了在未来工作中可以考虑异构ELT技术。