论文部分内容阅读
海量气象数据的长期归档保存是气象局的重要业务之一,传统的数据归档方式已经不能满足需要。基于多线程流水线的气象数据光盘自动归档方法可以解决海量数据归档的问题。利用该方法针对这一问题提出很好的解决方案,并完成了系统的开发、获得较好应用效果。系统通过基于线程流水线技术的多任务并行处理机制,大大缩短了海量数据的分类、压缩、光盘数据生成与刻录的整体运行时间。该系统每天能处理981.8GB,刻录数据577.3GB（以50G的蓝光光盘为例）。