论文部分内容阅读
广东教师研修网是由广东省外语艺术职业学院主办的远程继续教育网站。网站的课程开发由广东外语艺术职业学院和广东教师研修网共同负责，由省内学科首席专家和省内外有关专家教授、一线教师或教研员组成课程开发团队。现代远程教育是伴随着现代信息技术的发展而产生的一种新型教育方式。学员可在家中，任职学校或当地教师进修学校，通过播放视频专题、阅读拓展资料、完成课堂作业。参加在线讨论研修，共同开展课例评析和教学研究，在课程支持团队的引导与支持下开展培训课程的学习。因此，远程教育网站除了由课程开发团队开发的主要课程之外，还需要大量的学习资源和教育讯息提供给学员进行学习和参考。万维网是一个巨大的信息资源库，有大量相关数据可以加以利用，但是普通的搜索引擎所提供的信息检索服务却无法满足对个性化服务的需要。因此，面向特色服务的WEB数据采集系统的研究具有重要意义。基于此目的，本论文分析了网页数据采集及监控系统的功能需求，研究了Http、Ftp、Smtp网络协议，并结合Quartz作业调度框架技术，实现了对数据自动采集、自动归类、远程同步、采集结果汇报等全程无人值守监控。系统采用J2EE软件技术架构，基于MVC模型进行开发。最终将整合成研修网中一个面向网站维护人员的Web应用，让用户可以直接在Web界面上配置监控属性，真正达到我们的总目标，即实现一个面向主题的且富有用户个性化体验的自动化采集及监控一体化管理系统。