基于爬虫的数据监控系统

来源 :计算机系统应用 | 被引量 : 0次 | 上传用户:ffanhaixin
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,随着互联网技术的快速发展,云计算服务开始全面普及,大型互联网公司以及中小型企业已经开始提供自己的云计算服务,中国科学院也提供了云计算服务平台——中科院"科技云".本文针对中国科学院"科技云"项目的实际需求,参考已有商业云监控系统的功能和运行模式,设计并实现了一种基于爬虫的数据监控系统.该系统相比商业云监控系统,支持URL(布尔)类型数据监测的同时,增加了对数值类型、文本类型的监测,更好的支持第三方服务的监测,并实现了服务故障警报,监测数据可视化以及监测数据分布式存储.
其他文献
Objective The aim of the study was to investigate the role of serum lactate dehydrogenase(LDH)levels in evaluating the efficacy of transcatheter arterial chemoe
Objective The aim of this study was to investigate the effects of Nordy on the proliferation,differentiation,and apoptosis of HPV16 subgene-immortalized human e
Objective This study aimed to explore the combined prognostic value of pretreatment neutrophil-tolymphocyte ratio(NLR), lymphocyte-to-monocyte ratio(LMR), and p
Aurora kinases regulate multiple steps of mitotic cell division in eukaryotic cells. Overexpression of aurora kinases has been observed in some tumor cells, whi
针对企业信息系统中的内部威胁行为,特别是内部用户的资源滥用行为,提出了一种基于Agent的实时检测框架,通过比较用户身份权限和异常操作行为发现恶意内部威胁行为.该框架有数据采集模块、检测模块、审计模块和响应模块构成.从身份认证、访问控制、操作审计和漏洞检测四个方面对检测系统进行功能说明,并就关键技术给出了详细介绍.应用实例证明该检测框架实现了用户实名登录、行为检测与事后审计,从根本上防止了恶意内部