论文部分内容阅读
网络信息时代所要面对的是急剧膨胀的信息量，当前的互联网信息规模已经是集中式爬虫无法适应的，单机爬虫逐步开始被分布式爬虫所取代，在信息的采集中，高性能的爬虫系统才是研究的重点。文章则对分布式爬虫系统进行了介绍，针对其设计以及实现进行了分析论述。
分布式爬虫系统的设计与实现
【摘 要】
：
网络信息时代所要面对的是急剧膨胀的信息量，当前的互联网信息规模已经是集中式爬虫无法适应的，单机爬虫逐步开始被分布式爬虫所取代，在信息的采集中，高性能的爬虫系统才是研究的
【机 构】
：
北京网博视界科技有限公司
【出 处】
：
中国科技信息
【发表日期】
：
2014年15期
【基金项目】
：
资助项目：本论文的研究工作受国家科技支撑计划项目资助（项目编号：2012BAH04F04）
其他文献
目的：评价ＭＲＩ诊断急性心肌梗塞（ＡＭＩ）的价值，材料和方法：２１例首次患ＡＭＩ患和５例无心脏病的志愿者进行了ＭＲＩ自旋回波Ｔ１加权，Ｔ２加权和增强扫描。结果：（１）急性梗塞心肌在Ｔ２加权像上呈高信号强度（ＳＩ）且梗塞心肌与正常心
光合作用这一现象是1771年发现的,迄今已200多年,其主要的化学形式是二氧化碳和水在绿色植物中经太阳光照射,转变成碳水化合物和氧气。可以用下式表示: CO<sub>2</sub>+H<sub
目的探讨支气管动脉灌注(BAI)治疗晚期肺癌的联合化疗方案,了解不同病理类型的肺癌对西艾克、卡铂、丝裂霉素联合支气管动脉内灌注治疗有无差异,以及根据支气管动脉造影(BAG)
数据库管理系统中包含一个很重要的部分——数据库恢复。在计算机的世界里，存在着各种隐患和威胁，系统的故障、操作员的失误、故意的破坏以及硬件故障都有可能会造成数据库不能
马铃薯与棉花间套种植的高产高效栽培模式，是徐淮地区大蒜、洋葱与棉花立体种植模式的有益补充，通过对该模式技术的集成和示范，介绍了徐淮地区马铃薯与棉花间套高产高效种植模式
高中文化课是现代科学的基础知识,如何顺应现代科学既高度分化又高度综合的发展趋势,在生物课的双基教学中,向学生贯彻不同学科间知识横向联系的观念.并通过相应的教学手段,
新建广州至汕尾铁路位于广东省中东部,本线填补了广州枢纽东线铁路空白,加强了省会广州向东的辐射能力,为沿线城市布局和产业发展提供了广阔的发展空间。针对广州至汕尾铁路
靖神铁路隆德支线位于榆神矿区中部地带神木县境内,其建设对解决隆德煤矿煤炭对外运输能力、促进地区经济社会发展具有重要意义。本线为地方铁路,采用自营自管模式,最终引入
患者女,34岁.因左耳听力下降、耳鸣1年.查左耳听力消失,外耳道无红肿溢脓,鼓膜完整,MRI检查示左侧中颅窝颞骨处可见一不规则异常信号影,大小约3.3 cm×2.9 cm×2.7 c
目的 评价周围型肺癌钙化的CT征象及诊断意义。材料与方法 98例经CT检查并有病理证实的周围肺癌中，17例可见钙化。其中腺癌10例，鳞癌5例，肺光癌2例。用2－3mm薄层扫描评价的钙化