搜索引擎中网络爬虫的设计

本文从网络爬虫的介绍出发,阐述了网络爬虫的搜索策略以及相关算法,包括页面解析,重复链接分析,多线程等等。并详细介绍了在vc6.0下网络爬虫的具体实现。