期刊文献+
共找到1篇文章
< 1 >
每页显示 20 50 100
面向网络爬虫的高可用动态池系统设计与实现 被引量:2
1
作者 王佳鹏 徐海蛟 +2 位作者 许培宇 何佳蕾 林冠成 《福建电脑》 2019年第6期8-11,共4页
大数据时代下,大规模采集Web数据的网络爬虫显得越来越重要。为解决爬虫IP的访问频率受限问题,提出了一种高可用动态代理池系统,从而解除IP访问频率限制,提高了网络爬虫性能。通过带有动态池系统的爬虫实验,验证了该系统的可行性与有效性。
关键词 IP代理池 IP访问频率 网络爬虫 NOSQL
下载PDF
上一页 1 下一页 到第
使用帮助 返回顶部