第三方数据接入方法的探索与实践

本文分析了通过通用外部数据对接模块接入第三方数据的相关问题,希望对相关行业或业务更加合理地配置第三方数据源的接入、判断数据质量优劣、充分利用第三方数据价值有所帮助。

基于Node.js的分布式爬虫系统

本文是基于Node.js平台开发的分布式爬虫系统。重点介绍了系统的结构框架、Master节点及Worker节点的功能等。系统具有分布式、扩展性好、敏捷易用的特点,对大规模数据采集具有一定的借鉴作用。