一种分布式微博数据采集平台的设计与实现

为了解决研究微博数据时面临的数据采集问题,本文提出了一种基于分布式的数据采集平台。测试表明,该系统成本低、扩展性好、效率高,可广泛应用于基于微博数据的舆情分析以及传播学和网络社会学等方面的研究,作为其基础数据采集平台。