几种微博数据抓取方法比较研究

微博(Micro Blog),即微型博客,是博客的微型化,允许用户使用最多140字来向外发布消息,实现即时共享。web2.0时代微博已成为重要的网络信息来源,充分利用微博信息对舆情观测、情感倾向分析、热点识别等具有重要意义,如何快速有效抓取微博数据成为研究热点。本文分析对比了几种微博数据抓取方法并实现了基于代理IP的微博数据抓取方法,实验测试表明,该方法能够比较快速有效地采集新浪微博信息。