基于JSSh实现身份认证网站信息采集

网络媒体监控系统需要对部分网站进行自动身份认证和网页采集。受到Web自动化功能测试的启发,文中提出了基于JSSh(JavaScript Shell Server)实现身份认证网站发布信息采集方案。最后通过实验证明,与重构身份认证过程数据包交互方式相比,基于JSSh实现身份认证网站发布信息采集的普适性更强,并且实现过程更为简单。实验表明,该方案身份认证成功率高,采集效率也符合网络媒体监控系统对于信息采集实效性的要求。

基于JSSh的动态网页获取研究与实现

网络媒体监控系统需要采集大量的动态网页。提出了基于JSSh(JavaScript Shell Server)的动态网页获取方案,将动态网页的解析工作交给有成熟网页排版功能的Web浏览器,最后通过实验证明,基于JSSh的动态网页获取方案的普适性很强,并且可靠性高。实验表明,该方案的获取效率也符合网络媒体监管系统对于信息采集实效性的要求。