基于D-S证据理论的大数据融合研究——以长白山气象要素大数据为例

随着我国旅游业日益繁荣,前往长白山旅游的人也愈来愈多,能否看到长白山最重要的景点——天池是大家非常关心的问题。在大数据背景下,通过基于D-S证据理论的数据融合研究,对长白山气象要素数据进行智能分析,可以帮助游客提供科学参考,选行至长白山旅游的最佳日期。

长白山生态数据爬取及清洗研究

在开展长白山生态数据智能分析时,需要爬取大量的网络数据,这些数据大概率会出现缺失、重复、异常、噪声等情况,因此需要对爬取到的数据进行必要的清洗的功能。设计了一种爬虫,并实现了数据清洗的功能,实验证明,100万条数据的爬取用时<30 min。