基于Spark的工业大数据处理可视化平台应用研究

基于Spark利用Java Web技术研究设计了工业大数据处理分析的可视化平台,用户不需要去了解大数据开发平台的底层细节,只需要在Web界面端根据数据分析需求定制任务,然后提交给平台处理再等待结果输出。分析了工业大数据与传统数据的不同点。简单介绍了如何利用Spark MLlib机器学习算法去分析工业大数据。分析介绍了在可视化平台搭建所要处理的一些技术问题,技术原理,制定了平台搭建的流程。最后对可视化平台进行了测试以及总结了应用研究中存在的问题。