大数据中心处理系统性能优化问题研究

HDFS云存储环境中存在数据异构和虚拟机共存这两个问题,它们会引起数据可靠性和应用性能下降,为了解决这两个问题,提出一种基于位置感知的数据放置算法,以优化大数据中心处理系统性能。对此,通过对虚拟集群的相对位置进行感知,从而更好地实现数据块副本的放置,提高数据的可靠性;通过对各节点的处理负载进行预测,可提高数据处理应用的性能。最后,通过实验表明,本研究提出的位置感知放置算法缩短了接口应用时间,并使得数据具有稳定性,这就证明了该方法大大提高了数据的可靠性和应用性能,具有可行性。