基于集群的MPI主从式并行文件传输系统的研究与实现

研究并实现了一种基于PC集群系统的MPI主从式并行文件传输系统。通过引入一个监控节点实时监控当前各真实节点上的连接数、请求任务量以及各节点的实际处理能力,并衡量不同内容节点的负载,以实现集群内各节点负载均衡,从而更合理地实现并行文件I/O的任务分配。结果显示,该系统具有近似线性加速比,即文件I/O传输速度随着并行节点数量的增多而提高。

基于并行文件的分层Web服务器群

构建了并行文件Web服务器机群.该机群采用分层结构,每层节点均作为调度器(最后层除外)和数据服务器.各层节点对外提供数据服务,并根据预设的计量标尺判断数据服务是否过量,并将过量工作转移至下层节点.建立了基于ajax和vml技术的监控服务器,对所有节点性能进行实时监控.

基于内存映射文件的进化算法数据存储引擎

为了观察和分析进化算法的执行情况,往往需要将算法执行过程中产生的大量数据存储在磁盘文件中。用于进化算法的嵌入式数据存储引擎EADB(Evolutionary Algorithm Database)提供了简便灵活的数据存储接口,通过使用内存映射文件技术来实现数据的快速和大量存储。相较于传统文件I/O存储方式和一般的通用数据存储引擎,EADB大大加快了存储速度。

工业自动化数据通讯中的超大数据文件处理

本文给出了一种方便实用的解决工业自动化数据通讯中超大数据文件的读取、存储等处理方法,并结合相关程序代码对具体的实现过程进行了介绍。

并行文件系统I/O特征

并行文件系统是并行计算系统的存储子系统,I/O性能是并行计算系统研究的重要方面。本文分析了并行文件系统I/O研究的难点,研究了并行文件系统的I/O特征和关键技术,指出了并行文件系统I/O性能研究未来的研究方向,为并行计算系统的设计和优化提供重要参考。