基于GridFTP的并行数据传输性能分析与研究

分析论述了广域网格网络中数据传输的需求以及网格数据传输协议—GridFTP的性能特点,对GridFTP中最重要的并行传输机制进行了探讨。通过大量实验测试对不同并行度下数据传输的时间、带宽、吞吐量、数据传输总量等性能参数进行了比较,讨论了并行度对传输性能的影响,提出了并行传输机制在提高传输性能方面的局限和值得注意的问题。

面向CDN网络的高效海量数据分发机制研究

针对CDN网络中海量数据分发的要求,设计了一种基于CDN服务器P2P服务的高效数据分发机制,通过对分割后的海量数据分别执行P2P数据分发,克服了现有CDN服务器P2P服务不能根据Internet网络带宽和CDN服务器负载动态变化自适应地调整数据分发过程的缺点。仿真结果表明,提出的海量数据分发机制提高了网络带宽波动对数据分发的性能,能够较好地满足实际CDN网络中海量数据分发的需求。

远程教育中网格分布式技术服务探讨

网格是21世纪发展起来的构筑在互联网上以实现资源可控化共享为目的的基础设施。网格计算是一个新出现的名词,也是近年来兴起的一个研究热点,本文对网格的概念、特点、进行简要介绍,并对计算机网格技术在远程教育中的应用进行分析。

Hadoop海量数据迁移系统开发及应用

当前高能物理实验产生的数据量越来越大,利用大数据处理平台Hadoop进行高能物理数据处理时,面临数据迁移的实际需求,而现有迁移工具不支持HDFS与其他文件系统间的数据传输,性能存在明显缺陷。从高能物理数据同步、归档等需求出发,设计和实现了一个通用的海量数据迁移系统,通过扩展HDFS数据访问方式,使用Map-Reduce直接在HDFS数据节点和其他存储系统/介质之间迁移数据。此外,系统设计实现了动态优先级调度模型,进行多任务的动态优先级评定和选取。该系统已经应用于大型高海拔空气簇射观测站(LHAASO)宇宙线等物理实验中的数据迁移,实际运行结果表明系统性能良好,能够满足各个实验的数据迁移需求。

对等导航服务网格平台的设计与实现

针对网格环境下导航地图数据的共享与管理问题,文章提出以多级分区空间索引目录结构为基础的对等导航服务网格体系结构:分析了对等导航服务网格平台实现的关键技术,并基于Globus Toolkit设计实现了对等导航应用服务网格实验平台,提供了全国范围的地图浏览、定位监控、路径分析等服务。实验结果表明该平台能为位置服务应用提供高效的服务。