一种支持网络硬盘存储系统的大数据传输技术

随着网络的迅速发展和普及,网络硬盘存储系统的应用越来越广泛.但现有的网络硬盘存储系统在超大数据文件传输、传输过程的内存占有率、数据安全性及断点续传等方面仍存在着一些缺陷.针对这些问题提出一种高效便捷的DTOSS(Data Transmission in Online Storage System)数据传输技术.DTOSS数据传输技术基于服务器端的目录树结构,利用分块传输的思想,实现了超大数据文件的传输.同时DTOSS技术还提高了数据的安全性,压缩了传输过程中的内存开销,并实现了超大数据文件的断点续传.实验结果表明,DTOSS技术以64MB作为单个数据块大小可以达到最大的传输速率,此条件下的内存开销大约为67MB,并能节省约2/3的中断重传时间.