基于跨库检索的分布式数据服务系统设计

面对常规的报表查询系统、跨平台系统受到活跃分布式数据影响,导致检索和存储服务效果较差的问题,为此,提出了基于跨库检索的分布式数据服务系统设计。对数据服务器进行分布式设计,计算所有数据的唯一散列,并从服务集群中选择相应的数据服务器。数据存储服务器需要确保数据的存储完整,用户通过客户端向集群服务器发送相应数据,保证了数据传输的安全性。设计检索调度处理流程,方便用户检索数据。分析分布式数据活跃度,使用一致性哈希算法存储活跃数据,使分布式数据快速定位到对应服务器中。由功能测试结果可知,该系统最高检索精准度为1.0,存储范围与实际存储范围一致,具有良好的检索和存储服务效果。

BW-netRAID:一种后端集中冗余管理的网络RAID系统

在大型网络存储系统中,在设备间采用冗余策略是提高数据可靠性的重要方法.针对目前网络存储系统前端集中冗余管理中存在的性能瓶颈问题,结合带外虚拟化存储管理架构,文中提出了一种前端并行数据传输和后端集中冗余管理的网络RAID存储系统.应用服务器从元数据服务器获得地址映射信息后可直接并行访问存储设备,充分利用了所有存储节点的聚合I/O性能;冗余管理服务器在磁盘上以日志方式缓存镜像块数据,然后在后台异步计算校验块,并将新校验块数据更新到对应的存储设备节点,从而避免了前端集中冗余管理的单点性能瓶颈和可靠性问题.对不同访问活跃度的数据采用RAID1/RAID5异构分布的管理方法,取得了系统性能、可靠性和价格的平衡.

数据活跃度感知的延迟容忍网络数据转发机制

根据延迟容忍网络中的数据活跃程度与其扩散速度直接相关的规律,提出了数据活跃程度感知的延迟容忍网络数据转发机制.根据数据平均投递周期,节点以分布式方式衡量数据的活跃程度,并在此基础上预测数据期望投递跳数,进而控制数据复制转发的扩散程度.仿真结果表明该机制能够大幅度改善数据成功投递率和网络平均延迟.