动态盘阵D/H分布与基于控制理论的在线重构

由于能够提供高性能I/O,盘阵被广泛采用.但以往的盘阵扩展性不足.而用户或应用程序对外存容量和I/O性能需求是变化的,盘阵系统本身必须有很强的扩展性,以适应系统的I/O需求.因此,由于既具有盘阵的高性能I/O,又能通过增加或减去设备后进行数据重构实现性能的扩展,动态盘阵具有广泛的前景.动态盘阵的技术热点是数据分布算法和在线自适应数据重构技术,使得盘阵的性能和容量能够随着系统的扩展而伸缩,同时使得盘阵动态扩展时的数据重构对系统的影响非常小.主要工作是:第1,对动态盘阵的数据分布展开研究,并提出一种新的数据分布算法(D/H分布).在D/H分布中,盘阵扩展时始终保持各设备上空间和负载的平衡性,同时扩展时重构的数据最少;第2,针对D/H分布,提出基于控制理论的数据重构技术,使得盘阵动态扩展时的在线数据重构对请求QoS的影响非常小,同时使得数据重构能够尽快完成;第3,研究中针对Sprite trace和合成负载进行了大量模拟实验,结果表明,提出的基于控制理论的数据重构技术行之有效.

异构盘阵中最优Stripe Unit Size选择技术

缓解计算机IO子系统瓶颈的有效手段是采用磁盘阵列 .配置时 ,SUS(StripeUnitSize)的选择对盘阵性能的影响非常关键 ,而以往对异构盘阵的SUS的选择研究较少 .该文推导出了确定异构盘阵最优SUS的方程 ,具体工作如下 :首先 ,该文采用close队列网络模型来描述异构盘阵负载 ;然后 ,从该模型推导出系统数据传输率解析表达式 .根据该表达式和异构盘阵中设备的特性 ,可求出使传输率最大的SUS .最后 ,研究中进行了大量的模拟试验 .模拟试验表明在并发的进程数大于 10时 ,所推导的结论与模拟结果非常吻合 .

虚拟盘阵系统中的自适应负载平衡

集群环境中经常采用虚拟盘阵方式来构建其存储系统。虚拟盘阵系统是一种并行系统,负载平衡对其性能影响非常大;同时虚拟盘阵系统一般都是异构的。本文研究了异构盘阵的负载平衡标准,并提出了基于请求的负载重构策略,在负载重构时机上对传统磁盘冷却算法进行了改进。模拟试验表明,该算法对虚拟异构盘阵是有效的。

Ripple-RAID:一种面向连续数据存储的高效能盘阵

视频监控、备份、归档等应用具有独特的负载特性和I/O访问模式,需研究特定的存储节能方法.磁盘阵列的局部并行策略有利于实现该类存储系统的节能,但通常会导致RAID执行小写操作而严重影响性能.为此,提出一种面向该类存储系统的高效能盘阵——Ripple-RAID,采用新的局部并行数据布局,通过综合运用地址转换、异地更新、基于流水技术渐进生成校验、分段数据恢复等策略,在单盘容错条件下,保持了局部并行的节能性,又有效解决了局部并行带来的小写问题.Ripple-RAID具有突出的性能和节能效率,在80%顺序写负载情况下,请求长度为512KB时,写性能为S-RAID 5的3.9倍,Hibernator、MAID写性能的1.9倍,PARAID、e RAID 5写性能的0.49倍;而比S-RAID 5节能20%,比Hibernator、MAID节能33%,比e RAID 5节能70%,比PARAID节能72%.

盘阵中基于平衡超图划分的自适应请求并发与负载平衡策略

作为一种并行系统,盘阵性能极大地依赖于设备间负载平衡;为了减少执行时间,单个I/O请求需要通过多个设备并发完成,负载平衡并不意味着请求并发,而请求并发也不能保证盘阵负载平衡.因此,必须将二者结合起来,才能使盘阵性能得到更好的优化.为此本文提出基于平衡超图划分的自适应数据分布策略,并提出了两个目标函数同时进行请求并发与负载平衡的控制,根据I/O访问模式优化盘阵性能.根据两种I/Obenchmark合成负载进行模拟试验表明,该策略比传统的单方面自适应负载平衡策略或基于超图的请求并发策略效果都有一定优化.

探析SAN存储光纤盘阵的配置

该文从介绍SAN的存储架构出发，引出了对核心存储阵列相关概念如：Raid Group、LUN、Storage Group的介绍。然后以南通电视台制作网存储盘阵为例详细阐述了从规划到具体配置的过程，期望对需要了解此类知识人提供一定的帮助。

广播电视台制作、播出盘阵的扩容改造

本文介绍广播电视台制作、播出盘阵系统,并介绍其扩容改造步骤及系统具体特点。

企业存储看盘阵——浪潮英信存储系统NS8800D

面对令人头疼的大量数据交换、存储、管理、维护工作,人们一直在寻找更为合理、便捷的解决之道,特别是当前日益蓬勃的中小企业信息化建设,对于大容量、高性能、易管理的存储方案的需求更为迫切。因而像SAN(存储区域网络)这样,具有易于集中管理和大规模部署等诸多特性的传统高端网络存储系统,在得到了企业级应用和高端计算环境的普遍接受后,也正随着制造技术的成熟和成本的降低,慢慢地渗入中小企业的应用环境,今天我们测试的浪潮英信存储系统NS8800D就是这样一款产品。

海量气象水文数据存储结构的研究与实现

本文针对气象水文保障业务中数据的安全存储、快速读取等不同要求,对海量气象水文数据存储结构进行分析研究,提出了采用基于RAID-0\RAID-1\RAID-5组合的三级盘阵冗余技术的海量气象水文数据存储结构解决方案,为提高气象水文业务中数据的安全存储和快速读取模式提供了较为完整可行的设计思路。

一种能耗优化的RAID小写预读方法

视频监控、备份、归档等应用产生海量存储数据,导致存储能耗急剧增加.S-RAID采用局部并行数据布局,可显著降低该类应用的存储能耗.为使更多磁盘待机节能,S-RAID通常执行“小写”操作,写操作时会额外引入等量的读操作,会显著降低性能.现有预读机制主要发生在文件级,无法感知RAID级小写引发的读旧数据、旧校验数据等读操作,因此不会也无法预读该类数据.为此,提出一种面向S-RAID的RAID级小写预读算法,由小写操作触发并在RAID级执行预读,根据S-RAID的数据布局方式,大粒度异步预读小写需要的旧数据、旧校验数据,有效减少I/O数和寻道数,提高磁盘的利用率.该方法可显著提高S-RAID的写性能,并且不依赖于任何额外硬件,具有更高的可用性.

宽温加固型记录设备的设计

结合机载产品的特点,在节约研制成本的同时,以通用化、模块化、使用性、可测试性设计为重点,采用商用化磁盘,研制了一款宽温加固型记录设备,满足产品的试飞需求。通过一些关键技术的设计、调试及环境试验,证明该设计方案的正确性。

存储服务关键支撑技术研究报告

该研究以数据资源和存储服务资源动态组织和管理为核心,研究适合于复杂应用环境下高效提供多类型存储服务的关键支撑技术及系统方法,解决面向复杂应用环境的数据存储问题,目的是更好地支撑面向下一代海量数据开放应用环境下的高效存储服务。该研究的工作集中于网络RAID阵列和机群文件系统两个系统,在分布式异步弱可比、高维冗余、机群文件系统基于大粒度子卷的元数据集群、机群文件系统客户端访问低延迟4项关键技术上取得进展。

FY-2存储系统升级中的数据迁移方法研究

文章研究了存储技术及数据迁移方法,在比较中探讨了当前比较流行的几种数据迁移方法的优劣势,针对FY-2实时业务时效性高、数据量大的特点深入分析了各种方法的可行性,选择了以虚拟存储技术来实现数据迁移。通过实施和后期运行表明:虚拟存储技术最适合本次存储系统升级,并且是先进的、可行的,也是目前最好的解决方法。

航天记录器的发展和转型

概述中国航天记录器近五十年的发展历程,阐述航天记录器技术转型的十年过程,简要介绍目前航天记录器应用的新进展。

嘉定区广播电视台高清制作网的设计与实现

随着电视高清化的发展和普及,区县电视台也逐渐开始发展高清电视。本文根据嘉定台的实际需求,从系统架构、存储需求和网络安全等方面详细介绍了嘉定台高清非编网的设计和实现。

浅谈大洋高清非编制播系统“通稿”打包模式的特点及应用

本文阐述了广西电视台新闻中心目前使用的大洋高清非编制播系统的"通稿"打包模式的优缺点,并结合采用这种特殊的打包模式后,给广西台新闻节目的后期制作以及非编网盘阵空间的管理带来的好处。

数字音频节目异步镜像备份与阵列备援技术的应用

广播音频节目内容安全和正常播出,是电台节目数字化后技术保障的底线。因此,数字音频节目必须建立在十分安全的基础之上,具备防止数据损坏、丢失的备份措施,在主盘阵异常情况下,能够立即接管播出业务,杜绝停播等重大事故的发生。还要拥有音频数据的安全备援,一旦发生盘阵故障或数据损失现象,能够立即接管系统任务,避免节目制作和播出的中断,同时为主系统建立可靠的援助系统,所以,备份和备援都是数据备份策略的主题。