连续数据存储中面向RAID5的写操作优化设计

针对连续数据存储应用,如视频监控、连续数据保护(CDP)、虚拟磁带库(VTL)等,提出一种面向RAID5的写操作优化方法:首先进行基于区间映射(area mapping)的地址转换(AT),把非连续的I/O请求虚拟地址转换为连续的物理地址,以实现对磁盘阵列的连续写;然后,在缓冲区内保存应用程序发出的写数据块,并构造一个与RAID5的完整条带长度相等的对齐数据块,对齐数据块在RAID5上恰好占满整个条带,再发送给RAID5,以实现对RAID5的完全写.这样写入的数据块恰好占满RAID5的整个条带,不仅避免了因生成校验数据而产生重构写、读改写等额外I/O开销,而且数据块的连续写入有效降低了磁头的寻道时间,提高了RAID5的吞吐能力.实验表明,该写优化方法在有限降低RAID5读性能的同时,可大幅提高RAID5的写性能,在80%连续的负载下,使RAID5的数据传输率接近其最大值.在连续数据存储中该方法同样适用于RAID4和RAID6.

一种基于捎带回收的瓦记录Raid5写顺序化方法

瓦记录技术(SMR)采用部分叠加相邻磁道的方式增大磁盘碟片的面密度,其磁道相互叠加,使得瓦记录磁盘无法进行原地更新,是因为直接更新某一磁道上的数据可能会覆盖掉相邻磁道上的有效数据,导致瓦记录磁盘的非顺序写需要引入额外的写放大开销。对于由瓦记录磁盘组成的Raid5来说,在非顺序写场景下,最终落盘的IO也是非顺序的,因此单盘性能下降,会极大地影响瓦记录Raid5的非顺序写性能。针对瓦记录Raid5非顺序写性能低的问题,提出了一种基于捎带回收的瓦记录Raid5。该方法改进了传统Raid5的小写过程,在小写读的时候捎带读取附近的可被回收的数据或校验,通过将落盘写IO日志化,实现了落盘写IO的顺序化,避免了瓦记录磁盘的写放大开销。系统维护了地址映射表等元数据,在重构时只需对应用访问过的条带进行读写和计算,这减少了重构时需要读写的数据量。测试显示,在某些非顺序写场景下,写带宽超过了以Bcache作为缓存的MD Raid5。从计算结果看,重构时的读写开销相比普通磁盘组建的MD Raid5也有明显减小。

基于SATA接口的RAID5编解码器芯片实现

设计了一个基于SATA接口的RAID5编解码控制器芯片,采用左对称奇偶校验技术,支持1个磁盘失效情况下的数据恢复。包括数据编码解码、校验生成、校验重建、SATA控制器接口和ARM接口等;支持3～8路独立通道的磁盘阵列和3.0Gb/s的高速SATA数据传输,最大磁盘存储利用率达87.5%。采用TSMC0.13μm工艺流片,芯片逻辑部分规模约6.8万门,可应用于各种存储管理系统。

RAID5数据重组及过程研究

组成Raid5的所有硬盘中,如果有两块同时出现故障,即无法通过Raid5的容错功能来自动重组数据。本文首先介绍了RAID5组成原理,然后阐明了RAID5在两块或两块以上的硬盘出现故障时数据重组思路,最后结合具体案例给出了NTFS分区下RAID5数据重组的方法及过程。

RAID5结构剖析及其数据恢复策略研究

RAID5是被广泛应用的一种数据保护方案,RAID5的结构剖析以及利用RAID5的结构特点重构曾经遭受破坏的RAID5,就显得尤为重要。由浅入深,阐述了RAID5的基本原理,剖析了RAID5的各种可能的结构,最后深入研究了Windows下RAID5数据恢复的策略。

异构磁盘阵列RAID5结构数据布局研究

由于应用需求的快速发展以及网络存储系统的出现,因此异构磁盘阵列的变得越来越常见。RAID5由于较高的性能和可靠性以及较低的代价,是应用最为广泛的RAID结构。目前对异构磁盘阵列RAID5结构的研究,重点主要放在充分利磁盘存储空间以及对性能的定性研究。论文提出了一种异构磁盘阵列RAID5结构数据布局优化方法,该方法充分考虑异构磁盘的相对容量和性能,以及校验单元的散布对RAID5小数据写性能的影响,可以生成负载均匀分布或接近均匀分布的布局。仿真实验结果表明,对于多用户小数据访问模式,优化布局的性能明显优于简单RAID5布局,且具有更高的伸缩性。

基于Intel 80321的RAID5系统性能优化

结合磁盘存储阵列的应用,实现了基于Intel 80321 I/O处理器的RAID系统。该文利用了I/O处理器应用加速单元的硬件特性,在软件方面用高效读、写高速缓存的管理策略,实现了RAID5系统性能的优化,实际运行结果表明,该性能优化能达到预期效果。

基于RAID5的磁盘阵列Cache的研究与实现

通过对RAID5结构的研究，发现磁盘阵列Cache能减少I/O子系统的写响应时间， 可将多个小的写转换为大的写，从而减少冗余写的次数。最后给出作者在参与RAID5控制器 的研制工作中对磁盘阵列Cache的实现方法。

基于备份的RAID5在线重构框架

为解决国内外现有RAID5在线重构研究一直未解决的重负载持续访问下RAID5重构性能急剧恶化的问题，提出了利用外部存放的备份数据来加速RAID5在线重构的思想，构建了基于备份的RAID5在线重构框架。此框架利用备份系统所提供的恢复带宽将处于最近一次备份时间点的版本数据整合至spare盘，然后利用RAID5所提供的重构带宽将自最近一次备份时间点之后的已修改数据重构至spare盘。测试结果表明，该框架相对于现有重构方法显著改善了RAID5的重构性能和服务性能。

一种基于LVM和软件RAID5的文件存储改进方案

存储虚拟化技术在方便服务器存储管理的同时存在一些弊端,将所有文件存于单个逻辑卷中可能会造成磁盘空间浪费或影响大文件的读写性能,将文件分类存储于多个逻辑卷会涉及存储空间的划分,由于逻辑卷不支持在线缩小文件系统,为某个逻辑卷分配过多空间亦会造成磁盘的浪费。针对上述情况,提出了一种基于LVM和软件RAID5的服务器文件存储改进方案,并设计了相应的算法。算法可对文件进行分类存储于多个逻辑卷,加入一个共享逻辑卷,若文件写入的逻辑卷满足约定使用率条件则将文件迁移至共享逻辑卷中创建或写入,避免过度预分配造成的浪费。对方案的实现进行了仿真实验,结果表明:分类存储可以提高大文件的读性能和存储利用率,方案在文件迁移情况下对小文件写操作的响应时间影响较小。

浅析RAID5小写问题的改进方案

在RAID Level为RAID5的盘阵中,为保持校验信息与数据的一致性、有效性和可恢复性,当一个stripe中的部分数据改动后,必须同时改动校验信息。由于要维护校验信息,带来了小写问题,影响了系统的整体性能。本文讨论了改进RAID5小写问题的典型方法:校验日志法。

一种基于RAID5的Disk Cache的实现

介绍了一种基于RAID5的DiskCache的实现。在对磁盘阵列Cache的实现过程中,使用了组相联映射、LRU替换算法等比较成熟的技术,在Cache回写策略上采用write back方式,从而提高了写磁盘速度,减少冗余写盘操作。另外通过对校验组加锁,有效地防止了同一校验组里多个块同时降级而导致的数据不一致现象。

RAID5中的效率优先倒盘算法

在带有Cache的RAID5系统中,倒盘算法对于提高系统的IO性能起着十分重要的作用。本文研究了一些现有倒盘算法,并针对RAID5提出了一种基于系统状态分类的倒盘效率优先算法。该算法的主要思想是以当前的Cache占用率和负载特性为依据,根据倒盘效率优先的原则动态地调整倒盘策略。同时,本文还给出了实现这种倒盘算法的关键技术,并测试和分析了该算法的性能。

RAID5磁盘阵列数据恢复

当只有一块磁盘损坏时,RAID5磁盘阵列能通过其它正常运行的磁盘进行异或运算换算出故障磁盘的数据信息,从而保证磁盘阵列存贮信息的完整。通过研究RAID5结构和数据重组的规律,发现两个以上磁盘同时出现故障或RAID卡失效,也可以恢复故障磁盘阵列的数据。本文尝试了将RAID5故障磁盘阵列中的磁盘分别制作为磁盘镜像文件,对有故障的磁盘镜像文件进行数据恢复后,按照数据重组原理将这些磁盘镜像文件重组为RAID5镜像盘,成功恢复了图书馆文献管理服务器RAID5故障磁盘阵列中的数据。

基于$UpCase元文件的RAID5磁盘阵列重组方法研究

针对电子数据取证中RAID5磁盘阵列重组问题,提出一种基于$UpCase元文件的RAID5磁盘阵列重组方法。公安机关在办理涉服务器案件时,经常会遇到犯罪嫌疑人蓄意破坏、异常关闭服务器等情况,若服务器采用RAID5磁盘阵列存储数据,这些破坏行为会造成阵列配置信息丢失,公安机关在进行取证前必须对磁盘阵列进行数据重组。介绍了在对未知磁盘序列的RAID5磁盘阵列进行取证分析时,通过$UpCase元文件的特点,确定磁盘阵列中数据条带大小,并归纳总结了利用MBR、DBR及条带大小等已知信息计算$MFT元文件在成员盘中起始位置的方法,通过数据块与校验块的位置确定磁盘次序,实现磁盘重组,进而读取数据完成取证分析。该方法通过$UpCase元文件判断数据块信息,再利用计算结果快速定位$MFT元文件,与现有方法相比,能够大幅度节省全盘搜索时间,提升数据重组效率。

利用空闲空间抗两个磁盘失效的RAID5阵列算法

传统的RAID5阵列存储算法只能保证一个磁盘失效的时候重建数据,本文设计了一种新的RAID5阵列算法,包括储存算法和重建算法,使得在磁盘在使用少于一半空间的情况下,即使有两块磁盘失效,也可以重建数据,即抗2个磁盘失效失效,而当使用大于一半空间的时候,恢复使用传统算法进行存储重建。比较于传统算法,新的算法使RAID5阵列的可容忍磁盘失效数量提高50%,可容忍失效的已存储数据块量提高25%,磁盘空间利用率提高25%。

RAID5下做系统Ghost备份

RAID5不对存储的数据进行备份，而是把数据和相对应的奇偶校验信息存储到组成RAID5的各个磁盘上，并且奇偶校验信息和相对应的数据分别存储于不同的磁盘上。当RAID5的一个磁盘数据发生损坏后，利用剩下的数据和相应的奇偶校验信息去恢复被损坏的数据。

解决RAID5阵列硬盘脱机故障

RAID5广泛用于各种操作系统平台和各行各业，是应用非常普遍的一种磁盘阵列。RAID5系统具有较强的容错能力，在由三块磁盘构成的阵列中，一块磁盘发生故障不会对阵列的数据造成影响，并可方便快速地完成阵列重构。但是，在有两块磁盘发生故障的情况下，即使硬盘上的数据仍然完好，也不能直接重建阵列，恢复数据。那么，

利用虚拟机技术对RAID5磁盘数据恢复

造成磁盘数据丢失的原因十分复杂,每种情况都有不同的表现。一般情况下,只要数据区的数据没有被覆盖,通过有针对性的方法都是可以恢复的。文章利用虚拟机技术对RAID5阵列进行了重构,成功恢复丢失的数据,为数据恢复工作提供了新的思路。

华北工控推出RAID5标准的数码库系统

近日，国内的工控行业领军企业华北工控（NORC0），在其热卖的数码存储产品线中，强力推出低成本RAID5产品。使高贵的RAID5走下神坛，在大容量低成本数码存储设备中大显身手，使硬盘录像、非线性编辑等行业大量数据，存储更便捷、更经济更安全。