基于分段拟合压缩的多源数据容灾存储算法

压缩后数据样本所占存储容量过大是导致主机元件无法完全容灾多源数据对象的主要原因。为此,提出基于分段拟合压缩的多源数据容灾存储算法。根据多源数据的压缩信道分段标准,确定寻优拟合参数的取值范围,从而实现对数据容量的估计,完成基于分段拟合压缩的多源数据容量估算。利用容灾纠错后的多源数据样本,定义具体的LDPC码,并以此为基础,确定多源数据存储方案,实现基于分段拟合压缩的多源数据容灾存储算法的设计。实验结果表明,所提算法作用下,数据样本压缩后所占存储容量被控制在5.0×10~7MB以下,解决了主机元件不能完全容灾多源数据对象的问题。

基于共享存储技术的乱序TCP分段重排电路设计

传输控制协议(Transmission Control Protocol,TCP)处理引擎可以广泛应用于数据中心的各类型服务器,降低处理器负荷。为提高TCP协议处理引擎处理数据的分段效率,设计了一种基于共享存储技术的乱序TCP分段重排电路,其采用静态随机存储器(Static Random Access Memory,SRAM)存储,具有结构简单、存储资源利用率高、低时延的特性,可有效克服内容寻址存储器(Content Addressable Memory,CAM)或三态内容可寻址存储器(Ternary Content Addressable Memory,TCAM)高功耗以及可扩展性差的缺点,同时满足上千条连接的工作需求;分析了电路的具体结构、关键调度算法和工作流程,并进行了仿真。电路基于Xilinx ZYNQ 7000系列的现场可编程门阵列(Field-Programmable Gate Array,FPGA)实现,对主要硬件资源消耗进行了综合分析。

时态数据的变粒度分段存储策略及其效益分析

根据时态数据库用户对数据厚今薄古的需求特点，该文提出变粒度分段存储技术，将一个对象的历史分为３个时期，分介质、变粒度存储．文章讨论了分段存储的特殊数据结构、时代转移算法和压缩采样算法．基于微机实用参数的定量分析表明，这一技术将时态存储密度和时态查询速度提高了一个数量级.

一种基于分段存储的三维映射方法

三维波形映射技术提高了数字示波器的波形捕获率,但死区时间仍然广泛存在。提出了一种"分段存储集中映射"三维成像方法。根据时基将高速大容量动态存储器(DDR3 SDRAM)分成多段存储区域,连续存储多幅具有相同触发条件的波形,将DDR3 SDRAM中的多幅波形集中映射。基于双口RAM的快速波形映射技术和多路并行映射技术大大缩短了映射时间,在保证高波形捕获率的同时实现了数据的海量存储,使整个DDR3 SDRAM存储的波形时间范围内实现了无缝采集。通过建立数学模型证明了该系统能在更短时间内捕获到异常波形,双脉冲测试法测出该系统的最高捕获率为6 250 000 wfms/s,经过分析得出系统死区时间比为43.86%。

一种基于分段式存储的组播路由查找方案

在高端路由器基于硬件的路由查找设计方案中,TCAM(Ternary Content Addressable Memory)因其性能优良而被普遍采用。但通常的TCAM路由查找方式因组播报文路由查找的特殊性,会导致更多的TCAM存储空间被占用以及查找功效的降低。又因其无法流水线操作,限制了组播报文路由查找速度,从而使得该方法将不再适用。提出一种基于分段式存储的解决方案,该方案支持流水线操作,能够实现线速查找组播报文,而且节约了存储空间从而提高了功效。该方案在863重大课题"大规模接入汇聚路由器(Access Convergence Router,ACR)"中得以验证。

基于分段位向量编码的XML文档到关系存储

将XML数据与关系数据库结合是非常有意义的工作,而将XML文档存储为关系表一直是数据库领域研究的热点问题.文中提出了分段位向量编码的方案,得到了效率更高的映射模型。基于分段位向量编码方案,探讨了如何将任意大小的XML文档到关系存储的基本原理,并给出了相应的算法。

面向多租户数据存储的分段多维性能模型

多租户数据存储对提高用户体验质量,优化系统运行效率,降低服务提供商成本至关重要。面对大规模租户,共享数据存储节点如何满足不同租户的不同性能需求是需要解决的关键问题。为此,针对多租户数据存储不同性能需求的特点,提出了一种面向多租户数据存储的考虑租户之间相互干扰的分段多维性能模型,包括分段多维性能边界函数和多租户数据存储性能预测分析方法。通过基准测试数据采集、模型计算和性能分析,来判断是否每个数据存储节点能够综合地满足不同租户的不同性能需求。实验系统的分析结果表明,该方法能够判断在特定租户负载组合下每个数据节点是否过载,为分布式多租户数据布局提供基础。

基于存储过程的分段数据存储方式设计

随着社会对信息化重视程度的不断提高,存储在数据库中的数据规模正在不断的成倍增长,如何以一种有效的方式对数据进行存储,以便高效的对数据进行处理,分析就成为横亘在人们面前的一道难题。基于oracle11g数据库,设计了一种基于存储过程的分段式数据存储方式,有效解决了对于数据量随时间线性增长业务系统数据的存储问题,极大的提高了数据处理的效率。

移动低占空比传感网中基于分段拟合压缩的数据容灾存储算法

数据存储是无线传感器网络中数据管理的基础操作.在移动低占空比传感网中,由于节点的移动性,每个节点需要频繁更新邻居节点集合,使得节点能量消耗过大;同时,节点大部分时间处于睡眠状态,仅在少部分时间内苏醒工作,造成数据备份的通信延迟过大.提出一种快速的低能耗数据保存机制.首先,源节点基于连续时间序列对感知数据进行分段线性拟合压缩;接着,节点根据预估故障概率和存储空间大小,计算出合理的压缩数据备份数量.在此基础上,设计一种动态自适应传输协议.实验仿真表明,与已有存储算法比较,该机制具有更低的传输能耗和通信延迟.

9000系列示波器分段存储技术应用探讨

安捷伦新推出的9000系列示波器最大存储深度为1Gpts,在10GSa/s的采样率下,最长也只能捕获100ms的信号,这对于采集和查看连续的多个空闲时间较长的信号是远远不够的。但是,对需要捕获连续的多个低占空比脉冲或有较长空闲时间的脉冲串信号状况,升级存储深度对解决这类信号的采集和查看并不是一种经济、有效的办法。为此本文对其分段存储技术应用进行探讨。

网络数据流分段存储模型的研究

网络数据流自身所具有的特点对存储提出了更高的要求，在传统的存储速度慢、信息缺损等缺陷的背景下，我们逐渐探索到更为科学的保持时序性与属主性的网络数据流分段存储模型。这一模型将弱时序性应用于内存，将多级索引应用于磁盘。这种模型有效的提高了数据流的实时存储与检测效率。

基于PXI板卡的高速信号分段存储软件设计

本文介绍了一种基于PXI板卡的高速信号分段存储软件设计方法,对保存宽带高速信号具有一定的参考意义。

面向车载导航地图的动态交通信息存储模型

支持实时交通信息是新一代动态导航应用的基本特征。该文以现有导航电子地图物理存储格式中较成熟的分层道路模型为基础,结合线性参照方法提出多层路网统一编码方法以及基于该方法的动态分层路网存储模型DyHiRD,解决交通信息在冗余数据模型下的一致性更新问题。实验结果表明,该模型的更新效率满足支持大型城市交通信息服务的终端动态导航应用需求。

基于垂直格式的频繁项集挖掘分段算法

针对Eclat算法连接和剪枝操作耗时的缺点,按照项集之间的可连接性,将数据集划分为等价类并分段存储,采用末项剪枝策略,在常量时间内完成连接和剪枝操作.针对Eclat算法求长集合的交集操作需要大量计算的缺点,采用多维数组分段存储项集的事务集,将长集合的求交集操作转换为分段求短集合的交集,并提出期望支持度的概念,在求交集的过程中预测支持度,从而减少求交集的比较次数.实验结果表明,该算法在时间性能方面优于Eclat算法,尤其适用于挖掘长模式稀疏数据集.

基于简单再生码的分段编码方案

简单再生码将可容多错的RS纠删码与简单的异或运算相结合,在达到容忍任意n-k个节点故障可靠性的基础上,可以实现对单个失效节点的高效快速修复。对简单再生码的失效节点修复过程进行改进,提出一种新的基于简单再生码的分段编码方案,将f个具有相同下标的编码块分成两段,将每段中的编码块进行异或操作,生成一个新的校验块。对该方案的存储开销、磁盘读取的开销以及修复带宽开销进行性能分析和仿真实验,结果表明提出的基于简单再生码的分段编码方案在增加少量存储开销的同时,其修复带宽和磁盘读取的开销性能有了很大程度的优化,进一步验证了改进方案的正确性和有效性。

Pentium 4 CPU对系统存储体系的管理分析

本文介绍了Pentium 4 CPU对系统内存和磁盘虚拟内存的管理方式以及由此带来的主要特点。通过本文可以认识到Pentium 4 CPU强大的信息存储管理功能,对程序编制者编写符合Pentium 4 CPU特点的程序提供了依据。

存储器管理中的虚拟存储技术

本文从存储管理技术的变迁引出了虚拟存储器的概念，并具体讨论了虚拟存储技术的请求分页存储管理和分段存储管理技术的机制及优缺点。

支持IA-32保护模式的存储管理单元的设计与实现

研究支持IA-32保护模式的存储管理单元的设计,并在龙腾C2微处理器中实现了该存储管理单元。分析了段页式存储管理单元的地址变化机制和IA-32保护模式下的存储保护机制,详细讨论了存储管理单元的分段单元和分页单元的设计,以及存储管理单元在流水线中的控制机制,并就存储管理单元的关键路径进行了结构优化。仿真验证和综合的结果表明,该存储管理单元的设计满足龙腾C2微处理器的功能和性能要求。

快速IPv6分段查找及其硬件实现

提出一种可硬件实现的快速IPv6查找算法,采用基于内容可寻址存储器CAM的分段查找机制,用流水线实现,每个周期可输出一次查找结果,所需存储开销较小。在Xilinx Virtex-6 FPGA开发板用150×1024项IPv6前缀测试表明,查找速度可达597Mp/s(Million packet/s),最坏需要2次存储器访问,更新最坏需要50μs,仅需20.07MB的RAM和258KB的CAM存储开销。

SHB^+树——一种面向时态数据的分段混合索引

时态索引是时态数据库中加速查询的重要手段.现有时态索引技术难以有效的支持用户的多样性查询,此外在保障查询执行的高效性同时难以兼顾创建和维护的高效性.为此,提出一种基于时态数据的分段混合索引——SHB+树(segmentation hybrid B+-tree).该技术首先将时态数据表按时间进行分段,在每个分段上建立局部的时间线和对象的混合索引结构,时间线和对象索引共享局部分段时态数据.对于每个局部分段混合索引,设计自底向上的索引创建方式,提高索引创建和维护的效率.在基准数据集上的实验结果验证了本文方法的有效性.