PVFS代码结构及并行Meta服务研究

PVFS(ParallelVirtualFileSystem)广泛应用于PC集群并行计算环境中,通过ROMIO形式的MPI-IO接口与MPICH结合,用于提高数据文件的访问性能,通过对PVFS的源代码分析,得出PVFS的系统架构、运行机制与采用的策略,并在这个基础上找出元数据服务器并行化的可行性,以设计出并行元数据服务方案来提高元数据访问的吞吐率。

档案形成问题的法理性与学理性分析

作为档案学的一个元问题,档案形成问题的研究具有重要的理论价值和时代意义。本文围绕档案形成的标志问题、档案形成的实质问题、档案形成的规律问题展开了法理性与学理性分析,认为将归档作为档案的形成标志是合理的,档案形成的实质不是新事物的产生而是文件在自身发展过程中进入了档案化治理阶段,并对档案形成规律的相关观点进行了辨析。

浅析网页的头部Meta标记

网页的头部位于网页的顶端,网页运行时首先是从头部开始加载的。网页中的文字按何种编码进行显示、你的网站能否被搜索引擎查找到就需要依赖于你在头部设置的meta标记。该文围绕网页的头部内容meta标记而展开,通过该标记的属性设置讲解了网页中文档的编码、关键字和描述信息等相关内容。

GPT磁盘克隆成MBR磁盘后数据恢复的研究

用户在使用Ghost工具软件安装操作系统或者克隆磁盘时,有时会将"选择镜像文件到分区"误操作为"选择镜像文件到磁盘";克隆结束后,导致整个GPT磁盘成为一个大C盘,GPT磁盘中各逻辑盘丢失的现象。针对这种情况,以Windows7为平台,Ghost8.0为实验软件,WinHex15.08为数据分析与恢复软件,在虚拟GPT磁盘中建立5个卷,5个卷的文件系统都是NTFS。再制作一个镜像文件,在镜像文件中建立一个MBR分区,对应文件系统也是NTFS。将镜像文件克隆到GPT磁盘中,造成GPT磁盘中原来5个卷对应分区丢失。对克隆后的GPT磁盘结构进行分析,提出了恢复GPT磁盘各卷的基本思路、方法与步骤,即恢复克隆前的GPT头和GPT头备份。实验结果表明:除第1个分区中的部分数据被覆盖无法恢复外,GPT磁盘中剩余4个卷的数据均可完整恢复。

一种结合SSD特征的分布式文件系统元数据优化技术

分布式文件系统的元数据性能是制约系统整体性能的关键瓶颈.尽管固态盘(Solid State Drive,SSD)提供高速的数据访问,但是由于元数据呈现粒度小、更新频繁的特征,SSD的性能表现仍然较差,同时导致寿命损耗加速.基于SSD存储介质的写入特性,提出了面向分布式文件系统元数据的数据管理机制和更新方法,包括元数据内存页面的重新组织和管理、多次变化数据的迭代更新、元数据写入方式的进一步优化等.所提方法减少了元数据更新的写入频次和实际写入量,减少了随机写操作,提高了元数据写入性能.

LCFS中元数据服务器的可靠性分析模型

可靠性问题是研究大规模集群存储系统的一个重要方面,元数据服务器是大规模集群存储的中心。本文针对基于镜像复制和共享存储的服务器实现方案,采用马尔可夫补偿模型研究元数据服务器的状态迁移概率,分析了元数据服务器集群的可靠性以及数据一致性对可靠性的影响,对实现大规模集群文件系统中的元数据服务器有重要的指导意义。

大规模集群文件系统LCFS的元数据管理与访问机制

文件系统的元数据包括文件基本属性信息和目录结构信息。在基于集群技术的大规模文件系统中,有效的元数据管理是系统实现的核心。本文在设计了与元数据管理相关的三类协议的基础上,提出了集群化的元数据服务器实现模型,并分析和比较了各种实现方式的优缺点。

Readdir++:一种并行网络文件系统中海量小文件读优化技术

高效管理海量小文件,提供低延时的小文件访问服务,是并行网络文件系统的研究热点.p NFS采用数据带外访问模式,元数据的访问频率高,对海量小文件的访问性能造成了很大影响.本文扩展了p NFS中的读目录授权机制,并在其框架下提出了一种Readdir++技术,用于批量预取layout等元数据,并确保预取元数据的有效性.Readdir++技术避免了小文件读取过程中同步的元数据获取开销,有效降低了访问延迟,提升了海量小文件的读取访问性能.典型应用环境实测表明,对比p NFS系统,Readdir++技术可将海量小文件读取访问过程中元数据性能提升到14.27倍,总体性能提升到1.78倍.

Petri网标记语言

Petri网标记语言(PNML)是一种基于XML语言的Petri网文件交换标准,用于实现Petri网工具的互操作性。综合介绍了PNML标准化进程和PNML的核心支撑技术,详细阐述了PNML体系结构各个组成部分及元模型中各个组成对象,借助PNK工具实现一个P/T网模型实例,根据元模型分析对应的PNML文件中的库所、变迁和弧等对象标签的含义,最后分析了PNML在工作流模型与矢量图转换等领域的研究状况,指出了下一步研究方向。

BitTorrent模型原理分析

BitTorrent是一个技术框架,在P2P的基本架构下定义了一个高效的文件分发模型,该模型不仅规定了文件分发中的不同实体,而且对实体之间的信息交互方式,所遵循的规范进行了严格定义,最为关键的是该协议规范中提出了分断共享的概念.在文件传输关键环节中提出的算法,使得在不稳定网络中的大文件分发更为高效.

PVFS元数据服务器的并行化设计与实现

PVFS并行文件系统采用集中式的元数据服务器,这使得元数据服务器在大量的文件操作情况下成为I/O瓶颈。该文通过增强PVFS的客户端和元数据服务器的相关功能,使得客户的文件请求按照文件名的Hash变换转向不同的元数据服务器,在保留原来的用户访问方式和系统配置不变的情况下实现元数据服务器的并行化,达到明显提高元数据服务器的总吞吐量和可扩展性。

结合隐式元数据和List IO的并行文件系统

并行文件系统中的文件数据与元数据分离管理和分离存储使得系统复杂性上升,可靠性下降,采用将两种数据结合的隐式的元数据管理与存储则可以避免上述问题,而且可以获得元数据的并行服务能力,将Expand隐式元数据管理的简单可靠及元数据并发服务和PVFS高效的ListI/O非连续数据访问的能力相结合,可以同时获得两者的优点。

用PB绘制建筑物安全监测过程线

本文介绍了在PB开发的安全监测系统中绘制过程线的方法 ,该方法用WindowsAPI函数绘制矢量格式的过程线 ,用该方法绘制的过程线具有占用磁盘空间小、管理方便的特点 ,大大提高了安全监测系统的性能。

分布式协同建模仿真环境中的文档管理系统

电子文档管理系统(EDMS)负责在分布式协同建模仿真环境(DCMSE)中以统一的方式处理不同格式文件的保存与共享。版本控制是EDMS的核心内容,对于保证文件更新的合法性与使用的统一性至关重要。针对目前EDMS系统中管理信息不足、流程缺失、权限不明的问题,提出了基于三层框架的文档全生命周期管理方法、基于流程的审批以及基于文档状态的访问控制方法。设计并实现了分布式协同建模环境中的文档管理系统软件,经使用证明该系统能够较好的满足分布式协同建模环境中的文档管理需求。

PVFS客户端目录缓存设计与实现

缓存技术是提高并行文件系统性能的关键性技术。在并行文件系统中实现客户端目录缓存,不仅可以减轻目录服务器的压力,避免目录服务器成为系统瓶颈,而且可以简化客户端操作过程,提高并行文件系统的性能。该文对PVFS并行文件系统进行了分析,建立了客户端目录缓存模型;就客户端目录缓存实现的一些关键性问题,如缓存池开辟位置、一致性等问题进行了研究,给出了解决方法,并在此基础上实现了一个客户端目录缓存的原型系统。测试结果表明,加入缓存后,PVFS系统性能有所提高。

OpenGL图形的打印及剪贴

通过增强型元文件和设备无关位图两种方式 ,采用编程的方法在 Windows上实现了 Open GL图形的打印和剪贴板的支持。由于增强型元文件是以绘制记录储存的 ,与位图相比具有输出图形不失真、占用磁盘空间小。

网络文件系统中的元数据存取优化研究

文章研究了客户机/元数据服务器/存储服务器三层结构网络文件系统中,针对改善元数据服务效率的优化策略,包括客户节点接口中的路径解析加速、元数据服务器上的元数据存取优化及元数据服务器组的结构支持等几部分,作者通过建立分析模型与实际系统模拟的方法,证明这些策略的确可改善系统性能,优化系统效率。

用VC实现基于DXF文件的AutoCAD数据共享接口

较为详细地介绍了DXF文件格式,并由此推导出AutoCAD外部数据接口的框架。使用Visual C++语言实现了基于DXF文件的AutoCAD数据接口,建立了自主应用软件与AutoCAD之间的共享数据通道。

基于MDI的异构数据格式转换和远程文件传输机制研究

元计算系统的节点间具有多方面的异构性 ,当数据在这些节点间传输时 ,会发生理解或判断上的歧义性 .为了实现数据和文件在异构节点间传输的一致性 ,分析了校园网络内的几种典型计算机系统的数据类型及其存储格式 ,研究了不同数据格式之间的转换算法和远程文件传输机制 .格式转换算法使用元数据信息作为数据信包转换和解压缩的依据 .

重建GPT分区与NTFS_DBR的研究

GPT分区是目前硬盘普遍使用的一种分区形式,克服了MBR对分区管理不能超过2 TB的缺点;而NTFS文件系统是Windows操作系统的重要组成部分。文中以Windows 7为平台,虚拟硬盘为实验对象,WinHex 15.08作为数据分析与恢复工具,对GPT硬盘结构和NTFS文件系统结构进行分析;对硬盘GPT分区、NTFS_DBR和NTFS_DBR备份同时被破坏后进行修复实验。实验结果表明,当GPT分区、NTFS_DBR和NTFS_DBR备份同时被破坏后,通过元文件$MFT的0号记录、1号记录和8号记录中的80H属性相关数据,计算NTFS卷的总容量与NTFS_DBR中BPB的参数。提出了通过NTFS卷的总容量重建GPT分区的基本思路、方法与步骤,并获得各GPT分区开始扇区号(即各NTFS_DBR所在扇区)在整个GPT磁盘中的位置,以及恢复NTFS_DBR和NTFS_DBR备份的思路、方法与步骤。解决了GPT分区和NTFS_DBR同时被破坏后难以恢复的技术难题。