分布式实时数据处理系统的设计与实现

分析了DRDPS系统的用户需求,提出了可调度实时和非实时事务的混合型事务调度算法FP-EDF,并根据系统特点设计了提交协议DRDPS-CP。在此基础上,设计并实现了DRDPS系统。

大规模图数据处理系统的分布式算法设计与性能优化

随着图数据规模的不断增大,大规模图数据处理系统成为当前研究的热点之一。本文围绕分布式算法设计与性能优化展开研究,旨在解决图数据处理中的挑战与问题。通过深入探讨图数据的特点、分布式系统的应用以及分布式算法设计的原理,结合性能优化策略,旨在提高大规模图数据处理系统的效率与可扩展性。

移动分布式实时数据库系统的事务处理

提出DMVOCC-MDA协议处理移动分布式实时事务。协议采用多版本乐观方法,使用多版本动态调整串行次序技术。移动分布式事务局部有效性确认分为2个阶段:第1阶段在移动主机上进行,使用向后有效性确认机制,对服务器上个广播周期提交事务进行有效性确认;第2阶段在服务器上进行,通过局部有效性确认的移动事务,提交到服务器进行局部最终有效性确认。在全局有效性确认中对分布更新事务进行检查,以保证分布串行性。移动只读事务能无阻塞提交,降低移动只读事务的响应时间,消除移动只读事务和移动更新事务的冲突,避免不必要的移动事务重启动。在移动主机上及早地检测数据冲突,节省处理和通信资源。实验结果表明,DMVOCC-MDA协议与其他协议相比,错过率和重启动率低,提交率和吞吐量高。

热电厂分布式生产实时监测系统数据处理技术研究

该文以一个工程实例为背景,深入剖析了热电厂生产运行数据一般处理方案,并认为热电厂分布式生产实时监测系统在数据处理上可概括为测点表建立、数据的提取与转储、数据的存储组织、数据的信息表达四个主要部分。最后分析了数据处理中应用的ADO和DAO数据访问技术、VBA技术、信号量互斥机制等关键技术。

分布式数据流处理系统的动态负载平衡技术

设计了一种新的大规模分布式数据流处理系统的体系结构。系统由一组异构的服务器集群组成,负载在每个服务器集群内部多台同构的服务器之间获得平衡,从而达到整个系统的负载平衡。集群设计的主要目标之一是以资源换性能,服务器集群中服务器的最大数目足够保证系统不再发生过载现象,不再需要会降低性能的卸载技术。而且投入运行的服务器的数目根据实际的系统负载来决定,负载较轻时,一部分服务器可以进入休眠状态来减少能源的消耗。根据系统动态增减服务器的特点,设计了全新的初始化算法、动态负载平衡算法。与以前的分布式数据流处理系统相比,由于单个集群的服务器的数目大大减少,算法复杂性降低、速度加快、优化的空间增大。

分布式系统数据一致性处理的研究

Through structure and analyse of data object attribute, this paper discusses the scheme on consistency processing of distributed bot multimedia data of structured and common data. The scheme provides a new way for solving difficult problem of distributed data on consistency processing.

基于网络的分布式实时数据库系统的并发控制

通过对网络特性的研究,提出了用于DRTDBS的基于可预测性的并发控制算法。然后通过两个改进措施,即一次全发送的处理方法和动态解决冲突方法,对提出的算法进行了应用扩展,使其同样适用于MDRTDBS。最后通过delphi7.0开发的模拟实验对算法的性能进行了评估。

分布式实时数据库系统中基于Web的并发控制

随着分布式应用与实时系统的发展,分布式实时数据库系统的研究引起了人们的关注;而事务的并发控制,则是研究的重点.通过对Web的全排序性、可预测性、缓存性等特性的分析,提出了用于分布式实时数据库的并发控制算法.提出的基于可预测性的算法是自适应的,有助于增加事务满足其截止期限的可能性.

分布式地震数据处理系统研究

地震数据处理是一个非常复杂的系统工程,其过程涉及到大量的功能模块,这些功能模块构成了一个完整的地震数据处理系统。针对当前单个地震数据处理系统存在的突出问题,提出了一种基于网络技术的分布式地震数据处理系统,以适应愈来愈复杂的地震数据处理的需要,达到提高地震数据处理质量,减少地震数据处理周期的目的。分布式地震数据处理系统的地震数据采用局部地震数据库和全局地震数据库两种管理方式,功能模块设计为局部的,使用该处理系统进行管理。通过计算机网络功能,将多台计算机上的多个地震数据处理系统有机地结合起来,共同完成一次地震数据处理过程。其最大特点就是能够优化模块组合,进行数据共享,形成最佳处理流程,快速、高效地完成处理工作。

分布式实时系统数据发布机制研究与实现

由于实时系统对时间敏感,以及分布式应用本身数据源和数据用户的分散性和异构性,因此分布式实时系统的数据发布是一个需要认真研究的问题。通过对分布式实时系统的特点、数据发布时延、数据发布方案和机制等问题的分析研究,提出了一种基于中间件的分布式实时数据服务TEDS(Time-EfficiencyDataService),论述了服务构成和实现,给出了工作流程,并对其性能进行了分析。TEDS具有数据发布时延小、效率高、可部署性好、有利于减轻服务器负荷的优点,并具有良好的跨平台能力。

面向并行图像处理的实时分布式操作系统的设计与实现

针对多片TMS320C64 DSP构成的多计算机体系结构的实时图像识别系统,设计并实现了面向并行图像处理的实时 分布式操作系统PIPORTDOS(Parallel image processing-oriented real-time distributed operating system)．PIPORTDOS基于徽 内核体系结构,包括硬件抽象层、系统核心层、分布式消息通信机制和系统服务层四个层次．其多任务内核实现了基于优先级的 抢先式调度、任务间的同步和通信原语、实时的中断处理以及面向应用的缓存管理机制．为了实现对分布式并行图像处理的支 持．PIPORTDOS采用了基于消息传递(Message Passing)的方式,并在实现中充分考虑了上层图像处理算法的应用需求以及 DSP的硬件功能．相关性能指标表明,本文设计实现的PIPORTDOS完全可以满足系统的强实时性要求,在功能上也能适应算 法对不同并行结构的需求．

分布式实时多数据流的并发协作处理

基于C/S模型分析了分布式实时计算环境中多数据流并发处理的事务问题.采用复杂事件驱动技术,设计了一个适于多数据流并发协作处理的事务机制ARTs-MDS,能够自组织地将对分布式实时数据产生作用的并发任务组成一个原子的事务单位.系统维护着一个永久性的请求/响应队列将物理的设备的实操作与实时事务相分离,通过保证并发协作任务的事务特性获得以分布式局部采集数据为基础产生的微观层操作行为协作产生的整体效果的原子性.测试结果分析表明:该系统能提高对连续的外部采集数据进行协作处理的实时响应,减少了数据丢失.

基于分布式系统的地震数据处理平台

基于分布式应用控制系统的地震数据处理平台是针对地震数据处理的特点设计的。该平台为地震数据处理提供了一个分布处理的框架,支持地震数据的自动处理和交互分析,把分布于各个工作站上的UNIX软件进程连接为一个统一的、一致的处理分析平台。该平台的建立,大大加快了地震数据处理的速度。

分布式实时数据库系统的事务管理

在分布式实时数据库系统中,事务管理一方面要保证事务的定时限制,另一方面又要保证分布式事务的全局可串行化和各子事务的局部可串行化。因此,在这种特殊的环境下,传统的分布式事务管理机制已不再适用。从一个全新的角度出发,针对事务的整个生命期进行研究,对事务管理机制中的并发控制和提交处理这两个重要环节进行综合考虑,研究影响实时性能的因素和相应的解决方法,并以提高系统实时性为目标对传统协议进行了改进。从而使事务管理在采用这一整套改进的协议后,能够很好地胜任于分布式实时环境。

分布式信号采集分析系统海量非结构化数据实时处理技术研究

在分布式信号采集分析系统中,为保证系统的通用性,需要加装一些不同的数据采集设备,在系统规模较大时,按照传统的开发方式,要实时处理由于硬件架构不同带来的海量非结构化数据,将往往会导致不同设备无法同时工作的问题。本文将数据采集线程转化为系统服务进程,解决了这一问题。测试表明,本文设计的方案仅使得系统资源略有增加,保证了系统的稳定工作。

分布式数据库查询优化处理在校园一卡通系统中的应用

校园一卡通系统的开发建设将进一步提高校园的信息化管理水平,实现由面向计算机管理向面向数据管理的转变。以校园一卡通系统的建设规划为背景,根据有多个独立校区的具体情况,详细介绍了分布式数据库在校园一卡通系统中的应用,并简要介绍了分布式查询优化的目标、策略及查询优化方法。

基于分布式实时数据库的电能量计费系统

为了解决电能量计费系统中要保存大量历史数据的数据库技术问题,采用分布式实时数据库系统技术.具体介绍了分布式实时数据库系统的基本结构,以及CPU调度算法、I/O调度算法、事务提交协议、并发控制协议。从电力企业需求出发,在电能量计费系统TMR中应用分布式实时数据库,实现了跨操作系统的电能量计费,降低了网络流量,提高了各节点的数据查询速度,从而提高系统的响应速度,为进行实时的线损计算提供了基础。

分布式远动调度系统中实时数据库的研究与实现

本文描述了在计算机和网络新技术的基础上用Java语言开发出大规模、更高性能、分布式的以及跨平台的新型远动系统,对远动系统核心技术实时数据库技术进行研究。首先对远动系统监控的数据信息进行分类并将其作为实现分布式远程接口类的底层类,再根据分布式RMI接口通过聚集这几个类封装成为实现接口的类,最后完成了用数据集组件来实现分布式实时数据库的构想。依此方法建立的实时数据库将非常的灵活,使实时数据库甚至实现了跨平台(操作系统、硬件、网络平台)运行在任何支持JRE(JavaRunEnvironment,Java运行环境)的平台上。

配电自动化系统实时分布式数据库(RDDB)研制

介绍为配电自动化系统研制的实时分布式数据库（ＲＤＤＢ）．ＲＤＤＢ实现了层次模型，并设计采用了一种兼顾顺序存取和随机快速存取的数据存取方法． 该方法通过对数据库中的记录建立ＨＡＳＨ表和链表，实现了单个数据快速随机检索和批量数据的顺序检索．ＲＤＤＢ具有占用空间少、实时性高和操作方便的特点，满足配电自动化系统的要求．

分布式异构实时监控数据库系统的设计与实现

在开发发电厂分布式实时监控与数据库管理系统时 ,常常遇到这样的两个问题 :一是在作发电机组的实时监控与实时数据库管理系统的开发过程中 ,各系统的开发是分批进行的 ,也就是说如果某发电厂有四台发电机组 ,可能由于投资方面的原因 ,需要 2～ 4年才能完成 ,而且每台发电机组的系统开发组织不是同一个 ;另外一个问题是当所有的独立系统开发完成之后 ,由于各个系统所使用的网络技术和网络体系结构各不相同 ,各系统所开发的数据库也各不相同 ,因此需要将它们进行集成 ,形成全盘的实时分布式监控与数据库管理系统 .本文对以上遇到的问题进行了比较详细的讨论 ,对异构网络的互连方案、异构网络环境下实现分布式特性的解决方案、异构网络环境下的实时通信问题的解决方案以及异构数据库系统之间的数据交换与实时共享问题的解决方案进行了设计 .