基于多Agent的广域保护系统体系研究

以提高广域继电保护自治性和适应性为目的,引入多Agent技术设计了广域保护系统的体系结构,并给出了广域保护Agent的设计思路。基于分区域分布集中式系统结构,讨论了广域保护子Agent的数据采集、系统通信、故障识别、知识库、结果执行、学习能力等多任务功能描述。利用多Agent系统并行工作与协作机制,构建了广域保护多代理的体系结构和工作机制,并给出了保护功能分解的多代理分层模型。同时结合广域保护功能,阐述了故障识别、结果执行、通信网络性能监视等几种典型子Agent的详细设计特点、结构、模型及其决策过程。通过多Agent在广域保护中的运用,可以有效实现大规模电网系统在不同运行工况下自适应保护。

广域保护多Agent系统动态协作机制

以提高广域保护应对系统故障时出现的通信误码、保护失灵和断路器失灵等复杂运行情况的能力为目的,结合故障识别算法,提出了广域保护多Agent系统的动态协作机制。基于分区域分布集中式多Agent广域保护系统结构,结合多信息融合的广域故障识别保护算法,研究广域保护主站和子站,子站与子站间的信息动态协作机制,详述了保护系统对故障识别、容错处理和执行处理等动态协作机制的处理过程,并利用状态机描述多Agent系统的整体协作机制。基于IEEE 39节点系统的算例分析描述了通信错误、保护失灵和断路器失灵等几种典型故障时多Agent间的协作过程。

智能Agent角色的动态调整及其通信可靠性研究

在智能化网络管理通信模型的高级层面上借助了人类社会的聘岗机制,使不同角色的智能代理之间能够通过该机制有限状态机所定义的规则,进行角色的动态转变。实现了复杂网络的环境下代理角色适应网络动态复杂变化的功能。充分考虑到网络环境的复杂性,在每一个社区引入一个中央消息发布代理(Central Message Publishing Agent),并在其内部实现了出版者/订阅者的机制,解决了可能由于社区中智能代理工作不能正常而造成的代理之间通信的不便。从而有效保证了代理之间通信的可靠性。

多Agent系统任务分配方法综述

任务分配问题是多Agent系统(multi Agent system,MAS)中的重要研究内容之一,即解决如何将合适的任务分配给合适的Agent以实现整体执行效果最优。在分析MAS四种典型控制架构的基础上,比较了集中式与分布式控制架构下任务分配问题的特点,并对目前MAS中的多种集中式和分布式分配方法分别进行综述。最后,从理论和应用研究两方面总结和分析了MAS任务分配问题的未来发展方向。

多核CPU-GPU异构平台下并行Agent仿真负载均衡方法

多核中央处理器(central processing unit,CPU)-图形处理器(graphic processing unit,GPU)异构平台为并行Agent仿真提供了一个新的硬件执行平台,而负载均衡方法是充分利用硬件计算资源、提高并行仿真运行性能的一个有效途径。针对多核CPU-GPU异构平台下并行Agent仿真的负载均衡问题,建立了面向多核CPU-GPU的并行Agent仿真多层负载分配模型,提出了基于带约束的k-means空间聚类算法的并行Agent仿真静态负载划分方法和动态负载均衡策略,并给出了划分子集间的可交互性判定,以过滤掉大量不会发生交互关系的Agent之间的交互判定计算。最后通过实验验证了本文提出方法的有效性。

基于多Agent的医疗信任模型的模拟

结合直接交互信任评价和第三方信誉推荐,提出了一种基于多Agent技术的医疗信任模拟模型。使用置信因子来综合直接交互信任值和第三方信誉推荐值;避免了患者直接交互的盲目性和巨额计算,完善了对医生自我推荐的辨别能力。实验采用Swarm仿真平台模拟医疗信任模型的交互过程,结果表明该模型在确定信任关系中相对IT模型要快,比第三方信誉推荐模型相对要可靠。

基于改进合同网的中央冷却系统多Agent智能控制研究

针对电力推进装置中央冷却系统的运行特点、运行工况和智能控制需求,将多Agent控制技术引入中央冷却系统控制中.结合控制需求设计了一种合理的多Agent系统控制结构,采用了Agent联盟的协作结构,并引入了熟人机制,提出了一种改进的合同网模型.对多Agent智能控制系统的性能和效果进行验证分析,结果表明,该多Agent智能控制系统能够实现正常工况切换及故障工况下的自动控制,达到了控制要求,提高了任务效率.

电力推进装置中央冷却系统多Agent智能控制试验研究

针对电力推进装置中央冷却系统多Agent智能控制的试验验证问题,分析中央冷却系统的运行特点、主要运行工况和智能控制需求,通过二次设计,对主淡水回路进行正常/故障工况模拟。建立相应的试验研究平台,包括以桌面试验装置为核心的硬件结构和面向试验装置的多Agent智能控制软件体系。设计试验测试内容,对智能控制的功能和效果进行验证分析。试验研究表明,该试验装置能够模拟真实中央冷却系统的各种正常/故障工况,多Agent智能控制系统能够对中央冷却系统进行有效的智能控制,提高系统的任务效率和生存能力。

基于移动Agent的面向对象分布式冗余服务系统

目前很多分布式应用系统都利用冗余服务技术来提高系统的可用性。论文分析了分布式冗余服务系统中集中管理模式存在的诸多问题,并提出引入移动agent实现对服务实例主动的集中管理和分布管理的结合,从而保证系统高可用性的同时改善系统的性能。其中用到对象和实例的概念来定义冗余服务。

用多Agent系统分配具有启动成本的有限资源

提出了基于多Agent系统分配具有启动成本的有限资源的两种方法:集中式求解方法和分布式求解方法。在分布式求解方法中,给出了分布式的连续双向拍卖协议算法,其Agent采用零智慧增强学习策略。实验结果表明:相对于集中式求解方法,使用分布式求解方法是以降低部分效率为代价的,但是当市场的总需求逐渐接近所有卖者能提供的最大资源数时,市场平均效率呈现逐渐递增的趋势。

基于单/多智能体简化强化学习的电力系统无功电压控制

为了快速平抑分布式能源接入系统产生的无功电压波动,以强化学习、模仿学习为代表的机器学习方法逐渐被应用于无功电压控制。虽然现有方法能实现在线极速求解,但仍然存在离线训练速度慢、普适性不够等阻碍其应用于实际的缺陷。该文首先提出一种适用于输电网集中式控制的单智能体简化强化学习方法,该方法基于“Actor-Critic”架构对强化学习进行简化与改进,保留了强化学习无需标签数据与强普适性的优点,同时消除了训练初期因智能体随机搜索造成的计算浪费,大幅提升了强化学习的训练速度;然后,提出一种适用于配电网分布式零通信控制的多智能体简化强化学习方法,该方法将简化强化学习思想推广形成多智能体版本,同时采用模仿学习进行初始化,将全局优化思想提前注入各智能体,提升各无功设备之间的就地协同控制效果;最后,基于改进IEEE 118节点算例的仿真结果验证了所提方法的正确性与快速性。

The Research about the Trans-provincial Centralized Bidding Trading Market of East China Power Grid --II:Model Analysis

In this paper a novel cost function based on the relationship between operation cost of unit and generation load rate is employed in an agent-based model of Trans-provincial Centralized Bidding Trading Market of East China Grid. Simulation results are compared to real data to prove that the model is correct. Further analysis on simulation results point out the way to achieve an all-win game for power market members: generation companies improve their average load rates of the units by selling their electricity in the market, which makes units' cost drop and settlement price stay lower than benchmark price. Consequently electricity-demand provinces saved expenses, and units increase their profits. In conclusion, the trans-provincial electricity market of East China Power Grid is a successive case which improves the efficiency of the electricity industry by market-oriented measures.

骨痛消涂膜剂制备工艺优化及其质量评价

目的优化骨痛消涂膜剂制备工艺,并进行质量评价。方法在单因素试验基础上,以甘油、聚丙烯酸树酯、三乙酸甘油酯、吐温-80用量为影响因素,成膜时间、成膜性、柔韧性、均匀度、黏稠度、表面有无气泡的综合评分为评价指标,星点设计-效应面法优化制备工艺。HPLC法测定雪上一枝蒿甲素含量。结果最佳条件为聚丙烯酸树脂用量41.86%,三乙酸甘油酯用量2.99%,甘油用量5.78%,吐温-80用量2.96%,综合评分为8.93分。雪上一枝蒿甲素在0.017~0.544 mg/mL范围内线性关系良好(r=0.9997),3个水平平均加样回收率分别为99.05%、98.81%、98.92%,RSD分别为0.80%、0.45%、1.07%。结论该方法简便准确,重复性好,可用于骨痛消涂膜剂的制备和质量控制。

多智能体中央式协同路径规划算法综述

协同路径规划是实现多智能体协同作业的一项关键技术,需要保证行进至目标点前智能体间无碰撞,同时满足规划轨迹平滑性、规划时间有效性等要求。在明确多智能体协同规划问题的基础上,根据算法原理,将中央式协同路径规划算法分为基于A~*搜索、基于冲突搜索、基于安全间隔路径、基于代价增长树、基于规约算法以及其他算法,简单阐述各算法原理。研究发现,基于冲突搜索的协同路径规划算法因其计算质量及速度优势成为当前的主流算法,以此为基础进行改进成为当前研究热点。单一类型的算法对不同智能体规模及场景下的适应能力有限,多类型算法融合及智能化方法的介入将成为未来多智能体协同规划的发展趋势。

基于多智能体深度强化学习的多船协同避碰策略

为了提高多船会遇时智能避碰策略的协同性、安全性、实用性和节能性,在中心化训练去中心化执行框架下,结合优先经验回放机制提出一种多智能体Softmax深层双确定性策略梯度PER-MASD3算法,用于解决多船协同避碰问题,该算法不仅解决了双延迟确定策略梯度(TD3)算法存在的值估计偏差问题,还在模型训练过程中引入熵正则项,以促进探索和控制随机控制策略,采用自适应噪声对不同阶段的任务进行有效探索,进一步提升了算法的学习效果和稳定性。通过实验验证,所提算法在解决多船协同避碰问题上具有较好的决策效果、更快的收敛速度和更稳定的性能。

部分可观测条件下的策略迁移强化学习方法

针对多智能体强化学习算法在部分可观测条件下难以形成有效协同策略的问题,基于集中式训练与分散式执行范式(CTDE)提出一种策略迁移强化学习方法。该方法在全局观测下训练可以探索到良好协同策略的教师模块,在部分可观测条件下,学生模块依据最大化累计回报的期望为目标函数在线训练的同时,利用策略蒸馏技术从教师模块进行策略迁移,并自适应调整教师策略对学生策略的影响比重。在多个地图场景中对所提出的方法进行仿真验证,实验结果表明部分可观测条件下学生模块的胜率高于所对比的基线算法的胜率。研究成果可以应用于多智能体合作任务,提升智能体在分散式执行时的协同性能。

聚类与信息共享的多智能体深度强化学习协同控制交通灯

该文提出一种适用于多路口交通灯实时控制的多智能体深度循环Q-网络(MADRQN),目的是提高多个路口的联合控制效果。该方法将交通灯控制建模成马尔可夫决策过程,将每个路口的控制器作为智能体,根据位置和观测信息对智能体聚类,然后在聚类内部进行信息共享和中心化训练,并在每个训练过程结束时将评价值最高的值函数网络参数分享给其它智能体。在城市交通仿真软件(SUMO)下的仿真实验结果表明,所提方法能够减少通信的数据量,使得智能体之间的信息共享和中心化训练更加可行和高效,车辆平均等待时长少于当前最优的基于多智能体深度强化学习的交通灯控制方法,能够有效地缓解交通拥堵。

不同抗菌药物方案在中枢神经系统感染性疾病治疗中的应用效果比较

目的:比较万古霉素联合抗假单胞菌的β-内酰胺类方案、哌拉西林他唑巴坦钠联合舒巴坦方案在中枢神经系统感染性疾病治疗中的应用效果。方法:选取2021年3月—2023年9月开平市中心医院收治的82例中枢神经系统感染性疾病患者作为研究对象,根据不同用药方案进行分组,A组41例采用万古霉素联合抗假单胞菌的β-内酰胺类治疗,B组41例采用哌拉西林他唑巴坦钠联合舒巴坦治疗。比较两组治疗效果、症状改善时间、炎性因子及不良反应。结果:A组总有效率高于B组,体温恢复正常时间、实验室检查恢复正常时间均短于B组,差异有统计学意义(P<0.05)。治疗7 d后,A组C-反应蛋白(CRP)、降钙素原(PCT)、白细胞介素-6(IL-6)指标水平均低于B组,差异有统计学意义(P<0.05)。A组治疗期间不良反应总发生率高于B组,差异有统计学意义(P<0.05)。结论:万古霉素联合抗假单胞菌的β-内酰胺类方案治疗中枢神经系统感染性疾病见效快,能够快速改善症状,抑制炎性因子表达,但是不良反应较多,临床可根据患者具体情况选择适合的抗菌药物方案。

基于强化学习的干线信号混合协同优化方法

交通拥堵已成为很多大中城市普遍存在的社会问题。信号控制作为缓堵保畅的重要措施之一,愈发受到社会关注。信号优化手段可分为模型驱动和数据驱动两类,且随着交通大数据的不断充实,基于强化学习的数据驱动方法日益成为新兴发展方向。然而,现有数据驱动类研究主要偏重于决策模型设计,缺乏对智能体结构的探讨;同时,在多路口协同方面多采用分布式策略,忽略了智能体之间信息交互,无法保障区域层面的整体最优性。为此,本文以干线信号为对象,构建一种多智能体混合式协同决策的信号优化方法。首先,针对交通状态的多样性、异构性及数据不均衡性,设计分布训练-分区记忆的单智能体决策模型,并优化状态空间和回报函数,界定单路口控制的最佳方案;其次,融合分布式和集中式学习的模型优势设计多智能体交互方法,在单路口分布式控制的基础上,设置中心智能体评价局部智能体的决策行为并反馈附加回报以调整局部智能体的决策模型,实现干线多信号的协同运行。最后,搭建仿真平台完成效果测试与算法对比。结果表明:新方法与独立优化和分布式协同相比,在支路交通流基本不受影响的前提下,干线停车次数分别降低了14.8%和13.6%,具有更好的控制效果。

基于图像内容过滤的智能防火墙系统研究与实现

针对目前网络安全系统对于图像信息处理能力不足的问题 ,开发了一种基于图像内容过滤的智能防火墙系统 ,能够准确、实时地监测网络中的图像信息 ,提高了网络系统的运行可靠性和安全性 .提出了一种基于轮廓特征抽取与多智能体技术的图像内容检索算法作为本系统的核心算法 .该算法首次将图像检索问题看作是一个分布式求解问题 ,并以智能体技术作为支撑技术 ,解决了目前多维索引算法在大型图像库检索效率低下的问题 ,在不降低图像识别率的情况下 。