基于值分布的多智能体强化学习方法

近年来,多智能体强化学习随着深度学习技术的发展和算法研究的深入,成为人工智能领域的研究热点。特别是在处理复杂的决策问题和环境中,多智能体系统展现出其独特的优势。本文介绍了一种基于值分布的多智能体强化学习算法,旨在通过改进算法结构和学习机制,提升多智能体协作中的性能和稳定性。首先,本文深入分析了强化学习中的值分布概念,并探讨了其在多智能体系统中的应用挑战和潜在价值。随后,提出了CvM-MIX算法,该算法通过结合值分布强化学习和值分解技术,有效地提高了对环境随机性的适应能力,并采用了一种改进的基于权重优先级的经验回放机制,进一步优化了学习过程。通过在星际争霸II多智能体挑战赛(SMAC)平台进行的一系列实验,验证了CvM-MIX算法相较于传统算法在性能和稳定性上的优势。实验结果显示,CvM-MIX算法在多种对抗模式下均表现出更快的收敛速度和更高的胜率,尤其是在复杂场景中的表现尤为突出。

威布尔极值分布及其参数估计方法在储罐底板RBI计算中的应用

在常压储罐底板定量风险评估(RBI)过程中,底板腐蚀速率的选取会影响储罐整体风险等级的确定。基于威布尔极值分布理论,针对储罐边缘板,采用最佳线性无偏估计(BLUE)的方法计算了威布尔分布参数;针对储罐中幅板,采用简单线性无偏估计(GLUE)的方法计算了威布尔分布参数,随后通过线性回归理论分别计算了边缘板和中幅板的腐蚀速率,并将其赋予为腐蚀速率专家值对储罐底板进行了RBI计算。结果表明,威布尔极值分布理论计算可以科学合理地预估储罐底板腐蚀速率,边缘板的腐蚀速率为0.133 mm/a,中幅板的腐蚀速率为0.095 mm/a,与理论算法腐蚀速率的误差为3.6%,储罐底板风险等级为中高风险,在一定程度上解决了储罐RBI计算过程中腐蚀速率选取的难题,可为今后检验检测机构RBI的评估工作提供一定的技术支撑。

利用剖面浅析吴忠—灵武地区Q值分布

基于层析成像方法,利用宁夏测震台网中心提供的2009年1月至2021年12月的地震波形数据,对吴忠—灵武地区P波三维Q值在4个剖面的分布特征进行了分析,并通过Q值在纵向和横向的变化,讨论其与断裂分布的关系,探讨孕震可能性。

基于广义极值分布的巴颜喀拉块体中部地震危险性分析

本文对广义极值分布模型的构建机理进行了深入详细的阐述,给出了逻辑意义更加合理的的重现期和重现水平定义,以及相关的地震危险性评价指标。在此基础上,应用构建模型对巴颜喀拉块体中部的地震危险性做了客观的评价,得出巴颜喀拉块体中部每年的平均最大发震为M_(s)5.1,每20年发生M_(s)6.0以上强震可能性超过97%,M_(s)7.5左右的超强震约100年一遇,块体内部孕育地震的能量积累迅速。

周期pq的二阶广义分圆二元序列的自相关值分布和2-adic复杂度

对于2个不同的奇素数p和q,周期n=pq的二元广义分圆序列S=S(a,b,c)((a,b,c)∈{0,1}^(3))具有良好的自相关性质.在一些情况下,其有理想自相关或最优自相关.基于群环语言和群环R=Z[Г](Г是n阶循环群)上的二次高斯和版本,用一种统一的方法确定了所有(a,b,c)∈{0,1}^(3)时的二元序列S=S(a,b,c)的自相关值分布和2-adic复杂度.

基于广义极值分布的线路负载率指标及计算方法

针对高随机性负荷渗透率下配电网线路负载状态评估的问题,文章在极值理论的基础上引入负荷重现水平和负荷重现期概念,建立一种新的线路负载能力概率性评价指标,即T年期线路负载率。考虑不同配网系统的负荷结构和网架结构的差异,结合负荷同时率提出一种适用于多类型负荷配网环境下线路负载率的计算方法。以江苏某工业园区、浙江某城市、安徽某农村等3种典型场景下的配电网为例分析“一年一遇”、“五年一遇”和“十年一遇”等不同重现期下的线路负载率,并对线路负载率达到不同重现水平时发生“重载事件”和“超载事件”的最小重现期进行研究。结果表明该指标能够在低样本容量下有效评估含随机性负荷的配电线路的负载状态,所提方法在含多类型负荷的配电网中具备广泛的适用性。

基于值分布多智能体强化学习的无人机协同方法

在无人机环境监测问题中,通过协同分布式无人机的角度、速度、方向等,能够有效提升监测的覆盖率和准确率。以往的工作通过组合优化、博弈建模等来实现无人机的协同,但是这些方法往往采用了集中式的调度策略,或者假设环境是静态的;而在实际情况中,由于环境的复杂性,不同的无人机会动态调整自己的策略,因此很难通过寻找博弈均衡来设置无人机协同策略。针对上述问题,提出一种基于值分布多智能体强化学习的无人机协同方法,将每个无人机看做一个智能体,无人机通过与环境交互来最大化集体长期累积收益。在该环境中,由于无人机的移动策略可能是动态的,因此引入了值分布来刻画每个智能体的累积收益。相比于传统的多智能体强化学习,通过值分布学习,可以用概率分布对多智能体的累积收益进行评估,从而可以更全面地取得更稳定的结果。在模拟环境中的实验表明,以上的方法可以有效提升多个无人机协同的长期收益,相比于其他最新的算法,可以提升平均收益约17.2%。

关于f'(z)-af^(2)(z)的值分布探讨

运用Nevanlinna的亚纯函数值分布理论和正规族理论方法,研究了超越亚纯函数的值分布理论,进一步推广Hayman的结果,丰富了亚纯函数值分布理论。

基于遗传算法的气候突变对江西省分期降雨极值分布的影响

为了研究气候变化对江西省内主汛期降雨极值分布的影响,以江西省1960~2017年的逐日降雨资料为基础资料,采用多种检验方法检测突变点并对突变点进行检验,使用遗传算法与Fisher最优分割法对气候突变前后的汛期进行分期,并对气候突变前后分期降雨极值分布与设计降雨进行探讨。结果表明,1960~2017年江西省降雨量突变年为1991年,广昌与鄱阳湖区域需重点关注极端强降雨的发生;遗传算法适用于汛期划分与分期,气候突变后(1991~2017年)江西省主汛期设计降雨值大于气候突变前(1960~1990年),也大于整时段(1960~2017年)所得设计降雨值,在以设计降雨为基础推求江西省设计洪水时,需考虑气候变化对设计降雨值的影响,加强对洪水的防范。

基于广义极值分布的点蚀管道剩余寿命预测及案例分析

为了预测点蚀管道的剩余寿命,在对老龄管道腐蚀失效段的腐蚀深度进行拟合统计分析的基础上,建立广义极值分布函数,采用改进的人工鱼群算法(IASFA)优化模型参数,并利用估计结果预测整条管道最大腐蚀深度,基于可靠度理论预测了管道剩余寿命,并进行了案例分析和算法对比。结果表明,不同服役年限下腐蚀深度符合的概率分布函数不同,Gumbel分布、Frechet分布和Weibull分布的拟合优度较好,其余模型的拟合效果较差,仅用一种模型表征腐蚀状况具有局限性;通过案例分析,广义极值分布法、有限折线近似法、常规剩余寿命预测法计算的管道设计寿命分别为30.96、23.87、20.77 a,剩余寿命分别为14.96、7.87、4.77 a,广义极值分布法的计算结果与实际设计寿命一致,预测模型不受数据分布限制,其结果具有实际的指导意义。

基于广义极值的混沌电场峰值分布研究

通过分析峰值分布及广义极值分布理论关于混沌电场峰值分布的特点,获得一种混沌电场峰值分布的计算方法,结合Bootstrap重采样技术,提出了混沌电场峰值分布参数估计方法,该方法吸取了重采样技术估计的优点,对分布参数置信区间的估计更为准确、实用。以蒙特卡罗仿真和某机械搅拌混响室内电场数据为实例,结果表明,与传统的正态近似法、百分位法、BC-t等方法相比,其计算结果与实际结果更为吻合,证明了该方法具有更高的准确度。

基于超阈值分布的直流充电桩计量准确性预测研究

直流充电桩准确性取决于超过误差阈值但小于极大值区间的分布。文中从POT模型出发,引入广义极值分布和广义Pareto分布对非对称的误差数据序列进行特征描述,采用超限均值函数法和峰度值法对阈值进行估计。结果表明直流充电桩误差数据可用广义Pareto分布较好拟合,并结合危险率函数给出超阈值风险的概率,为预防直流充电桩误差极值可能造成的风险提供较为可靠的依据。

矿山地震能量极值分布的研究及其应用

将冈贝尔Ⅰ型极值分布应用于矿山地震能量分布规律的研究 ,结合前人的研究成果 ,推导了能量极值分布函数的表达式 ,给出了其参数确定方法。在简要介绍老虎台矿矿山地震活动的构造及物理背景后 ,结合老虎台矿矿震实际 ,介绍了如何将能量极值分布用于强矿山地震事件的预测。结果表明 ,用这种方法预测的月最大矿震能量的概率分布与实际记录的矿震月最大能量分布一致。最后应用该法预测了老虎台矿未来几年内强矿震事件发生的概率。

样品年份、化学值分布参数对近红外检测结果的影响

以云南优质烤烟为实验材料,在国产光栅漫反射型近红外仪器上,比较研究了不同年份样品建模、不同化学值分布建模对近红外检测结果的影响。结果表明:总糖、尼古丁组分模型偏差受年份影响较大,总氮组分模型偏差与样品年份关系不明显。烤烟组分的不同化学值分布建模结果表明:用化学值按自然正态分布的样品建立模型的结果优于按均匀分布建模的结果。该研究对从大量天然产物样品中挑选代表性样品时所采用的挑选方法和原则具有指导性的参考价值。

标准化降水指数与广义极值分布干旱指数在西北地区应用的对比分析

从气象干旱的角度出发,对比分析了基于广义极值分布理论构建的新干旱指数GEVI(General-ized Extreme Value Index)和我国广泛应用的SPI(Standardized Precipitation Index)指数,详细讨论了SPI和GEVI指数在西北地区干旱监测中的适用性。结果表明,SPI和GEVI指数在计算原理上具有相似性,在一定程度上衡量某一地区干旱程度和反映干旱范围方面具有一致性和可替代性。但因两者采取不同的分布形态,对干旱等级的衡量效果不尽相同。GEVI指数在拟合降水量分布函数时更为详尽、客观。在西北5省(区)的干旱监测中,对地处干旱半干旱区的甘肃来说,GEVI指数在干旱强度判定方面优于SPI指数;对年降水量最少的新疆地区来说,GEVI指数比SPI指数在干旱监测方面更为适用。

可考虑历史洪水信息的广义极值分布线性矩法的研究

在水文及其他行业中广义极值分布(GEV)是一种较为常用的分布线型,包括极值Ⅰ型、极值Ⅱ型和极值Ⅲ型分布。在介绍了该分布线性矩与其参数关系后,给出了有效的可以考虑历史洪水信息的线性矩公式,并对由线性矩推求分布密度函数中k值作了改进。通过统计试验计算分析了线性矩在该分布中的统计性能及历史洪水公式的适用性,并与绝对值准则和平方和准则两种不同优化适线法、矩法作了比较。统计试验表明,改进k值计算后的线性矩法略优于传统线性矩法。从总体上讲,改进k值计算后的线性矩法优于平方和准则适线法及矩法,其参数及设计值的不偏性很好,与绝对值准则适线法总体上相当。

广义极值分布参数估计方法的对比分析

简介了广义极值分布的3种参数估计方法:极大似然(ML)、线性矩(LM)和间隔最大积(MPS)方法的特点和计算方法,采用历年马口月最大径流量和广州日最大降水量作为广义极值分布不同参数估计方法的实证分析例子。分析结果表明,两实例各自3种参数估计方法得到的3个参数值较为接近,各种拟合优度检验结果表明两实例均服从广义极值分布,但MPS参数估计推算的设计值与观测值拟合更好。

基于广义极值分布的设计基本风速及其置信限计算

引入涵盖Gumbel,Frechet,W eibull三类极值渐近分布的广义极值分布(GED)模型,给出该模型参数的极大似然估计的计算公式,并由此导出设计基本风速及其置信上限的计算方法.采用南通气象观测站的年最大风速资料进行实证研究,分别用似然比法和Kolmogorv统计量检验分布的拟合优度,得出南通气象观测站年最大风速符合Frechet分布,而由样本值构造的经验分布与理论分布曲线基本相吻合.因此,由GED模型导出的计算方法明显优于采用单一分布的方法.

基于Monte Carlo法的极值分布类型及其参数估计方法比较

为探讨极值概率分布模型(极值Ⅰ型、Ⅱ型、Ⅲ型分布)在工程场地重现期内极值风速预测中的适用性,以工程上常用的风速分布模型为依据,采用Monte Carlo数值模拟法分别产生服从指数分布、正态分布、瑞利分布、威布尔分布、对数正态分布、广义极值分布的伪风速母样.基于以上伪风速母样分别使用极大似然参数估计法和概率权矩法对极值Ⅰ型、Ⅱ型、Ⅲ型分布模型中的参数进行估计,并与伪风速母样的理论极值分布进行对比分析.结果表明:极大似然参数估计法适用性较强,参数估计精度较高;重现期内极值风速的估算对风速母样分布类型敏感,服从不同分布的风速母样,应有针对性选用极值分布类型估算重现期内极值风速.

复合极值分布理论及其工程应用

复合极值分布理论在国际上公开发表以来得到了国内外的大量引用和应用。本文就该理论由一维拓宽至多维进行了理论论述 ,并对其不同模式在海岸、海洋和水利工程中的应用做了实例计算。