针对情景记忆算法中记忆池中的样本利用率低的问题,提出了一种基于情景记忆和值函数分解框架相结合的合作型多智能体强化学习算法,即情景记忆值分解(episodic memory value decomposition,EMVD)算法。EMVD算法在情景记忆部分以时间差分...针对情景记忆算法中记忆池中的样本利用率低的问题,提出了一种基于情景记忆和值函数分解框架相结合的合作型多智能体强化学习算法,即情景记忆值分解(episodic memory value decomposition,EMVD)算法。EMVD算法在情景记忆部分以时间差分误差平方为依据来更新记忆池,使记忆池中一直保留对学习效果提升更重要的情景记忆样本,并将情景记忆算法与神经网络相结合,提高了算法的收敛速度。为了将EMVD算法应用于机器人协作运输任务中,设定机器人和运输目标的位置为状态,并且设计了回报函数。仿真结果表明,EMVD算法可以探索出机器人协作运输任务的最优策略,提高了算法的收敛速度。展开更多
2022年3—9月,在浙江省淳安县开展了两栖和爬行动物资源调查,并分析其多样性特征。结果表明:(1)两栖和爬行动物共记录到4目24科57属69种,其中两栖动物美洲牛蛙Rana catesbeiana、爬行动物红耳彩龟Trachemys scripta elegans和拟鳄龟Chel...2022年3—9月,在浙江省淳安县开展了两栖和爬行动物资源调查,并分析其多样性特征。结果表明:(1)两栖和爬行动物共记录到4目24科57属69种,其中两栖动物美洲牛蛙Rana catesbeiana、爬行动物红耳彩龟Trachemys scripta elegans和拟鳄龟Chelydra serpentina为外来物种,实际记录本地两栖动物2目9科22属28种1818只,本地爬行动物2目15科35属41种3120只;其中,单型科有12个,单型属有48个,国家二级保护动物有6种,浙江省重点保护野生动物有16种,说明淳安县两栖和爬行动物具有较高的保护价值;15个优势种均为经济价值低的小型动物或者有人工养殖存在的物种,说明淳安县大多数两栖和爬行动物承受着较大的生态环境压力。(2)按动物地理区系类型分,淳安县两栖和爬行动物表现出偏向东洋界的特征,东洋界类型有57种,占淳安县两栖和爬行动物总种数的86.36%,其中,华中华南区物种有37种(占56.06%),南中国型物种有42种(占63.64%)。(3)按生态类群分,淳安县两栖动物以流水型物种为主,共10种,占两栖动物总种数的37.04%,爬行动物以陆栖型和陆栖树栖型物种为主,共24种,占淳安县爬行动物总种数的61.54%;陆栖流水型和水栖型中,两栖动物占比极显著的高于爬行动物(P<0.01);而陆栖型中,爬行动物占比极显著的高于两栖动物(P<0.01)。以上分析说明两栖动物偏喜湿地环境,而爬行动物偏喜陆地环境。因此,淳安县两栖动物面临更大的挑战,对其保护显得更为迫切,建议优先开展湿地生态环境的治理与保护。展开更多
文摘针对情景记忆算法中记忆池中的样本利用率低的问题,提出了一种基于情景记忆和值函数分解框架相结合的合作型多智能体强化学习算法,即情景记忆值分解(episodic memory value decomposition,EMVD)算法。EMVD算法在情景记忆部分以时间差分误差平方为依据来更新记忆池,使记忆池中一直保留对学习效果提升更重要的情景记忆样本,并将情景记忆算法与神经网络相结合,提高了算法的收敛速度。为了将EMVD算法应用于机器人协作运输任务中,设定机器人和运输目标的位置为状态,并且设计了回报函数。仿真结果表明,EMVD算法可以探索出机器人协作运输任务的最优策略,提高了算法的收敛速度。
文摘2022年3—9月,在浙江省淳安县开展了两栖和爬行动物资源调查,并分析其多样性特征。结果表明:(1)两栖和爬行动物共记录到4目24科57属69种,其中两栖动物美洲牛蛙Rana catesbeiana、爬行动物红耳彩龟Trachemys scripta elegans和拟鳄龟Chelydra serpentina为外来物种,实际记录本地两栖动物2目9科22属28种1818只,本地爬行动物2目15科35属41种3120只;其中,单型科有12个,单型属有48个,国家二级保护动物有6种,浙江省重点保护野生动物有16种,说明淳安县两栖和爬行动物具有较高的保护价值;15个优势种均为经济价值低的小型动物或者有人工养殖存在的物种,说明淳安县大多数两栖和爬行动物承受着较大的生态环境压力。(2)按动物地理区系类型分,淳安县两栖和爬行动物表现出偏向东洋界的特征,东洋界类型有57种,占淳安县两栖和爬行动物总种数的86.36%,其中,华中华南区物种有37种(占56.06%),南中国型物种有42种(占63.64%)。(3)按生态类群分,淳安县两栖动物以流水型物种为主,共10种,占两栖动物总种数的37.04%,爬行动物以陆栖型和陆栖树栖型物种为主,共24种,占淳安县爬行动物总种数的61.54%;陆栖流水型和水栖型中,两栖动物占比极显著的高于爬行动物(P<0.01);而陆栖型中,爬行动物占比极显著的高于两栖动物(P<0.01)。以上分析说明两栖动物偏喜湿地环境,而爬行动物偏喜陆地环境。因此,淳安县两栖动物面临更大的挑战,对其保护显得更为迫切,建议优先开展湿地生态环境的治理与保护。
