多智能体强化学习方法综述

在自动驾驶、团队配合游戏等现实场景的序列决策问题中,多智能体强化学习表现出了优秀的潜力。然而,多智能体强化学习面临着维度灾难、不稳定性、多目标性和部分可观测性等挑战。为此,概述了多智能体强化学习的概念与方法,并整理了当前研究的主要趋势和研究方向。研究趋势包括CTDE范式、具有循环神经单元的智能体和训练技巧。主要研究方向涵盖混合型学习方法、协同与竞争学习、通信与知识共享、适应性与鲁棒性、分层与模块化学习、基于博弈论的方法以及可解释性。未来的研究方向包括解决维度灾难问题、求解大型组合优化问题和分析多智能体强化学习算法的全局收敛性。这些研究方向将推动多智能体强化学习在实际应用中取得更大的突破。

有蟲還是無蟲?——中國上古醫療史中的“蠱”

中國醫療史的研究在過去百年得到長足的發展,然而,'蠱'作爲一個與疾病有關的名詞,雖然在古代醫學或非醫學的文獻中屢見不鮮,但前人多把視野聚焦在畜蠱害人之上,忽略了'蠱'在醫學疾病中的意義。本文以甲骨文、清華簡及其他先秦文獻入手,探索'蠱'在先秦時期的含意,並討論古人防'蠱'與治'蠱'之法,亦會窺探上古醫療疾病觀。

谁是捏古伦——从丝路上的小人物看明初中国的全球化

《明史·外国列传》中有"拂菻"国的史料,提到元末其国人捏古伦入市中国的情况,中国史书对此事的结果没有留下记载,然而,捏古伦不会是默默无闻的人物,否则明太祖也不会召见他。虽然《明史》记载捏古伦乃"入市"中国,但他可能同时具备传教士的身份。本文从捏古伦这段史料入手,考察在元末明初丝路上的西方商人、传教士与明初中国的接触,并阐述明初中西交流与全球化的关系。

戰争與傳説:大禹傳説中的對外戰争及其流傳

自顧頡剛起,大禹傳説的研究迄今已延续八十年,從傳説發展、文類異同、民俗等角度,都已經形成深入的討論。但前人多把視野放在大禹其人其事是否是史實之上,忽略了傳説的流傳。本文以大禹的戰争爲例,分析其流傳過程,考察大禹的對外戰争是如何被'塑造'出來的。

“保”与殷周时期的保母

殷商甲骨文、两周的金文及传世古文献中都有“保”字。甲骨文和金文的字形早已透露出“保”与女性存在着天然的关系。而传世文献如《尚书》中的“保”就有“背、抱孩子”之意。本文从甲骨文和金文的字形与用法入手,考证“保”字的原始字义,认为在殷商时期“保”是官名,至西周时期“保”这一官职的分工就更加细致。本文以出土文献与传世文献互证,认为上古时期的“保”类似于今天的保母之职,指代照顾王室贵族子女的教育和日常生活的职业女性。