远离旧区域和避免回路的强化探索方法

以内在动机为导向的探索类强化学习中,通常根据智能体对状态的熟悉程度产生内在奖励,难以获得较合适的近似度量方法,且这种长期累计度量的方式没有重视状态在其所处episode中的作用。Anchor方法使用锚代替分层强化学习中的子目标,鼓励智能体以远离锚的方式进行探索。受Anchor方法的启发,根据转移状态与同一个episode中历史状态之间的距离设计内在奖励函数,进而提出远离旧区域和避免回路的强化探索方法。将当前episode中部分历史状态组成的集合作为区域,周期性更新区域为最近访问的状态集合,根据转移状态与区域的最小距离给予智能体内在奖励,使智能体远离当前最近访问过的旧区域。将转移状态的连续前驱状态作为窗口并规定窗口大小,根据窗口范围内以转移状态为终点的最短回路长度给予内在奖励,防止智能体走回路。在经典的奖励稀疏环境MiniGrid中的实验结果表明,该方法避免了对状态熟悉程度的度量,同时以一个episode为周期对环境进行探索,有效提升了智能体的探索能力。

城市老旧区域社会治理存在问题、原因及对策分析

随着计划经济向市场经济转型,城市化的快速发展,我国城市的空间结构发生巨大重构。在此过程中,以棚户区、城区老工业区和独立工矿区等为代表的老旧区域在居住环境和公共基础、就业和收入、基层社会组织建设、公共服务和社会保障体系建设等方面存在的社会治理问题越来越突出,这既有历史的原因,也有我国城镇化过程相对粗放的原因。要解决这些问题,要从加强系统研究和政策支持、加快城市老旧区域改造、深化城市规划和城市管理体制改革、加快解决国企改革历史遗留问题、采取多种措施促进就业增收等方面入手,进一步提升城市老旧区域社会治理水平。

新旧区域主义理论比较综述

在阐述区域主义相关理论溯源的基础上,从核心特征、研究对象、主题等方面综合论述新区域主义与旧区域主义的区别,本文旨在总结对新旧区域主义已有的研究结果,在此基础上结合东南亚新区域主义表达笔者对新区域主义的一些见解,从而为制定促进我国区域发展的对策提供参考。

三旧改造区域的城市更新效益分析——以广州北岸文化码头区域为例

城市更新目前已成为融合社会、经济、文化和物质环境全面复兴的城市公共政策,对城市的发展,尤其是对旧村庄、旧厂房、旧城镇等"三旧"区域的发展,有着重要的影响。本文拟以广州北岸文化码头为例,通过实地调研,从经济、社会和环境三个方面分析城市更新下三旧改造区域的用地效益。研究发现,经历城市更新后,北岸文化码头区域的经济效益主要体现在土地单位产出的提高,而用地的集聚效益尚不显著;但社会效益和环境效益则十分显著。

区域主义的新旧辨析

新区域主义实践是当今世界政治与经济的一个突出现象,新区域主义研究也成为中外学术界的热门话题。新区域主义之"新"在于它是在新形势下对新问题的新对应和新反思。

望田煤业旧采区域内遗留空巷稳定性的数值分析

针对望田煤业8号煤层旧采区遗留空巷的实际情况及地质条件,通过数值模拟不同跨度单一空巷及不同跨度空巷群的稳定性分析,得出:望田旧采区域遗留的大部分空巷处于稳定状态;随着空巷跨度的增大,其顶板越容易产生裂隙,发生冒落及变形。空巷两帮上方顶煤中出现应力集中,高于两侧实体煤区顶煤应力;并且随着空巷跨度的增大,顶煤集中应力也越大。空巷跨度相同时,相邻空巷数目越多,顶煤集中应力越大。

基于新区域主义的长三角区域化研究

20世纪80年代以来产生的新区域主义深刻地影响了当代区域化的进程,本文在分析新区域主义产生和对比新旧区域主义的基础上,建议长三角地区应该以新区域主义理论为指导,完善考核体系,形成协调机构,促进要素流动等方面促进区域化的发展。

新区域主义与长三角区域化

本文在分析新区域主义产生和对比新旧区域主义的基础上,认为长江三角洲(文中简称长三角)地区应该以新区域主义理论为指导,从完善考核体系、形成协调机构、促进要素流动等方面促进其区域化的发展。

“新区域主义”的核心特征

全球化背景下的"新区域主义"本质上是一种具有经验上和理论上的新内容的新现象。经验上,主要表现为综合性、区域间性、开放性、主体化和趋同化等;理论上,主要表现为体系化、社会化、综合化和秩序化等。这些核心特征将之与冷战背景下"旧区域主义"区分开来。