基于Modbus协议的通用控制系统设计研究

文章提出了一种基于Modbus协议的通用控制系统设计方法,该设计旨在提供一种利于客户站集成,且能够快速查看分机设备状态的控制系统,对单个分机设备可实现可视化操作,满足外部远程通信的要求,同时考虑通信速率、控制界面、通信协议的兼容性,实现快速保护,冗余备份等功能。

结合记忆网络和动态折扣系数的深度Q网络

深度强化学习立足于解决环境交互问题,实现智能体的连续序列决策。传统强化学习算法基于马尔科夫决策过程,未来的状态仅与当前的状态有关,忽略了序列决策过程中记忆对当前决策的重要影响。此外,奖励的折扣系数为固定值,难以描述不同训练阶段当前奖励值与未来奖励期望对当前决策的动态影响。通过结合深度Q网络和循环记忆网络的神经网络模型,将序列决策的长期记忆加入决策过程,同时设置动态折扣系数,对不同训练阶段的深度Q网络模型赋予适当的折扣系数,从而加速了深度Q网络模型收敛并提高了其性能。