一种有限时段Markov决策过程的强化学习算法

研究有限时段非平稳的 Markov决策过程的强化学习算法。通过引入一个人工吸收状态 ,把有限时段问题变为无限时段问题 ,从而可利用通常的强化学习方法来求解。在文献 [3]提出的算法思想基础上 ,提出了一种新的有限时段非平稳的 Markov决策过程的强化学习算法 。

有限时段源一维水质模型的求解及其简化条件

有限时段源一维水质模型的求解及其简化为按瞬时源处理的判别条件,对事故性排放污水的应急计算具有十分重要的意义。在等强度有限时段源条件下,采用变量替换和拉普拉斯变换方法,求解了河流污染物浓度分布的解析解。在不同的简化条件下,讨论了该解析解与可对比解析解的一致性。定义了排放数W_t=u^2t_0/D_x,提出了有限时段源可以按瞬时源计算的临界时间t_k(W_t)方程和简化判别条件:当扩散历时t<t_k,按有限时段源的浓度分布公式计算;当扩散历时t≥t_k,按瞬时源的浓度分布公式计算。

有限时段源模式在河流水质预测中的应用

有限时段源是指排放时间比瞬时源长,又比连续源短的污染点源。实际河流中的间歇式排污多属于这种情况。目前国内很少对间歇排污的水质预测进行研究。

基于Matlab的三维矩阵运算在地表水风险预测中的应用研究

涉及有毒有害和易燃易爆危险物质生产、使用、储存的建设项目生产过程中可能存在泄漏或爆炸的风险,因抢救事故而产生的消防废水进入水体会对项目所在区域附近的地表水造成一定的影响,且多数事故污染物的排放多属于有限时段排放。最新修订的《环境影响评价技术导则地表水环境》(HJ2.3-2018)中未推荐解析解模型用于有限时段排放源对水环境影响预测,商业软件环境下的数值解模型则多数操作繁琐。为快捷准确地模拟预测有毒有害物质有限时段污染物质排放对水体的影响,文章以某水泥厂氨水泄漏为例,基于Matlab三维矩阵运算方法,模拟计算出污染物进入水体后随时间和空间的变化情况,极大提高了预测工作效率,为建设项目地表水风险预测提供了技术依据。