半马氏MDP平均模型

研究了半马氏MDP平均模型，提出了新的较弱的假设条件，证明了半马氏MDP平均模型最优方程解的存在性，然后从最优方程出发，证明了存在ε（≥0）－最优平稳策略。

非时齐折扣马氏决策规划(一)

本文在状态集可数、行动集任意的条件下,讨沦报酬函数满足一种推广的绝对平均相对有界的非时齐折扣马氏决策规划;建立了模型的最优方程,证明了ε(>0)最优马氏策略的存在性;最后给出最优策略(最优马氏策略)存在的必要充分条件.

连续时间马尔可夫决策过程的折扣模型

本文考虑的是转移速率族任意且费用率函数可能无界的连续时间马尔可夫决策过程的折扣模型．放弃了传统的要求相应于每个策略的 Ｑ －过程唯一等条件，而首次考虑相应每个策略的 Ｑ －过程不一定唯一， 转移速率族也不一定保守， 费用率函数可能无界， 且允许行动空间非空任意的情形． 本文首次用"α－折扣费用最优不等式"更新了传统的α－折扣费用最优方程，并用"最优不等式"和新的方法，不仅证明了传统的主要结果即最优平稳策略的存在性， 而且还进一步探讨了（ ∈＞０ ）－最优平稳策略，具有单调性质的最优平稳策略， 以及（∈≥０） －最优决策过程的存在性， 得到了一些有意义的新结果． 最后， 提供了一个迁移率受控的生灭系统例子， 它满足本文的所有条件， 而传统的假设（见文献［１－１４］）均不成立．