状态相关闭排队网络中的性能指标灵敏度公式

本文通过研究一类Markov过程在无穷小矩阵的参数摄动下稳态性能指标的灵敏度 ,运用无穷小矩阵的群逆、实现矩阵和势能这三个描述稳态性能指标灵敏度的等价量 ,给出了状态相关闭排队网络在参数摄动下的稳态性能指标灵敏度公式 .这些结果可直接用于排队网络的控制和优化 .

矩阵方程AX-XB=C非奇异解的存在性

本文讨论了矩阵方程AX-XB =C非奇异解的存在性问题 ,并给出了该方程非奇异解存在的几个充分条件 .同时 。

闭排队网络当性能函数与参数相关时的性能灵敏度分析

借助于无穷小矩阵摄动方法 ,讨论了一类Markov过程 ,其稳态性能关于参数摄动的灵敏度分析问题 .然后研究了闭排队网络的稳态性能灵敏度分析问题 ,并在参数相关性能函数的情况下 ,给出了网络的几种稳态性能的灵敏度公式 .这些公式表明稳态性能灵敏度很容易通过网络势能进行计算 .

闭排队网络基于并行仿真的灵敏度估计和优化算法

基于 Markov性能势理论 ,对一类闭排队网络的灵敏度估计和优化 ,建立了一种行之有效的并行仿真算法。采用公共随机数 ,使所有的处理器使用相同的样本轨道 ,以减少各个处理器之间的通讯时间。在一台 SPMD并行计算机上的仿真实例表明 。

开排队网络的性能指标灵敏度公式

研究了Ｍａｒｋｏｖ型开排队网络的性能指标在其参数摄动下的灵敏度，并在性能指标函数与网络参数有关的情况下，导出了用网络势能表示的几种稳态性能指标的灵敏度公式．同时给出了实现因子的一个表达式．

M/G/1排队系统的性能灵敏度分析

非 Markov型排队系统经常被用来作为某些实际工程问题 (如通讯网络 )的研究模型 .对于一般的 M/ G/ 1排队系统 ,本文通过研究其嵌入 Markov链 ,讨论了系统的稳态性能灵敏度分析问题 ,并给出用嵌入 Markov链的势能表示的稳态性能灵敏度公式 .由于嵌入 Markov链要比描述其系统状态的半 Markov过程简单得多 ,故本文的结果对 M/ G/ 1排队系统的性能灵敏度仿真计算及系统的优化 。

半Markov决策过程折扣模型与平均模型之间的关系

首先分别在折扣代价与平均代价性能准则下,讨论了一类半M arkov决策问题.基于性能势方法,导出了由最优平稳策略所满足的最优性方程.然后讨论了两种模型之间的关系,表明了平均模型的有关结论,可以通过对折扣模型相应结论取折扣因子趋于零时的极限来得到.

半Markov控制过程在折扣代价准则下的最优平稳策略

讨论一类半Markov控制过程(SMCP)的折扣代价性能优化问题.通过引入一个矩阵,该矩阵可作为一个Markov过程的无穷小矩阵,对一个SMCP定义了折扣Poisson方程,并由这个方程定义了α 势.基于α 势,给出了由最优平稳策略所满足的最优性方程.最后给出一个求解最优平稳策略的迭代算法,并提供一个数值例子以表明该算法的应用.

一类可数Markov控制过程的最优平稳策略

研究了一类具有可数状态空间的Markov控制过程在无限水平平均代价准则下的最优平稳策略问题.对此类过程,引入了折扣Poisson方程,运用无穷小矩阵和性能势的基本性质,导出了平均代价模型在紧致行动集上的最优性方程,并证明了其解的一个存在性定理.

可数半Markov决策过程折扣代价性能优化

讨论一类可数半M arkov决策过程(CSM DP)在折扣代价准则下的性能优化问题.运用等价M arkov过程方法,定义了折扣Po isson方程,并由该方程定义了α-势.基于α-势,导出了由最优平稳策略所满足的最优性方程.较为详细地讨论了最优性方程解的存在性问题,并给出了其解存在的一些充分条件.

具有相型服务分布的排队系统的性能灵敏度分析

具有非指数服务分布的排队网络已被广泛应用于许多领域，如通讯网络和管理系统．本文借助于无穷小矩阵摄动方法，研究了Ｍ／ＰＨ／１排队系统的稳态性能灵敏度分析问题，给出了性能灵敏度公式，并表明了稳态性能灵敏度很容易通过系统势能进行计算．同时，给出一种计算势能及性能导数的算法．这个算法可直接用于系统的控制与优化，因为它基于分析系统的一条单一样本轨道．最后提供一个数值例子来表明这个算法的应用．

计算机系统入侵检测的隐马尔可夫模型

入侵检测技术作为计算机安全技术的一个重要组成部分 ,现在受到越来越广泛地关注 首先建立了一个计算机系统运行状况的隐马尔可夫模型 (HMM) ,然后在此模型的基础上提出了一个用于计算机系统实时异常检测的算法 ,以及该模型的训练算法 这个算法的优点是准确率高 ,算法简单 ,占用的存储空间很小 。

系统调用序列的Markov模型及其在异常检测中的应用

建立了计算机系统中系统调用序列的Markov模型，并在此模型的基础上提出了一种用于计算机异常检测的方法。文章利用统计方法分析进程中系统调用的发生情况，定义了一个依赖于状态转移概率的失配因子，并用它来计算失配率，由此判断被监视进程进行的操作是正常行为还是异常行为，文章还提出了一种基于遗忘因子的状态转移概率的更新算法。

一类闭排队网络基于性能势的优化算法

讨论了一类闭排队网络的优化算法 .该闭排队网络具有一般的性能指标函数 ,它既依赖于网络系统的状态 ,又依赖于每个服务者的服务率 .采用实现因子、性能指标势及无穷小矩阵的群逆三个量计算了稳态性能指标代价对服务率的梯度 ,还应用直接梯度搜索方法得到了使性能指标达到最小的最优策略 .最后 。

连续时间MCP在紧致行动集上的最优策略(英文)

文中研究了一类连续时间Markov控制过程 (CTMCP)无穷水平平均代价性能的最优控制决策问题 .文章采用无穷小生成元和性能势的基本性质 ,直接导出了平均代价模型在紧致行动集上的最优性方程及其解的存在性定理 ,提出了求解ε 最优平稳控制策略的数值迭代算法 ,并给出了这种算法的收敛性证明 .最后通过分析一个数值例子来说明这种方法的应用 .

基于隐马尔可夫模型的异常检测

首先建立了一个计算机系统运行状况的隐马尔可夫模型 ,然后在此模型的基础上提出了一个用于计算机系统实时异常检测的算法 ,这个算法根据最大信息熵原理 ,通过比较固定长度系统行为序列的平均信息熵和一个预先给定的阈值来检测入侵行为 .论文还给出了该模型的训练算法 .这个检测算法的优点是准确率高 ,算法简单 ,占用的存储空间很小 。

动态电源管理的随机切换模型与在线优化

考虑系统参数未知情况下的动态电源管理问题,提出一种基于强化学习的在线策略优化算法.通过建立事件驱动的随机切换分析模型,将动态电源管理问题转化为带约束的Markov决策过程的策略优化问题.利用此模型的动态结构特性,结合在线学习估计梯度与随机逼近改进策略,提出动态电源管理策略的在线优化算法.随机切换模型对电源管理系统的动态特性描述精确,在线优化算法自适应性强,运算量小,精度高,具有较高的实际应用价值.

基于支持向量机的异常检测

提出一种使用支持向量机 (SVM)进行计算机系统实时异常检测的方法 ,内容涉及到一种对支持向量机方法的改进算法、对数据预处理的方法及SVM核函数的选取 .试验结果表明采用这一算法进行入侵检测具有准确率高、计算简单、占用的存储空间小等优点 .

Markov控制过程基于性能势的平均代价最优策略

研究了一类离散时间 Markov控制过程平均代价性能最优控制决策问题 .应用Markov性能势的基本性质 ,在很一般性的假设条件下 ,直接导出了无限时间平均代价模型在紧致行动集上的最优性方程及其解的存在性定理 .提出了求解最优平稳控制策略的迭代算法 ,并讨论了这种算法的收敛性问题 .最后通过分析一个实例来说明这种算法的应用 .

M/G/1排队系统的性能灵敏度估计与仿真

对具有一般分布的排队系统-M/G/1排队系统给出了一种通过其嵌入Markov链来计算系统势能及性能导数的仿真算法。由于该算法基于分析系统的一条单一样本轨道,故可直接用于系统的控制与优化。最后提供一个数值例子来表明该算法的应用。