期刊文献+
共找到57篇文章
< 1 2 3 >
每页显示 20 50 100
射频能量收集认知无线电网络的最优时限约束频谱接入 被引量:1
1
作者 张凯 沈世林 +3 位作者 房婷 张葳 林艳 张一晋 《南京理工大学学报》 CAS CSCD 北大核心 2024年第2期218-226,共9页
为了在能量收集与传输时限约束下优化认知无线电网络次用户的机会式频谱接入,该文综合考虑信道状态的时变性与观测性,基于队列所有数据包的传输紧迫性对次用户时限约束频谱接入进行马尔可夫决策过程(MDP)建模。证明此MDP建模具有单链性... 为了在能量收集与传输时限约束下优化认知无线电网络次用户的机会式频谱接入,该文综合考虑信道状态的时变性与观测性,基于队列所有数据包的传输紧迫性对次用户时限约束频谱接入进行马尔可夫决策过程(MDP)建模。证明此MDP建模具有单链性质,进而使用价值迭代算法求解确定性平稳ε-最优策略,有效降低了最优策略求解复杂度。仿真结果在不同网络参数配置下验证了该文策略相较于贪婪策略的吞吐率性能优势。 展开更多
关键词 传输时限 能量收集 认知无线电 马尔可夫决策过程 吞吐率 机会式接入 计算复杂度 确定性平稳策略
下载PDF
Markov控制过程基于单个样本轨道的在线优化算法 被引量:5
2
作者 唐昊 奚宏生 殷保群 《控制理论与应用》 EI CAS CSCD 北大核心 2002年第6期865-871,共7页
在Markov性能势理论基础上 ,研究了Markov控制过程的性能优化算法 .不同于传统的基于计算的方法 ,文中的算法是根据单个样本轨道的仿真来估计性能指标关于策略参数的梯度 ,以寻找最优 (或次优 )随机平稳策略 .由于可根据不同实际系统的... 在Markov性能势理论基础上 ,研究了Markov控制过程的性能优化算法 .不同于传统的基于计算的方法 ,文中的算法是根据单个样本轨道的仿真来估计性能指标关于策略参数的梯度 ,以寻找最优 (或次优 )随机平稳策略 .由于可根据不同实际系统的特征来选择适当的算法参数 ,因此它能满足不同实际工程系统在线优化的需要 .最后简要分析了这些算法在一个无限长的样本轨道上以概率 1的收敛性 ,并给出了一个三 状态受控Markov过程的数值实例 . 展开更多
关键词 markov控制过程 单个样本轨道 在线优化算法 离散事件动态系统 随机平稳策略
下载PDF
一种有限时段Markov决策过程的强化学习算法 被引量:4
3
作者 李春贵 刘永信 《广西工学院学报》 CAS 2003年第1期1-4,共4页
研究有限时段非平稳的 Markov决策过程的强化学习算法。通过引入一个人工吸收状态 ,把有限时段问题变为无限时段问题 ,从而可利用通常的强化学习方法来求解。在文献 [3]提出的算法思想基础上 ,提出了一种新的有限时段非平稳的 Markov决... 研究有限时段非平稳的 Markov决策过程的强化学习算法。通过引入一个人工吸收状态 ,把有限时段问题变为无限时段问题 ,从而可利用通常的强化学习方法来求解。在文献 [3]提出的算法思想基础上 ,提出了一种新的有限时段非平稳的 Markov决策过程的强化学习算法 。 展开更多
关键词 强化学习 有限时段 markov决策过程 无完全模型 库存控制 机器学习 非平稳
下载PDF
Markov控制过程基于神经元动态规划的优化算法 被引量:1
4
作者 唐昊 奚宏生 殷保群 《中国科学技术大学学报》 CAS CSCD 北大核心 2001年第5期549-557,共9页
论文在Markov性能势理论基础上 ,研究了Markov控制过程在神经元网络等逼近结构表示的随机平稳策略作用下的仿真优化算法 ;分析了它们在一个无限长的样本轨道上以概率 1的收敛性 ;并给出了一个三
关键词 markov性能势理论 markov控制过程 随机平稳策略 样本轨道 神经元动态规划 随机决策问题
下载PDF
一类可数Markov控制过程的最优平稳策略 被引量:1
5
作者 殷保群 李衍杰 +1 位作者 奚宏生 周亚平 《控制理论与应用》 EI CAS CSCD 北大核心 2005年第1期43-46,共4页
研究了一类具有可数状态空间的Markov控制过程在无限水平平均代价准则下的最优平稳策略问题.对此类过程,引入了折扣Poisson方程,运用无穷小矩阵和性能势的基本性质,导出了平均代价模型在紧致行动集上的最优性方程,并证明了其解的一个存... 研究了一类具有可数状态空间的Markov控制过程在无限水平平均代价准则下的最优平稳策略问题.对此类过程,引入了折扣Poisson方程,运用无穷小矩阵和性能势的基本性质,导出了平均代价模型在紧致行动集上的最优性方程,并证明了其解的一个存在性定理. 展开更多
关键词 可数markov控制过程 性能势 平均代价准则 紧致行动集 最优平稳策略
下载PDF
随机平稳策略下半Markov决策过程的仿真优化算法
6
作者 代桂平 唐昊 奚宏生 《控制理论与应用》 EI CAS CSCD 北大核心 2006年第4期547-551,共5页
基于性能势理论和等价Markov过程方法,研究了一类半Markov决策过程(SMDP)在参数化随机平稳策略下的仿真优化算法,并简要分析了算法的收敛性.通过SMDP的等价Markov过程,定义了一个一致化Markov链,然后根据该一致化Markov链的单个样本轨... 基于性能势理论和等价Markov过程方法,研究了一类半Markov决策过程(SMDP)在参数化随机平稳策略下的仿真优化算法,并简要分析了算法的收敛性.通过SMDP的等价Markov过程,定义了一个一致化Markov链,然后根据该一致化Markov链的单个样本轨道来估计SMDP的平均代价性能指标关于策略参数的梯度,以寻找最优(或次优)策略.文中给出的算法是利用神经元网络来逼近参数化随机平稳策略,以节省计算机内存,避免了“维数灾”问题,适合于解决大状态空间系统的性能优化问题.最后给出了一个仿真实例来说明算法的应用. 展开更多
关键词 随机平稳策略 等价markov过程 一致化markov 神经元动态规划 仿真优化
下载PDF
Semi-Markovian Model of Two-Line Queuing System with Losses 被引量:2
7
作者 Yuriy E. Obzherin 《Intelligent Information Management》 2016年第2期17-26,共10页
In the present paper, to build model of two-line queuing system with losses GI/G/2/0, the approach introduced by V.S. Korolyuk and A.F. Turbin, is used. It is based on application of the theory of semi-Markov processe... In the present paper, to build model of two-line queuing system with losses GI/G/2/0, the approach introduced by V.S. Korolyuk and A.F. Turbin, is used. It is based on application of the theory of semi-Markov processes with arbitrary phase space of states. This approach allows us to omit some restrictions. The stationary characteristics of the system have been defined, assuming that the incoming flow of requests and their service times have distributions of general form. The particular cases of the system were considered. The used approach can be useful for modeling systems of various purposes. 展开更多
关键词 Two-Line Queuing System with Losses Semi-markov process stationary Distribution of Embedded markov Chain stationary Characteristics of System
下载PDF
THE NEAR-CRITICAL AND SUPER-CRITICAL ASYMPTOTIC BEHAVIOR IN THE THERMODYNAMIC LIMIT OF REVERSIBLE RANDOM POLYMERIZATION PROCESSES
8
作者 韩东 《Acta Mathematica Scientia》 SCIE CSCD 2000年第3期380-389,共10页
In this paper, the near-critical and super-critical asymptotic behavior of a reversible Markov process as a chemical model for polymerization was studied. The results of the present paper, together with an analysis of... In this paper, the near-critical and super-critical asymptotic behavior of a reversible Markov process as a chemical model for polymerization was studied. The results of the present paper, together with an analysis of the sub-critical stage, establish the existence of three distinct stages (sub-critical, near-critical and super-critical stages) of polymerization (in the thermodynamic limit as N --> +infinity,),depending on the value of strength of the fragmentation reaction. These three stages correspond to the size of the largest length of polymers of size N to be itself of order log N, Nm/m+1 (m greater than or equal to 2, m not equal 4n, n greater than or equal to 1) and N, respectively. 展开更多
关键词 POLYMERIZATION markov process limit behavior stationary distribution
下载PDF
SUBCRITICAL ASYMPTOTIC BEHAVIOR IN THE MODIFIED LUSHNIKOV PROCESS OF POLYMERIZATION
9
作者 韩东 《Acta Mathematica Scientia》 SCIE CSCD 1996年第4期412-420,共9页
We consider a modified Lnshnikov process as a model of a chemical polymer ization anf study the asymptotic behavior (in the thermodynamic limit;as N →∞)of a particular probability distribution on the set of N-dimens... We consider a modified Lnshnikov process as a model of a chemical polymer ization anf study the asymptotic behavior (in the thermodynamic limit;as N →∞)of a particular probability distribution on the set of N-dimensional vectors,tile kth component of which is the number of k-mers.The study study establisles the existence of three stages (subcritical,near-critical and supercritical stages)of polymerization,dependenting upon the ratio of association and dissociation rates of f polymers.The present paper concentrates on the analysis of tile subcritical stage.In the sibcritical.stages we show that tile size of the largest length of polymers of stize N is of the order.log N as N →+∞. 展开更多
关键词 POLYMERIZATION markov process limit behavior stationary distribntion.
下载PDF
剖析马氏链平稳分布的讲解——谈《应用随机过程》教学 被引量:8
10
作者 刘秀芹 赵金玲 范玉妹 《大学数学》 2011年第4期199-202,共4页
通过平稳分布在Google搜索技术中的应用角度讲解马氏链的平稳分布的概念,并在此基础上对应用随机过程的教学做了粗浅的探讨.
关键词 应用随机过程教学 马氏链的平稳分布 GOOGLE搜索 PAGERANK
下载PDF
映射族的推移算子及其在随机过程中的应用 被引量:1
11
作者 杨向群 邱德华 《数学物理学报(A辑)》 CSCD 北大核心 2003年第2期231-244,共14页
该文研究很一般化的映射族的推移算子 .设参数集 T=[0 ,+∞ )或 T={0 ,1 ,2 ,… },以及任意非空的集合 Ω和 E,Ω和 E均不配置可测 σ代数 ,更不配置测度或概率 .在引进 δ映射和 δ代数的基础上 ,研究了 Ω到 E的映射族 X={X( t) ,t∈ ... 该文研究很一般化的映射族的推移算子 .设参数集 T=[0 ,+∞ )或 T={0 ,1 ,2 ,… },以及任意非空的集合 Ω和 E,Ω和 E均不配置可测 σ代数 ,更不配置测度或概率 .在引进 δ映射和 δ代数的基础上 ,研究了 Ω到 E的映射族 X={X( t) ,t∈ T∩ [0 ,σ) }( σ∈ T∪ {+∞ })存在推移算子的充分必要条件 .讨论了推移算子的诸多性质 。 展开更多
关键词 映射族 集合 数值函数 推移算子 平稳过程 markov过程 随机过程 δ映射 映射τ
下载PDF
新的无线传感器网络覆盖控制算法 被引量:32
12
作者 韩志杰 吴志斌 +2 位作者 王汝传 孙力娟 肖甫 《通信学报》 EI CSCD 北大核心 2011年第10期174-184,共11页
首先,设计了节点自适应传感半径调整算法(AASR,adaptive adjustment of sensing radius),通过节点自适应选择最佳的覆盖范围,有效地进行节点覆盖控制,减少节点能量虚耗,提高覆盖效率。其次,从调整效果、能量消耗和覆盖冗余度3个方面对... 首先,设计了节点自适应传感半径调整算法(AASR,adaptive adjustment of sensing radius),通过节点自适应选择最佳的覆盖范围,有效地进行节点覆盖控制,减少节点能量虚耗,提高覆盖效率。其次,从调整效果、能量消耗和覆盖冗余度3个方面对节点自适应传感半径调整算法进行了模拟实验和分析。仿真结果表明,AASR能够有效提高节点生存时间,减少能量消耗,提高覆盖率。 展开更多
关键词 WSN 覆盖控制 拓扑控制 半径调整
下载PDF
流行病灭绝时间和费用估计随机模型 被引量:1
13
作者 李文龙 蒋义文 姚楠 《数学杂志》 CSCD 北大核心 2007年第2期181-187,共7页
本文用具有吸收状态的生灭马氏过程建立了流行病随机模型,研究了灭绝之前生灭过程的分布,发现初始分布是拟平稳分布时,其灭绝时间服从指数分布,并得到了灭绝时间与状态概率的关系式和费用估计的期望值.应用模型给出了一个固定人口为N的... 本文用具有吸收状态的生灭马氏过程建立了流行病随机模型,研究了灭绝之前生灭过程的分布,发现初始分布是拟平稳分布时,其灭绝时间服从指数分布,并得到了灭绝时间与状态概率的关系式和费用估计的期望值.应用模型给出了一个固定人口为N的流行病灭绝时间和平均费用的数值模拟结果. 展开更多
关键词 灭绝时间 费用估计 马氏过程 拟平稳分布
下载PDF
一类广义复合Poisson过程 被引量:4
14
作者 方世祖 孙歆 《纯粹数学与应用数学》 CSCD 2009年第1期34-38,共5页
给出广义复合Poisson过程的定义,讨论它的基本性质和强马氏性,在假定个体分布是亚指数分布的条件下,给出它的一维分布函数的尾等价公式.证明任意多个相互独立的广义复合Poisson过程的线性组合是一个复合Poisson过程.
关键词 平稳无后效流 复合POISSON过程 强马氏性 线性组合 矩母函数 亚指数分布
下载PDF
用钾-氩法求地质事件真实年龄的方法探讨 被引量:2
15
作者 吴珍汉 《现代地质》 CAS CSCD 1989年第4期404-412,共9页
钾-氩法所测出的地质事件的表面年龄一般小于地质事件发生的真实年龄,其中很多没有地质意义。本文利用随机过程理论,在对地质体内^(40)Ar的逸散作用进行分析的基础上,推导出如下年龄计算公式: 在一定条件下,利用这些公式,可以据钾-氩法... 钾-氩法所测出的地质事件的表面年龄一般小于地质事件发生的真实年龄,其中很多没有地质意义。本文利用随机过程理论,在对地质体内^(40)Ar的逸散作用进行分析的基础上,推导出如下年龄计算公式: 在一定条件下,利用这些公式,可以据钾-氩法测试资料求出地质体形成时代t+t^(0)、热扰动结束时代t^(0)及热事件所持续的时期t'。据所导出的公式,对冀东迁西群地层的年龄进行讨论,求得2500Ma左右结束的那期热事件所持续的时期t'为4.76亿年,迁西群形成时代为3000—3300Ma。检验表明,公式有效。 展开更多
关键词 钾-氩法 表面年龄 真实年龄 氩逸散 马尔柯夫链 平稳过程 迁西群
下载PDF
三重马氏平稳过程的一些统计性质 被引量:3
16
作者 李寿山 谢彦红 《沈阳化工学院学报》 1999年第2期121-126,共6页
假定{Y(t),t∈R1}是由广义Wiener积分所定义的随机过程.若随机过程{Y(t)}被有界Borel可测函数f变换,则得随机泛函f(Y(t)),即得到新的随机过程,记为Q(t).本文首先粗略地探讨三重马氏平稳过... 假定{Y(t),t∈R1}是由广义Wiener积分所定义的随机过程.若随机过程{Y(t)}被有界Borel可测函数f变换,则得随机泛函f(Y(t)),即得到新的随机过程,记为Q(t).本文首先粗略地探讨三重马氏平稳过程{Y(t)}及其若干阶导数以及与它们有关的随机过程的一些概率性质.在此基础上,对性质“良好”的Borel函数f,讨论了如何求随机泛函Q(t)=f(Y(t))的最佳非线性预测量。 展开更多
关键词 随机积分 三重马氏 平稳过程 统计性质
下载PDF
三重马氏平稳过程的预测问题 被引量:1
17
作者 谢彦红 李扬 李寿山 《沈阳化工学院学报》 2002年第3期232-235,共4页
假设 {X(t) ,t∈R1}是由广义Wiener积分所定义的随机过程 .若这个随机过程被有界Borel可测函数 f(·)变换 ,则得到新的随机过程 f(X(t) ) ,记为Y(t) ,即Y(t) =f(X(t) ) .本文中对于较简单的Borel函数f(·) ,讨论随机过程Y(t) =f... 假设 {X(t) ,t∈R1}是由广义Wiener积分所定义的随机过程 .若这个随机过程被有界Borel可测函数 f(·)变换 ,则得到新的随机过程 f(X(t) ) ,记为Y(t) ,即Y(t) =f(X(t) ) .本文中对于较简单的Borel函数f(·) ,讨论随机过程Y(t) =f(X(t) ) 展开更多
关键词 三重马氏平稳过程 预测 布郎运动过程 线性算子 最佳非线性预测量
下载PDF
连续时间马尔可夫过程拟平稳分布的存在性 被引量:1
18
作者 张汉君 朱依霞 《湘潭大学学报(自然科学版)》 CAS 2022年第3期21-27,共7页
考虑定义在正整数集上且原点为吸收态的马尔可夫过程.拟平稳分布被用来描述吸收过程在被吸收前的极限行为.假设当i→∞时,过程吸收时间的期望_(i)T_(0)趋于无穷,则存在一个拟平稳分布的充分必要条件是存在正的θ和i使E_(i)(e^(θT)o)<... 考虑定义在正整数集上且原点为吸收态的马尔可夫过程.拟平稳分布被用来描述吸收过程在被吸收前的极限行为.假设当i→∞时,过程吸收时间的期望_(i)T_(0)趋于无穷,则存在一个拟平稳分布的充分必要条件是存在正的θ和i使E_(i)(e^(θT)o)<∞.最后,讨论一个生灭过程的应用,来证明该文结论的有效性. 展开更多
关键词 马尔可夫过程 拟平稳分布 生灭过程 更新过程
下载PDF
随机变量列混合条件的某些性质 被引量:1
19
作者 陆传赉 《北京邮电学院学报》 CSCD 1990年第4期37-44,共8页
本文概述了目前常见的几种 r.v 列混合条件的若干性质,并给出一些例子加以说明.这些性质在极限理论和检测理论的研究中都是非常有用的.
关键词 随机变量 混合问题 马尔柯夫链
下载PDF
平稳过程、鞅及马氏过程的相互关系 被引量:1
20
作者 邱育锋 《龙岩学院学报》 2006年第3期3-5,共3页
系统研究了严平稳过程,宽平稳过程与鞅及马氏过程的相互关系,得到许多有趣的结果。
关键词 严平稳过程 宽平稳过程 马氏过程
下载PDF
上一页 1 2 3 下一页 到第
使用帮助 返回顶部