首页 | 本学科首页   官方微博 | 高级检索  
相似文献
 共查询到19条相似文献,搜索用时 93 毫秒
1.
讨论了无界报酬非时齐折扣马氏决策模型,且折扣因子βt依赖于前一阶段所处的状态和采取的行动,从而推广了常数折扣因子的马氏决策模型,在一定的假设下,得到了最优方程,证明了存在ε-最优马氏策略。  相似文献   

2.
对MDP平均模型,本文提出了准强最优与强最优标准问题,首次讨论了非时齐MDP平均模型,在状态空间可数而行动集有限和适当条件下,得到在上存在弱最优决定性马氏策略(通常意义下),并且此策略在上是准强最优的,而在上是强最优的,同时讨论了时齐情况。包含了已知的一些结果。  相似文献   

3.
利用分析法研究了马氏链相对熵密度的若干极限性质,推广了Shannon-M cM illan的极限定理,改进并推广了文[1]~[3]的主要结果,建立了新的有限非齐次马尔可夫链的强极限定理.  相似文献   

4.
研究可列非齐次马氏链二元泛函强大数定律中的收敛速度,并利用得到的结果研究可列非齐次马氏链Shannon-McMilllan定理中的收敛速度问题.  相似文献   

5.
三状态齐次马氏链是比较简单的马氏链,但马氏链理论的所有基本问题在这种简单情形下都有其反映。三状态齐次马氏链的性质由其(一步)转移矩阵完全决定,因而关于状态的周期、常返性、状态之间的互通性等等基本问题都应当利用转移矩阵本身来作出回答。本文将要给出关于这些问题的一系列的判定准则,我们的条件都加在转移矩阵上,直接用转移矩阵的元素来表述,因而十分简洁且便于应用。值得指出的是,我们的方法亦适用于状态更多的有限马氏链,只是随着状态数目的增加,条件将变得十分复杂。就这个意义而言,对于有限马氏链,三状态情形是非常典型的。  相似文献   

6.
有限马尔科夫链(简称为有限马氏链)是随机过程论中一个饶有兴趣的课题,近来被应用于教学效果评估中,取得了令人满意的结果.这种方法的优点是可以剔除学生基础知识水平的差异,较真实地反映了教学效果。本文试图对有限齐次马氏链的有关理论作扼要而简明的叙述,然后给出应用实例,最后对实际应用过程中碰到的一些问题作初步的讨论。一、有限马氏链的有关理论设有随机变量序列{Xt;t=1,2…},其取值点为1,2,…,n(n为正整数),满足所谓“马尔科夫性”:  相似文献   

7.
本文讨论一类强度函数的非时齐P0isson过程样本函数在设计基准期[O,T]内最大值概率分 布。分别给出滤过非时齐Poisson过程和单调非时齐Poisson过程样本函数在设计基准期[O,T]内最大值概率分布表述式。  相似文献   

8.
用模r同余的关系定义了一类特殊的非齐次树,给出了特殊非齐次树Tα0,α1,…,αr-1指标集马氏链的强极限定理。  相似文献   

9.
常返性的判别和平稳分布存在性是离散时间马氏链的重要研究内容.通过对转移概率极限存在性的判定,给出了离散时间马氏链常返性的一个充分且必要条件,在此基础上给出了一个判断马氏链平稳分布是否存在的简单定理.  相似文献   

10.
《闽江学院学报》2004,25(5):7-11
本文讨论一类强度函数λ(t)=(l∑i=0)λiti(t≥0,λi>0)的非时齐Poisson过程样本函数在设计基准期[0,T]内最大值概率分布.分别给出滤过非时齐Poisson过程和单调非时齐Poisson过程样本函数在设计基准期[0,T]内最大值概率分布表达式.  相似文献   

11.
假定标的物价格收益波动率服从有限马尔可夫链,得到一种基于有限差分法的障碍期权的定价模型,给出了具体差分格式。  相似文献   

12.
研究序列{Xn},{Xn}满足Xn = Yn(mod 2),其中Yn∈Z+, Y0≥2, Yn+1= Yn +[Yn/2],证明了{Xn}为一独立随机变量序列,并且是一时间齐次Markov链。最后,利用该Markov链{Xn}的性质,证明了入圈问题经过有限次插点, Cm 的任意一边上都至少插入一个新点。  相似文献   

13.
在非线性时间序列的基础上,建立了延滞是有限状态空间上马尔可夫链的GARCH模型.在新的模型中考虑了环境对延滞的影响.带有随机延滞的GARCH模型有更好的应用价值.  相似文献   

14.
Finite time-horizon Markov model for IEEE 802.11e   总被引:1,自引:0,他引:1  
We model wireless local area network channel utilization over a finite interval through a finite time-horizon Markov (FTHM) model. By accurately capturing time-varying utilization, the FTHM model allows for generally distributed transmission-opportunity (TXOP) duration, which most existing models do not account for. An absorbing state is introduced to limit the lifetime of the counting process, resulting in a non-ergodic Markov chain that is solved via transient analysis. The model predictions for time-varying utilization are validated by simulation with errors of no more than 0.1% after eight beacon intervals. Moreover, we show that the FTHM model prediction error is below 4% for Poisson distributed and uniformly distributed TXOP durations.  相似文献   

15.
本文对社会网络分析中的凝聚子群演化进行了量化探索,提出了凝聚子群势的概念,并得出凝聚子群势是一个有限的马尔科夫链;分析了凝聚子群演化的机制,并初步提出了描述演化的随机微分方程.  相似文献   

16.
研究了带马尔科夫链利率的完全离散时间风险模型的有限时间和最终时间破产概率,给出了破产概率的递归方程和积分方程.当利率非负时,用鞅方法给出了推广的最终时间破产概率的Lundberg不等式.  相似文献   

17.
文章运用基于滚动窗口的马尔科夫链预测模型,对上证综指的变动进行研究,创新的给出概率转移矩阵、极限概率以及预测准确率的时变特征,并给出马尔科夫链预测模型的最优窗口长度和状态定义阀值。研究揭示,大盘波动幅度与大盘的极限概率有着密切的关系;股指期货推出后大盘平盘概率占据主导地位,平稳性显著提高,马尔科夫链预测模型的预测准确率也有了较大提高。  相似文献   

18.
1IntroductionAstandardMarkovchainisastochasticproceswithaconstanttransitionprobabilitymatrixP,wherePisaonesteptransitionprob...  相似文献   

19.
马尔可夫预测法是应用概率论中马尔可夫链的理论和方法来研究各种状态的变化规律,并由此预测状态未来变化趋势的一种方法。农村劳动力的流动受到多种因素影响,可以看作是一个随机的状态过程。马尔可夫链是对农村劳动力的流动预测的一个较好的方法,本文利用马尔可夫链对永兴傣族乡农村劳动力流动趋势进行了预测分析。  相似文献   

设为首页 | 免责声明 | 关于勤云 | 加入收藏

Copyright©北京勤云科技发展有限公司  京ICP备09084417号