马尔可夫过程的应用举例

@heyun 2016-03-07 18:53:53

6395

分类专栏： ACM 刷题

最后发布:2016-03-07 18:53:53首次发布:2016-03-07 18:53:53

马尔可夫过程的应用举例

　　设任意相继的两天中，雨天转晴天的概率为1/3，晴天转雨天的概率为1/2，任一天晴或雨是互为逆事件。以0表示晴天状态，以1表示雨天状态， $X n$ 表示第n天状态（0或1）。试定出马氏链 $X_n,n\ge 1$ 的一步转移概率矩阵。又已知5月1日为晴天，问5月3日为晴天，5月5日为雨天的概率各等于多少？

　　解：由于任一天晴或雨是互为逆事件且雨天转晴天的概率为1/3，晴天转雨天的概率为1/2，故一步转移概率和一步转移概率矩阵分别为：

　　 $P{X_n=j|X_{n-1}=i}=\begin{cases}\frac{1}{3},i=1,j=0\\\frac{2}{3},i=1,j=1\\\frac{1}{2},i=0,j=0\\\frac{1}{2},i=0,j=1\end{cases}$

　　故5月1日为晴天，5月3日为晴天的概率为：

　　 $P_{00}(2)=\frac{5}{12}=0.4167$

　　又由于：

　　故5月1日为晴天，5月5日为雨天的概率为： $P 01 (4) = 0.5995$ 　　

点赞 2
评论
分享
x
海报分享

扫一扫，分享海报
收藏 3
举报
关注关注
一键三连
点赞Mark关注该博主, 随时了解TA的最新博文

已标记关键词清除标记

插入表情

还能输入1000个字符 “速评一下”

©️2020 CSDN 皮肤主题: 鲸设计师:meimeiellie 返回首页