马尔科夫链详解教学内容

1、1马尔科夫链详解2 拟用拟用黑妹牙膏黑妹牙膏 中华牙膏中华牙膏现用现用黑妹牙膏黑妹牙膏6040中华牙膏中华牙膏307034567 拟用拟用黑妹牙膏黑妹牙膏 中华牙膏中华牙膏现用现用黑妹牙膏黑妹牙膏6040中华牙膏中华牙膏3070892 转移概率矩阵及柯尔莫哥洛夫定理转移概率矩阵及柯尔莫哥洛夫定理1011121314例例1 某计算机机房的一台计算机经常出故障，研究某计算机机房的一台计算机经常出故障，研究者每隔者每隔15min观察一次计算机的运行状态，收集了观察一次计算机的运行状态，收集了24h的数据（共作的数据（共作97次观察）。用次观察）。用1表示正常状态表示正常状态，用，用0表示不正常状态，

2、所得的数据序列如下：表示不正常状态，所得的数据序列如下：1110010011111110011110111111001111111110001101101111011011010111101110111101111110011011111100111151617n将上述数据序列保存到纯文本文件将上述数据序列保存到纯文本文件msdata.txt中，中，存放在存放在Matlab程序文件所在目录下。程序文件所在目录下。见见ex1.m1819202160%40%A=30%70%黑妹黑妹中华中华30007000本月市场占有情况转移概率矩阵下月市场占有情况60%40%300070003900610030%

3、70%22232425262712121260%40%xxxx30%70%xx1123x74x7283 转移概率的渐近性质转移概率的渐近性质极限概率分布极限概率分布29303132333435 到到 从从甲甲乙乙丙丙合计合计甲甲乙乙丙丙23010102503004502025030301041036 0000123250300450XXXX0.250.300.45100010001000911.0022.0067.01 .0833.0067.004.004.092.0450410450104503030030300250300202501025010250230P37 11110123XXXX

4、XP45. 027. 028. 0911. 0022. 0067. 01 . 0833. 0067. 004. 004. 092. 045. 03 . 025. 03839 2222012123XXXXXXPP448. 0246. 0306. 0911. 0022. 0067. 010. 0833. 0067. 004. 004. 092. 045. 027. 028. 040111213123212223123313233xxxxxxPPPPPPPPP1231231230.920.040.04xxx0.0670.8330.10 xxx0.0670.0220.911xxx1123xxx45.6

5、%16.0%38.4%41练习练习n在英国，工党成员的第二代加入工党的概率在英国，工党成员的第二代加入工党的概率为为0.5，加入保守党的概率为，加入保守党的概率为0.4，加入自由，加入自由党的概率为党的概率为0.1。而保守党成员的第二代加入。而保守党成员的第二代加入保守党的概率为保守党的概率为0.7，加入工党的概率为，加入工党的概率为0.2，加入自由党的概率为，加入自由党的概率为0.1。而自由党成员的。而自由党成员的第二代加入保守党的概率为第二代加入保守党的概率为0.2，加入工党的，加入工党的概率为概率为0.4，加入自由党的概率为，加入自由党的概率为0.4。求自。求自由党成员的第三代加入工党的概率是多少？由党成员的第三代加入工党的概率是多少？在经过较长的时间后，各党成员的后代加入在经过较长的时间后，各党成员的后代加入各党派的概率分布是否具有稳定性？各党派的概率分