赌徒输光问题马尔科夫链求解杨阳肖瑞王明仪Content马尔可夫链赌徒输光问题简介2014
07Partone问题简介01赌徒输光在“公平”的赌博中,任一个拥有有限赌本的赌徒一次赌博中,任意一个赌徒都有可能会赢
谁输谁赢是偶然的
一直赌下去输光Parttwo马尔可夫链02马尔可夫链马尔可夫链,因安德烈·马尔可夫(A
Markov,1856-1922)得名,是数学中具有马尔可夫性质的离散事件随机过程
该过程中,过去的状态(即当前以前的历史状态)对于预测将来(即当前以后的未来状态)是无关的
马尔可夫链科学中的大量问题都可归结为随机游动问题
赌徒输光问题:即具有两个吸收壁的随机游动问题作了几点讨论,计算了赌徒输光的概率Parttwo双壁随机游动012N-1Nq0q1qn-1q2qn-2pnrn-1r2p2p1ror1rn
设E={0,1,2
,N},图为其状态转移图,一步转移概率为(1)ro=1,q0=0,rn=1,pn=0,pi+ri+qi=1,i=1,2,
,n-1该随机游走被称为具有两个吸收壁的随机游动(2)ro=0,q0=1,rn=0,pn=1,pi+ri+qi=1,i=1,2,
,n-1该随机游走被称为具有两个反射壁的随机游动(3)ro>0,q0