1
İki emici Markov zinciri göz önüne alındığında, birinin diğerinden önce sona erme olasılığı nedir?
Her biri bir emici duruma ve bilinen bir başlangıç pozisyonuna sahip iki farklı Markov zincirim var. Zincir 1'in zincir 2'den daha az adımda emici bir duruma ulaşma olasılığını belirlemek istiyorum. Sanırım n adımdan sonra belirli bir zincirde emici bir duruma ulaşma olasılığını hesaplayabilirim: bir geçiş matrisi verildiğinde , adımdan sonra …