Markov kate: berrikuspenen arteko aldeak

Hasierako 0 aldi batetik begiratuta, n-garren aldian egoera bakoitza suertatzeko probabilitateak honela kalkulatzen dira,

i-tik j-ra heltzeko bide edo bilakaera posible guztien probabilitateak batuz:

 

::<math>\mathbf{\pi_n}=\mathbf{\pi_0}\mathbf{p}^n</math>

 

Adibidez, gaur, astelehena, euria egin eta ateri izateko probabilitateak 0.2 eta 0.8 izanik eta arestiko adibideko trantsizio-probabilitateak harturik,

asteazkenean (bi egunetara, alegia) euria eta ateri izateko probabilitateak 0.362 eta 0.368 dira hurrenez hurren eta honela kalkulatzen dira:

 

::<math>

egun ezberdinetako trantsizio probabilitateak lor daitezke. Adibidez, egun batetik besterako trantsizio-

probabilitateak hartuz, egun batetik hiru egunetarako trantsizio probabilitateak hauek dira:

 

::<math>

\end{bmatrix}

</math>

 

Horrela adibidez, gaur euria egiten badu, etzidamu (hiru egunetara) euria egiteko probabilitatea 0.363 da.

Epe luzera, ''n'' aldi askotara behatuta alegia, egoera bakoitzean izateko probabilitateak aldi batetik bestera aldatzen ez direnean, egoera

estazionario batera heldu dela esaten da. Egoera estazionario honetako probabilitateak edo banaketa estazionarioa honela kalkulatzen da:

 

::<math>\mathbf{\pi}=\mathbf{\pi}\mathbf{p}</math>.