Dans une région, s'il fait beau un jour, il fait beau le lendemain avec une probabilité de
0,7 ; s'il fait mauvais un jour, il fait beau le lendemain avec une probabilité de
0,6 . La situation est modélisée par une chaîne de Markov de matrice de transition
P=(0,70,60,30,4) (états
B « beau » et
M « mauvais », dans cet ordre). Le jour
0 , il fait beau.
Pour tout entier naturel
n , on note
pn la probabilité qu'il fasse beau le jour
n , de sorte que
πn=(pn1−pn) .