Dans une région, on a observé que :
- s'il fait beau un jour, il fait beau le lendemain avec une probabilité de 0,7 ;
- s'il fait mauvais un jour, il fait mauvais le lendemain avec une probabilité de 0,4 .
On note
B l'état « il fait beau » et
M l'état « il fait mauvais ». Le jour
0 , il fait beau. Pour tout entier naturel
n , on note
πn la distribution du temps le jour
n .