Comment modéliser une situation par une chaîne de Markov et construire sa matrice de transition ?

En identifiant les états du système, en remplissant la matrice de transition $P$ dont chaque coefficient $P_{ij}$ est la probabilité de passer de l'état $i$ à l'état $j$ (chaque ligne somme à 1), et en représentant par un graphe orienté pondéré

Modélisation d'une situation probabiliste par une chaîne de Markov : identification des états et construction de la matrice de transition.