On considËre 4 boules numÈrotÈes de 1 ‡ 4; rÈparties en deux urnes A et B. A chaque
instant, on tire un nombre k au hasard entre 1 et 4; on enlËve la boule numÈro k de líurne dans
laquelle elle se trouve et on la remet au hasard dans líune des deux urnes. On note Xn le nombre
de boules dans líurne A ‡ líinstant n:
1. JustiÖer que (Xn) est une chaine de Markov.
2. Donner la matrice et le graphe de transition de (Xn):