Le travail d'un chercheur en mathématiques est composé de trois grandes activités : les demandes de financement, l'enseignement et le travail sur son sujet de recherche. Son emploi du temps est organisé de la façon suivante :
- Si, pendant une heure, le chercheur demande des financements, il continue à le faire l'heure suivante avec une probabilité de 50 %, enseigne avec une probabilité de 20 %, ou travaille sur son sujet de recherche.
- Si, pendant une heure, le chercheur enseigne, il demande des financements l'heure suivante avec une probabilité de 80 %, travail sur son sujet de recherche avec une probabilité de 10 %, ou bien continue d'enseigner.
- Si, pendant une heure, le chercheur travaille sur son sujet de recherche, il a une probabilité de 30 % de continuer à le faire, une probabilité de 10 % de demander des financements l'heure suivante. Sinon, il enseigne.
Le chercheur commence toujours sa journée par travailler sur son sujet de recherche.
1. Représenter graphiquement la chaîne de Markov associée à la situation, puis déterminer sa matrice de transition.
2. Déterminer la probabilité que le chercheur effectue des demandes de financement durant sa troisième heure de travail de la journée.