Modèle de Markov — Modélisation probabiliste des transitions d'état

Un modèle de Markov représente un système comme un ensemble fini d'états et spécifie la probabilité de passer d'un état à un autre à chaque pas de temps. En ne capturant que l'état actuel — et non l'historique complet — il permet une analyse traitable de processus dynamiques complexes dans l'économie de la santé, la fiabilité en ingénierie, la recherche opérationnelle et la modélisation en sciences sociales.