Équations et générateurs de Kolmogorov

Le générateur infinitésimal encode les taux de transition instantanés d'une chaîne de Markov à temps continu, et les équations de Kolmogorov directes et rétrogrades décrivent l'évolution temporelle de ses probabilités de transition.

Definition

Le générateur infinitésimal d'une chaîne de Markov à temps continu est la matrice des taux de transition donnant le taux de changement instantané des probabilités de transition, et les équations de Kolmogorov directes et rétrogrades sont les équations différentielles que satisfait la matrice des probabilités de transition en fonction du temps.

Scope

Ce sujet aborde la définition du générateur comme la dérivée temporelle du semi-groupe de transition à l'origine, les équations de Kolmogorov directes (de type Fokker-Planck) et rétrogrades, la matrice de transition comme l'exponentielle matricielle du générateur, les propriétés des semi-groupes, ainsi que les conditions d'unicité, de conservativité et d'absence d'explosion.

Core questions

• Comment le générateur est-il obtenu comme la dérivée du semi-groupe de transition ?
• Quelle est la différence entre les équations de Kolmogorov directes et rétrogrades ?
• Quand la matrice de transition est-elle l'exponentielle matricielle du générateur ?
• Quelles conditions garantissent une solution unique et non explosive ?

Key theories

Équations de Kolmogorov rétrogrades et directes

La matrice des probabilités de transition satisfait deux systèmes couplés d'équations différentielles linéaires pilotés par le générateur, l'équation rétrograde différenciant par rapport à l'état initial et l'équation directe par rapport à l'état final, et pour les espaces d'états finis, toutes deux ont l'exponentielle matricielle comme solution commune.

Correspondance entre générateur et semi-groupe

La famille des opérateurs de transition forme un semi-groupe fortement continu dont le générateur infinitésimal détermine le processus ; cette correspondance relie les chaînes de Markov à la théorie analytique des semi-groupes d'opérateurs et sous-tend les résultats de convergence et d'approximation.

Clinical relevance

L'équation directe est l'équation maîtresse de la cinétique chimique et de la physique statistique, régissant la distribution de probabilité des nombres de molécules au cours du temps, tandis que le formalisme du générateur fournit la base computationnelle pour l'analyse transitoire des modèles de fiabilité, de files d'attente et d'épidémies.

History

L'article de Kolmogorov de 1931 a introduit les équations différentielles pour les probabilités de transition, Feller a résolu les questions d'existence, d'unicité et d'explosion dans les années 1930 et 1940, et la perspective du semi-groupe et du générateur a été systématisée par les travaux ultérieurs de Hille, Yosida et Dynkin sur les processus de Markov.

Key figures

• Andrey Kolmogorov
• William Feller
• Thomas Kurtz

Seminal works

• norris1997

Frequently asked questions

Que nous apprend le générateur sur une chaîne de Markov ?

Il donne les taux de transition instantanés entre les états ; à partir de lui découle toute l'évolution temporelle des probabilités de transition, pour les espaces d'états finis sous la forme de l'exponentielle matricielle du générateur.

En quoi les équations directes et rétrogrades diffèrent-elles ?

L'équation rétrograde différencie par rapport à l'état de départ et est utile pour les problèmes de temps d'atteinte et d'espérance, tandis que l'équation directe différencie par rapport à l'état actuel et décrit la distribution de probabilité en évolution.