Ecuaciones y generadores de Kolmogorov

El generador infinitesimal codifica las tasas de transición instantáneas de una cadena de Markov de tiempo continuo, y las ecuaciones de Kolmogorov hacia adelante y hacia atrás describen cómo evolucionan sus probabilidades de transición en el tiempo.

Definition

El generador infinitesimal de una cadena de Markov de tiempo continuo es la matriz de tasas de transición que da la tasa instantánea de cambio de las probabilidades de transición, y las ecuaciones de Kolmogorov hacia adelante y hacia atrás son las ecuaciones diferenciales que satisface la matriz de probabilidad de transición en función del tiempo.

Scope

Este tema abarca la definición del generador como la derivada temporal del semigrupo de transición en cero, las ecuaciones de Kolmogorov hacia adelante (tipo Fokker-Planck) y hacia atrás, la matriz de transición como la exponencial matricial del generador, las propiedades del semigrupo y las condiciones para la unicidad, la conservatividad y la ausencia de explosión.

Core questions

• ¿Cómo se obtiene el generador como la derivada del semigrupo de transición?
• ¿Cuál es la diferencia entre las ecuaciones de Kolmogorov hacia adelante y hacia atrás?
• ¿Cuándo es la matriz de transición la exponencial matricial del generador?
• ¿Qué condiciones garantizan una solución única y no explosiva?

Key theories

Ecuaciones de Kolmogorov hacia atrás y hacia adelante

La matriz de probabilidad de transición satisface dos sistemas acoplados de ecuaciones diferenciales lineales impulsadas por el generador, la ecuación hacia atrás diferenciando en el estado inicial y la ecuación hacia adelante en el estado final, y para espacios de estados finitos ambas tienen la exponencial matricial como su solución común.

Correspondencia entre generador y semigrupo

La familia de operadores de transición forma un semigrupo fuertemente continuo cuyo generador infinitesimal determina el proceso; esta correspondencia conecta las cadenas de Markov con la teoría analítica de los semigrupos de operadores y subyace a los resultados de convergencia y aproximación.

Clinical relevance

La ecuación hacia adelante es la ecuación maestra de la cinética química y la física estadística, que rige la distribución de probabilidad de los recuentos moleculares a lo largo del tiempo, mientras que el formalismo del generador proporciona la base computacional para el análisis transitorio de la fiabilidad, las colas y los modelos epidémicos.

History

El artículo de Kolmogorov de 1931 introdujo las ecuaciones diferenciales para las probabilidades de transición, Feller resolvió cuestiones de existencia, unicidad y explosión en las décadas de 1930 y 1940, y el punto de vista del semigrupo y el generador se sistematizó a través del trabajo posterior de Hille, Yosida y Dynkin sobre los procesos de Markov.

Key figures

• Andrey Kolmogorov
• William Feller
• Thomas Kurtz

Seminal works

• norris1997

Frequently asked questions

¿Qué indica el generador sobre una cadena de Markov?

Indica las tasas instantáneas de transición entre estados; a partir de él se deduce toda la evolución temporal de las probabilidades de transición, en espacios de estados finitos como la exponencial matricial del generador.

¿En qué se diferencian las ecuaciones hacia adelante y hacia atrás?

La ecuación hacia atrás diferencia con respecto al estado inicial y es útil para problemas de alcance y expectativa, mientras que la ecuación hacia adelante diferencia con respecto al estado actual y describe la distribución de probabilidad en evolución.