Markov-modell — Probabilistisk tilstands-overgangsmodellering

En Markov-modell representerer et system som et endelig sett av tilstander og spesifiserer sannsynligheten for å bevege seg fra en tilstand til en annen i hvert tidsskritt. Ved å kun fange den nåværende tilstanden — ikke hele historikken — muliggjør den håndterbar analyse av komplekse dynamiske prosesser innen helseøkonomi, ingeniørpålitelighet, operasjonsanalyse og samfunnsvitenskapelig modellering.