Model Markov — Pemodelan Peralihan Keadaan Kebarangkalian

Model Markov mewakili sistem sebagai satu set keadaan terhingga dan menentukan kebarangkalian bergerak dari satu keadaan ke keadaan lain pada setiap langkah masa. Dengan hanya menangkap keadaan semasa — bukan keseluruhan sejarah — ia membolehkan analisis proses dinamik kompleks yang boleh diurus merentasi ekonomi kesihatan, kebolehpercayaan kejuruteraan, penyelidikan operasi, dan pemodelan sains sosial.