Shpjegoni konceptin e zinxhirit Markov
Një zinxhir Markov është një lloj modeli matematikor në të cilin gjendja e ardhshme e një sistemi varet vetëm nga gjendja aktuale. Në termat më themelorë, është një sistem që parashikon sjelljen e ardhshme të një procesi bazuar në gjendjen aktuale të sistemit. Në këtë mënyrë, sjellja e sistemit përcaktohet vetëm nga probabilitetet e gjendjeve të ndryshme të mundshme.