Markov-kjeden, også kjent som Markov-modellen eller Markov-prosessen, er et konsept utviklet innenfor teorien om sannsynlighet og statistikk som etablerer en sterk avhengighet mellom en hendelse og en annen tidligere hendelse. Hovednytten er analysen av oppførselen til stokastiske prosesser.
Forklaringen på disse kjedene ble utviklet av matematikeren av russisk opprinnelse Andréi Márkov i 1907. Dermed har denne metoden gjennom hele 1900-tallet blitt brukt i mange praktiske tilfeller av hverdagen.
Det er også kjent som en enkel bistabil Markov-kjede.
Som Markov påpekte, i stokastiske (det vil si tilfeldige) systemer eller prosesser som presenterer en nåværende tilstand, er det mulig å kjenne deres fortilfeller eller historiske utvikling. Derfor er det mulig å etablere en beskrivelse av deres fremtidige sannsynlighet.
Mer formelt antar definisjonen at sannsynligheten for at noe skjer i stokastiske prosesser bare avhenger av den historiske fortiden til virkeligheten vi studerer. Av denne grunn sies det at disse strengene ofte har minne.
Grunnlaget for kjedene er kjent som Markov-egenskapen, som oppsummerer det som er blitt sagt tidligere i følgende regel: hva kjeden opplever på tidspunktet t + 1, avhenger bare av hva som skjedde på tidspunktet t (den umiddelbart forutgående).
Gitt denne enkle forklaringen av teorien, kan det observeres at det er mulig gjennom den å vite sannsynligheten for at en tilstand oppstår på lang sikt. Dette hjelper utvilsomt prediksjon og estimering over lange perioder.
Hvor brukes Markov-kjeden?
Markov-kjeder har sett betydelig anvendelse i næringslivet og finans. Dette, ved å tillate, som antydet, å analysere og estimere fremtidige atferdsmønstre for enkeltpersoner basert på tidligere erfaringer og resultater.
Dette kan gjenspeiles i forskjellige felt, som kriminalitet, studiet av forbrukeradferd, sesongmessig etterspørsel etter arbeidskraft, blant andre.
Systemet utviklet av Markov er ganske enkelt og har, som vi har sagt, en ganske enkel praktisk anvendelse. Imidlertid peker mange kritiske stemmer på at en slik forenklet modell ikke kan være fullt effektiv i komplekse prosesser.