Markov-kæde

Et diagram, der viser en Markov-proces med de to udfald E and A. Hvert tal viser sandsynligheden for udfaldet af en ændring af tilstanden. Er Markov-processen i tilstand A, er sandsynligheden for at den ændrer sig til E 0,4 og sandsynligheden for at den forbliver i tilstand A 0,6.

En Markov-kæde er inden for matematikken en tidsdiskret stokastisk proces, der beskriver en talfølge af mulige begivenheder, hvor sandsynligheden af hver begivenhed udelukkende afhænger af det, som bliver opnået ved den foregående begivenhed. Processen har således med Markovegenskaber, hvilket vil sige, at processens forløb kan bestemmes ud fra dens nuværende tilstand uden kendskab til tidligere tilstande.

En Markov-kæde som er tidskontinuerlig kaldes en Markovproces.

Kildehenvisninger

Spire Denne artikel om matematik er en spire som bør udbygges. Du er velkommen til at hjælpe Wikipedia ved at udvide den.