En stationär fördelning av en Markov-kedja är en sannolikhetsfördelning som inte förändras över tiden.
Låta vara en homogen Markov-kedja med diskret tid, räknebart tillståndsutrymme och övergångssannolikhetsmatris . Då kallas en diskret fördelning stationär (invariant) if
.Om är den initiala distributionen av kedjan , dvs.
,då sammanfaller fördelningen av alla andra termer också med .
Låt vara en Markov-kedja med ett diskret tillståndsutrymme. Då har denna kedja en unik stationär distribution om och bara om det finns exakt en positivt återkommande klass i uppsättningen av dess tillstånd.