Introductie: We zeggen dat een Markovketen naar een evenwicht nadert, wanneer er een waarde van t bestaat waarvoor x_t+1≈x_t. Het evenwicht wordt meestal genoteerd met π.
Definitie: π is een evenwicht van een Markovketen als Aπ=π.
Definitie: π is een evenwicht van een Markovketen als Aπ=π.