Introductie: We zeggen dat een Markovketen naar een evenwicht nadert, wanneer er een waarde van t bestaat waarvoor x_t+1x_t. Het evenwicht wordt meestal genoteerd met π.

Definitie: π is een evenwicht van een Markovketen als Aπ=π.