Source: http://helios.mi.parisdescartes.fr/~rlachiez/enseignement/markov/Markov.pdf