Zde je několik učebnic:
Tijms H.C.: A First Course in Stochastic Models
Ullrich M.: Základy teorie náhodných procesů
Pardoux E.: Markov Processes and Applications
White D.J.: Markov Decision Processes
Křivý I.: Náhodné procesy