Bu kitob Markov zanjirlari va dinamik dasturlash haqida umumiy ma’lumotlarni o‘z ichiga oladi. Ushbu kitobda diskret tasodifiy jarayon tushunchasi, Markov tasodifiy jarayonlarida o’tish ehtimollari, boshqariluvchi Markov jarayonlarining optimal strategiyalari va boshqalar kabi mavzularni ko‘rib chiqiladi.