Доклад является представлением нового учебного пособия, посвященного теории управляемых марковских цепей (УМЦ). Теория УМЦ является фундаментальным аппаратом исследования управляемых стохастических систем, находя все более широкое применение в машинном обучении, робототехнике, экономике и инженерии. Основная задача пособия – систематическое изложение теории конечных УМЦ с акцентом на вычислительные методы и практические примеры. Методической особенностью пособия является использование единого сквозного примера – задачи управления оборудованием, который проходит через все основные разделы курса. Такой подход позволяет читателю наглядно проследить, как изменяются постановка задачи, алгоритм решения и структура оптимальной стратегии при переходе от одного класса моделей к другому.