Настоящее издание представляет собой учебное пособие по управляемым марковским цепям с конечными множествами состояний и управлений и предназначено для студентов и аспирантов прикладной математики и ряда инженерных специальностей, связанных с проблемами управления стохастическими системами и машинным обучением.