Ховард Р.А. Динамическое программирование и марковские процессы

Монография. — Пер. с англ. В.В. Рыкова. — Под ред. Н.П. Бусленко. — М.: Советское радио, 1964. — 190 с.В книге рассматривается связь между динамическим программированием и марковскими процессами. Используя идеи и методы этих разделов математики, автор предлагает метод выбора оптимального поведения в системах, описываемых управляемыми марковскими процессами с непрерывным и дискретным временем. Рассматриваемый вопрос обсуждается также с точки зрения выполнения вычислений, и предлагается хорошо разработанная схема вычислений.
Материал излагается с использованием простого математического аппарата и иллюстрируется большим числом примеров. Это делает книгу доступной широкому кругу читателей.
Книга может быть полезна инженерам, математикам, специалистам, работающим в областях эконометрики, исследования операций и военных приложений, а также студентам и аспирантам различных вузов, интересующимся указанными вопросами.Марковские процессы
Марковские процессы с доходами
Процессы последовательных решений. Рекуррентный метод
Итерационный метод для процессов последовательных решений
Применение итерационного метода к задачам водителя такси и о замене автомобиля
Итерационный метод для процессов с несколькими эргодическнмн классами
Процесс последовательных решений с переоценкой
Процессы последовательных решений с непрерывным временем
Заключение
Приложение. Связь между возвратными и невозвратными состояниями