Название: Динамическое программирование и марковские процессы. Dynamic Programming and Markov Processes
Автор: Ховард Р.А.
Издательство: М.: Советское радио
Год: 1964
Страниц: 190
Формат: djvu
Размер: 24,2 Мб
Язык: Русский

Время от времени в пруду с кувшинками лягушка перепрыгивает с одного листа кувшинки на другой согласно «желанию» в данный момент, и это поведение лягушки может служить наглядным примером марковского процесса. Состоянием системы является номер листа, занимаемого лягушкой в данное время, переходом — ее прыжок. Если число листьев конечно, то имеется процесс с конечным числом состояний. Ограничимся рассмотрением только таких процессов. Автор, используя идеи и методы динамического программирования и марковских процессов, предлагает метод выбора оптимального поведения в системах, описываемых управляемыми марковскими процессами с непрерывным и дискретным временем. В книге рассматриваемый вопрос обсуждается также с точки зрения выполнения вычислений, и предлагается хорошо разработанная схема вычислений. Материал книги излагается с использованием простого математического аппарата и иллюстрируется большим числом примеров. Книга может быть полезна инженерам и математикам, работающим в областях эконометрики, исследования операций и военных приложений, а также студентам и аспирантам технических специальностей.