|
Эта публикация цитируется в 4 научных статьях (всего в 4 статьях)
Тематический выпуск
Одновременное импульсное и непрерывное управление марковской цепью в непрерывном времени
А. Б. Миллерab, Б. М. Миллерacb, К. В. Степанянa a Институт проблем передачи информации им. А.А. Харкевича РАН, Москва
b Казанский федеральный университет
c Университет Монаш, Виктория, Австралия
Аннотация:
Рассматривается непрерывное и импульсное управление марковской цепью (МЦ) с конечным множеством состояний в непрерывном времени. Непрерывное управление определяет интенсивность переходов между состояниями МЦ, при этом времена переходов и их направления случайны. Тем не менее иногда требуется обеспечить переход, который ведет к мгновенному изменению состояния МЦ. Поскольку такие переходы требуют различных воздействий и могут производить различное действие на состояние МЦ, такие управления можно трактовать как импульсные. В статье используется мартингальное представление управляемой МЦ и дается условие оптимальности, которое с использованием принципа динамического программирования приводится к форме квазивариационного неравенства. Решение этого неравенства может быть получено в форме уравнения динамического программирования, которое для МЦ с конечным множеством состояний сводится к системе обыкновенных дифференциальных уравнений с одной линией переключения. Дано доказательство достаточного условия оптимальности и рассмотрены примеры задач с детерминированным и случайным импульсным воздействием.
Ключевые слова:
марковская цепь, импульсные управления, квазивариационное неравенство.
Образец цитирования:
А. Б. Миллер, Б. М. Миллер, К. В. Степанян, “Одновременное импульсное и непрерывное управление марковской цепью в непрерывном времени”, Автомат. и телемех., 2020, № 3, 114–131; Autom. Remote Control, 81:3 (2020), 469–482
Образцы ссылок на эту страницу:
https://www.mathnet.ru/rus/at15438 https://www.mathnet.ru/rus/at/y2020/i3/p114
|
|