Выделены две основные постановки задачи предотвращения конфликтов воздушных судов на основе обучения с подкреплением: автономное разрешение конфликтов между несколькими воздушными судами на основе многоагентного глубокого обучения с подкреплением и генерация решения по предотвращению конфликтов для систем поддержки принятия решений авиадиспетчерами. При современной организации воздушного движения актуальна вторая постановка, поскольку для внедрения полностью автоматических методов имеются серьезные проблемы сертификации методов машинного обучения в гражданской авиации, где критически важна безопасность. В статье рассматривается задача генерации горизонтального маневра предотвращения конфликта двух воздушных судов при помощи обучения с подкреплением. В отличие от работ, в которых рассматриваемая задача решается в непрерывном пространстве действий, предлагается обучать агента действиям в дискретном пространстве, что больше соответствует действиям авиадиспетчеров по централизованному предупреждению конфликтов. Приводится формализация задачи в виде марковского процесса принятия решений. Кратко описаны алгоритмы обучения с подкреплением «двойные глубокие Q-сети» и «проксимальная оптимизация политики», выбранных для решения задачи. Представлены результаты обучения и тестирования агента в разработанной среде моделирования с помощью реализованных алгоритмов, приводится сравнение их эффективности.

В рамках данного исследования на основе предлагаемой авторами и представленной в предыдущих работах функциональной схемы системы мониторинга, обнаружения и сопровождения радиоизлучения малой мощности БПЛА разработана ее структурная схема надежности. Представлена статическая модель надежности системы и записаны выражения для нахождения вероятности безотказной работы системы для двух случаев: когда время жизни ее компонент распределено по экспоненциальному закону и закону Вейбулла-Гнеденко. Предлагаемая модель позволяет оценивать надежность разрабатываемой системы на различных этапах ее функционирования: участке приработки и участке старения элементов системы.

С помощью W-функции Ламберта исследована линейная модель согласования характеристик в многоагентных системах с запаздыванием. В частности, рассмотрен случай, когда все ненулевые собственные значения лапласовской матрицы действительны. Найдено выражение для значения запаздывания, обеспечивающего максимальную степень сходимости. Выведена формула для максимальной степени сходимости. Доказано, что на максимальную степень сходимости влияют только максимальное и минимальное ненулевые собственные значения, в то время как остальные собственные значения не влияют на данную характеристику. Полученные результаты служат основой для одной до сих пор нерешенной задачи − непосредственной оценки скорости сходимости в многоагентных системах с направленной структурой.

The overview provides a comparative analysis of the feasibility conditions for key methods to design state observers for linear dynamical SISO systems with unknown parameters. A distinctive feature of this paper is the comparison between state observers that are based on the robust, invariant, and adaptive methods. The overview is written without excessive mathematical details and aims to familiarize a wide range of readers with the basic principles of design and functioning of state observers for linear systems with unknown parameters.

В данной работе рассмотрен переходной режим работы трехфазной системы массового обслуживания с общим для всех фаз буфером, пуассоновским входным потоком, экспоненциальным распределением времени обработки заявок, в условиях скачкообразного изменения интенсивностей обслуживания.