С ростом морской экономической деятельности стремительно увеличивается потребность в морской связи, при этом проблемы ограниченных спектральных ресурсов, высокодинамичной спектральной среды и разнообразных требований к услугам становятся все более актуальными. Традиционные методы глубокого усиленного обучения показывают хорошие результаты в конкретных сценариях обучения, но плохо обобщаются на неизвестные сетевые среды. В этой работе исследуется технология динамического морского доступа к спектру и планирования обслуживания на основе адаптивного мета-усиленного обучения. Во-первых, построена модель занятости каналов, включающая марковский скачковый и расширенный скачковый режимы, и с учетом двухочередной механики для экстренных и обычных пакетов многопомощническая кооперативная задача принятия решений моделируется как децентрализованный частично наблюдаемый марковский процесс принятия решений. Во-вторых, учитывая слабую обобщаемость традиционных алгоритмов глубокого усиленного обучения, предложен алгоритм доступа к спектру и планирования услуг, основанный на базе мета-обучения, который обеспечивает быструю адаптацию стратегии посредством мета-тренировки на множестве задач. Кроме того, для решения узкого места эффективности адаптации, вызванного фиксированной скоростью обучения во внутреннем цикле, разработан адаптивный мета-усиленный алгоритм, динамически настраивающий скорость обучения через модуль кодирования задач, балансируя скорости сходимости для задач разной сложности. Результаты моделирования показывают, что предложенный алгоритм превосходит базовые методы по среднему вознаграждению, коэффициенту успешной доставки экстренных пакетов и скорости сходимости в неизвестной среде, эффективно подтверждая превосходство метода в сложных морских условиях. Данное исследование предоставляет эффективное решение для быстрого адаптивного интеллектуального доступа к спектру и планирования услуг в морских беспроводных коммуникационных системах в неизвестных сценариях.

динамический доступ к спектру; адаптивное мета-усиленное обучение; планирование услуг; морская связь