تخصيص الموارد المشتركة الديناميكي في شبكات الاتصال اللاسلكي البحرية: نهج التعلم المعزز الفوقي القائم على تضمين المعرفة

Zhongyang MAO ,  

Zhilin ZHANG ,  

Faping LU ,  

Xiguo LIU ,  

Zhichao XU ,  

Yaozong PAN ,  

Jiafang KANG ,  

Yang YOU ,  

Abstract

مع توسع استكشاف الإنسان للمحيطات، يزداد الطلب باستمرار على الاتصال البحري المستمر، عالي الجودة، والشامل. ومع ذلك، فإن الطبيعة الديناميكية للبيئة البحرية وقيود الموارد تقدم تحديات كبيرة لطرق تخصيص الموارد التقليدية القائمة على الخبرة، مما يعقد الموازنة بين الاتصال عالي الجودة والموارد الشبكية المحدودة. ينتج عن ذلك أداء نظام دون المستوى الأمثل واعتماد مفرط على هياكل المشاكل الخاصة. لمعالجة هذه القضايا، نقدم في هذه الورقة طريقة تخصيص موارد مشتركة تعتمد على تضمين المعرفة. تشمل الطريقة المقترحة وحدة محاذاة توزيع الأفعال المصممة لتحسين استخدام الموارد من خلال منع التراكيب غير المعقولة لخروج الفعل. علاوة على ذلك، من خلال دمج تضمين المعرفة مع تقنيات التعلم المعزز الفوقي، تم صياغة دالة فقدان إرشادية فيزيائية، والتي تقلل بشكل فعال من حجم العينات المطلوبة لتدريب النموذج، مما يحسن قدرات التعميم للخوارزمية. تُظهر نتائج المحاكاة أن الطريقة المقترحة تحقق زيادة في متوسط أداء النظام بنسبة 31.19٪ مقارنة بخوارزمية تحسين السياسة القريبة للتعلم الفوقي غير المعتمد على النموذج (MAML-PPO) و80.91٪ مقارنة بخوارزمية RL2، عبر بيئات قنوات مختلفة.

Keywords

الاتصال اللاسلكي البحري;تخصيص الموارد;تضمين المعرفة;التعلم المعزز الفوقي

READ MORE