負荷周波数制御シナリオにおける深層強化学習比例-積分-微分コントローラのブラックボックス敵対的攻撃

Wei WANG ,  

Zhenyong ZHANG ,  

Xin WANG ,  

Xuguo JIAO ,  

Abstract

負荷周波数制御は通常、従来の比例-積分-微分(PID)コントローラによって管理されます。近年、深層強化学習に基づく適応コントローラは、その卓越した性能により注目を集めています。しかし、この深層強化学習に基づく適応コントローラには固有の脆弱性があり、敵対的攻撃の影響を受けやすいです。より堅牢な制御システムを開発するために、本論文では敵対的攻撃下における深層強化学習に基づく適応コントローラの脆弱性を詳細に分析しました。まず、深層強化学習アルゴリズムに基づいて適応コントローラを開発しました。次に、攻撃者の能力が限られていることを考慮し、ゼロ次最適化手法を用いて敵対的攻撃下の深層強化学習に基づく負荷周波数制御の性能を評価しました。最後に、敵対的訓練により深層強化学習に基づく適応コントローラの堅牢性を強化しました。多数のシミュレーションを通じて、敵対的攻撃の有無での深層強化学習ベースのPIDコントローラの性能を評価しました。

Keywords

適応コントローラ;深層強化学習;負荷周波数制御;敵対的攻撃

READ MORE