包括的な防御フレームワーク:マルチレベル深層フェイク検出と追跡

Hui SHI ,  

Guibin WANG ,  

Yanni LI ,  

Rujia QI ,  

Abstract

ディープフェイクは政治、ニュース、エンターテイメントなどの多くの分野に深刻な脅威をもたらしています。被動的な検出または能動的な防御に基づいた多くの方法が提案されていますが、被動的な検出と能動的な防御を同時に実現できる方法はほとんどありません。この問題を解決するために、クロスドメイン特徴の統合と分離可能なウォーターマークを基にした包括的な防御フレームワークを提案します。能動的な防御モジュールは、エンコーダーと2つの分離可能なデコーダーで構成されており、エンコーダーは保護された顔の画像にウォーターマークを埋め込み、2つのデコーダーはそれぞれ異なる頑丈さを持つウォーターマークを抽出します。頑丈なウォーターマークは信頼できる顔を追跡し、半頑丈なウォーターマークは悪質な攻撃(ディープフェイク攻撃またはウォーターマーク削除攻撃)に敏感で、これらの悪質な攻撃によってウォーターマークが消えます。ウォーターマークが消えた場合、被動的な検出モジュールは空間領域と周波数領域の特徴を融合し、さらに深層フェイク攻撃かウォーターマーク削除攻撃かを区別します。提案されたクロスドメイン特徴統合戦略は、まず周波数領域特徴の「主要」チャネルが空間領域特徴の「副次」チャネルで置き換えられ、次に空間領域特徴の「主要」チャネルが周波数領域特徴の「副次」チャネルで置き換えられます。多くの実験結果は、提案された方法がウォーターマークのない状態で被動的な検出を実現するだけでなく、更に深層フェイク攻撃とウォーターマーク削除攻撃を区別し、包括的な防御フレームワークを提供することを示しています。

Keywords

ディープフェイク検出; 能動的な防御; 追跡; クロスドメイン特徴統合; ウォーターマーク削除攻撃

READ MORE