G検定 練習問題 #0285・安全性とセキュリティ

公開された学習済みモデルの汚染

AI倫理・AIガバナンス › 安全性とセキュリティ 単一選択 難易度 標準

物流会社のT社は、インターネット上で公開されている画像認識の学習済みモデルをダウンロードし、自社の荷物の画像でファインチューニングして仕分けに使う計画である。モデル汚染のリスクに関する説明として、最も適切なものを1つ選べ。

正解と解説を見る

解説

正解 C

この問題の論点:公開された学習済みモデルの汚染

ポイント

汚染されたモデルは通常の入力では正常に動くため気づきにくいことから、入手経路の確認と挙動の検証を組み合わせて備えます。

選択肢ごとの解説

  1. A

    不適切

    モデル汚染は、学習済みモデルそのものにバックドアなどの細工を仕込む攻撃です。自社のデータをいくら点検しても、ダウンロードした時点でモデルに仕込まれていた細工は見つけられません。

  2. B

    不適切

    ファインチューニングで重みが変わっても、仕込まれたバックドアが残る場合があることが研究で示されています。追加学習をしたことを、安全性を確かめたことの代わりにはできません。

  3. C

    適切 正解

    バックドアを仕込まれたモデルは、トリガーとなる模様を含まない通常の入力には正しく応答します。精度評価に加えて、配布元の信頼性の確認や、トリガーの有無を調べる検証が必要です。

  4. D

    不適切

    利用者が多いことは、改ざんされていない保証になりません。精度が高くても細工が潜んでいることがあるため、配布元の信頼性を確かめ、ハッシュ値などでファイルの改ざんの有無を確認します。

試験での狙われ方

学習済みモデルや外部データを流用する場面で、どのような攻撃のリスクがあり、どう備えるかを問う形が考えられます。

参考

表示設定

テーマ
文字の大きさ
問題演習