伊藤忠テクノソリューションズ株式会社
サイバーセキュリティビジネス企画・推進本部
アソシエイトプリンシパル
伊藤 英二氏
生成AIがもたらす脅威には2つの側面がある。1つは利用者が考慮すべき脅威だ。LLM(大規模言語モデル)が学習したデータは、第三者のプロンプトに対する回答内容に含まれる場合がある。意図的に悪用するケースのほか、偶発的に発生するケースもある。「社内の機密情報を安易に生成AIに入力してしまわないよう、ユーザーのリテラシー向上を含めた対策を打つことが求められています」と伊藤忠テクノソリューションズ(以下、CTC)の伊藤 英二氏は指摘する。
倫理観を持たない、ダークAIと呼ばれるAIアプリケーションも存在する。ランサムウエアの作成方法を尋ねると、そのコードやランサムウエアを売買する闇サイトなどを回答する、といったものはその一例だ。
また攻撃者もAI技術を活用している。フィッシングメールの本文や偽サイトの作成、企業・個人のプロファイル収集のほか、偽の画像や動画、音声を生成して悪用するディープフェイクによる詐欺も増加。「既に多くの金銭的被害が発生しています。フィッシングやディープフェイクにはこれまで以上に警戒が必要です」と伊藤氏は警鐘を鳴らす。
もう1つは開発者が考慮すべき脅威だ。自社で開発したAIモデル/AIアプリに脆弱性や設定不備があると、そこを攻撃者に狙われる。AIモデルの学習データに不正確または害のあるデータを混入させて、出力結果に悪影響を及ぼす「データポイズニング」、プロンプトを巧妙に工夫して情報を引き出したり、悪意のあるプロンプトで回答に悪影響を与えたりする「プロンプトインジェクション」などのリスクを招く。
これらの脅威への警戒を促すため、NIST(米国国立標準技術研究所)やOWASP(Open WorldWide Application Security Project)が各種ガイダンスを発表している。国内でもIPAが「AI利用時のセキュリティ脅威・リスク調査 調査報告書」を、AISI(AI Safety Institute)が「AIセーフティに関するレッドチーミング手法ガイド」を公開。「これらの情報は、最新の脅威動向の把握やAIセキュリティーの指針づくりに非常に有効です」と伊藤氏は紹介する。