概要
- Usenix Securityでの議論を通じ、 AIがソフトウェアを過度に安全 にすることへの懸念を提示
- 法執行機関や情報機関 が「Going Dark」状態に陥るリスクの指摘
- AIによる 脆弱性発見の自動化 が業界構造を大きく変える可能性
- バックドア要求 の再燃とその国際的な波及効果への警鐘
- 明確な解決策はなく、 正しい選択 を願うしかない現状
AIによるソフトウェア過剰防御と「Going Dark」問題
- Baltimore で開催された Usenix Security カンファレンス参加体験
- The Wire の舞台であるBaltimoreの現実とドラマの違いを同僚に説明する日々
- AI について語らないよう努めていたが、今回はそのルールを破る決意
- AI がソフトウェアを「 過度に安全」にしてしまう懸念
- その結果、 米国情報機関・法執行機関の能力喪失(Going Dark) が現実味を帯びる可能性
通信監視の歴史と暗号化の進化
- 2000年代初頭 の電子監視は、 The Wire で描かれるような単純な盗聴が主流
- スマートフォン と テキストメッセージ の普及により、通信内容の保存と取得が容易に
- 2010年、AppleがiPhoneストレージをユーザーパスコード由来の鍵で暗号化
- 2011年、AppleがiPhoneメッセージにエンドツーエンド暗号化を導入
- WhatsApp が2016年までに10億ユーザーにエンドツーエンド暗号化を提供
- FBIなど法執行機関は 「Going Dark」問題 として認識し、Appleに協力を要求
- Apple v. FBI事件 では、外部企業による端末ハッキングで膠着状態が解消
- GrayKey や Pegasus などのハッキングツールの普及で、法執行側の緊急性が一時的に低下
AIによる脆弱性発見の新時代
- 2024年4月、Anthropicが Mythos という脆弱性発見に特化したAIモデルを発表
- 米政府は一時的に輸出規制を実施するも、OpenAIや中国系ラボも同様の技術を開発
- AIモデルによる深刻な脆弱性発見事例 が急増
- 防御側が AIで数十年分のバグを一気に修正 し始める動き
- CIツールチェーン 全体にAI脆弱性スキャンを組み込む潮流
- 近い将来、 リモートから悪用可能なバグが激減 する見込み
法執行機関・情報機関への影響とバックドア要求の再燃
- ソフトウェアの高セキュリティ化で、 法執行機関が本当の「Going Dark」状態 に突入
- 「例外的アクセス(バックドア)」 の議論が再加熱する懸念
- 各国政府が自国向けのバックドア実装を強く要求する可能性
- バックドアは 要求国のみを弱体化 させ、外国勢力に新たな攻撃手段を提供するリスク
- インフラがようやく安全になりつつあるタイミングでの 自己破壊的な選択 への警鐘
今後の展望と課題
- 明確な 解決策や行動計画 は現時点で存在しない現実
- AI革命 による急速な変化に社会全体が対応しきれていない現状
- ただ「 正しい選択がなされること」を願うしかない状況
- 専門家による議論や対策の必要性は高まる一方で、 抜本的な回避策の不在