概要
- AGI(汎用人工知能) の明確な定義の欠如が現状と理想のギャップを不明瞭化
- 本論文は 定量的フレームワーク を提案し、AGIの評価方法を提示
- Cattell-Horn-Carroll理論 に基づき、10の認知領域でAIを評価
- 現行AIは知識領域で強みを持つが、 長期記憶など基礎認知機能に課題
- AGIスコア(例:GPT-4は27%、GPT-5は57%) で進捗と課題を定量的に示す
AGIの定義と評価フレームワーク
- AGI を「高等教育を受けた成人の認知的多様性・能力と同等」と定義
- Cattell-Horn-Carroll(CHC)理論 を基盤にした評価手法
- 10のコア認知領域 (推論、記憶、知覚など)による分解評価
- 人間の心理測定バッテリー をAI評価用に適応
- 客観的・再現性のある測定 を目指すフレームワーク構築
現行AIモデルの認知プロファイル
- 知識集約型領域 (例:言語、事実知識)で高いパフォーマンス
- 基礎的認知能力 (例:長期記憶、柔軟な推論)で重大な欠陥
- 「ギザギザ」な認知プロファイル (領域ごとに大きな差異)
- 認知的多様性の不足 がAGI到達の障壁
AGIスコアと進捗の定量化
- AGIスコア でAIモデルの進捗を具体的に数値化
- GPT-4:27%
- GPT-5:57%
- 急速な進歩 と 依然残る大きなギャップ の両方を可視化
- 今後のAI開発 の指針となる定量的ベンチマーク提供
今後の展望と課題
- 長期記憶や柔軟な推論 など、基礎認知機能の強化がAGI実現の鍵
- 人間の認知理論 に基づく評価の重要性
- AI開発コミュニティ への定量的・体系的評価手法の提案
- AGI到達までのロードマップ 構築への貢献