Anthropic、9,830件の対話分析に基づくAI Fluency Indexを公開

AI Fluency Indexの概要

Anthropicは2026年2月23日、AI Fluency Indexを公開した。目的はAI利用頻度ではなく、人間がAIとどれだけ効果的に協働できているかを行動ベースで測ることにある。分析対象はClaude.ai上の匿名化された複数ターン会話9,830件（2026年1月の7日間）だ。

研究では4D AI Fluency Framework（24行動）を参照し、そのうちチャットログから直接観測できる11行動を指標として採用した。Anthropicは、単純な丸投げではなく、AIを思考パートナーとして使うaugmentativeな使い方が中心だと報告している。

主要な結果

• 反復・改善(iteration and refinement)は全体の85.7%で観測
• 反復がある会話では平均2.67個の追加fluency行動、ない会話では1.33個
• Artifact（コード、文書、アプリ等）を生成する会話では、指示は増える一方で、文脈不足の指摘(-5.2pp)、事実確認(-3.7pp)、推論確認(-3.1pp)が低下

示唆

本レポートは、AI協働の質を継続的に追跡するためのベースラインを提示した点に意義がある。Anthropicは、観測不能な行動の定性的評価や因果分析を今後の課題として明示している。完成度の高い出力ほど検証が弱まる可能性があるという結果は、実運用上の注意点として重要だ。

一次情報: Anthropic研究ページ、X投稿。