論文「LLM Reasoning Is Latent, Not the Chain of Thought」 — LLM 推論は潜在状態軌跡として研究すべきと提言

概要

Wenshuo Wang 氏は 2026 年 4 月 17 日、arXiv（cs.CL）に位置論文「LLM Reasoning Is Latent, Not the Chain of Thought」を投稿した。LLM（大規模言語モデル）の推論プロセスをどう理解・研究すべきかという基本的な立場を問い直す内容で、Chain-of-Thought（CoT）を表面的に観察するだけでは内部推論の本質を捉えられないと主張する。

論文では 3 つの仮説を比較検討している。H1（推論は潜在状態軌跡が媒介）、H2（表面的 CoT が媒介）、H0（単に計算量の増加で説明できる）の 3 仮説について証拠を整理し、現状は H1 を「デフォルト仮説」として支持する証拠が優勢だと結論づけた。

この立場が正しければ、CoT の文字列だけをもとに「モデルが何を考えているか」を評価する従来のアプローチには根本的な限界があることになる。AI の解釈性研究や安全性監査において、CoT 出力だけでは内部推論を評価できない可能性を示唆する重要な提言だ。

ポイント

• 3 仮説（H1：潜在状態軌跡、H2：表面的 CoT、H0：計算量増加）を比較検討: 現状の証拠は H1 を「デフォルト仮説」として支持すると結論。
• 「CoT の忠実性」議論は推論プロセスの本質を見誤る恐れがある: 表面的な出力文字列の観察だけでは内部推論は評価できないと指摘。
• 潜在状態ダイナミクスを推論研究の中心対象とすることを勧告: 推論研究の方向性を根本的に問い直す提言。
• 解釈性研究や安全性監査への含意: 内部推論の透明性確保に新たな視点が必要となる可能性。