論文「Compiled AI」 — LLM 呼び出しを排除しトークン 57 倍削減を実現する決定論的コード生成基盤

概要

XY.AI Labs / スタンフォード / Cornell / Brigham and Women's Hospital 共同チームが 2026年4月6日に arXiv へ投稿した本論文は、LLM のワークフロー実行コストを劇的に削減する「Compiled AI」アプローチを提案する。LLM がコンパイル段階で実行可能コードを生成し、その後のワークフロー実行時にはモデル呼び出しなしの決定的処理（deterministic execution）に置き換えるという設計だ。

従来のエージェントシステムはワークフロー実行の各ステップで LLM を呼び出すためトークンコストが高く、スケールが困難だった。Compiled AI はこの問題を「コンパイル済みコード」で解決し、1,000トランザクション時のトークン消費を57倍削減しながら関数呼び出しタスクで96%の完了率を達成している。

AI エージェントの実用化において、コスト・速度・信頼性はいずれも重要な障壁だ。Compiled AI が示す「事前コンパイルによる決定的実行」の概念は、税務・法務などの業務ワークフロー自動化においてもコスト効率を大幅に改善する可能性を秘めている。

ポイント

• LLM がコンパイル段階でコードを生成し、ワークフロー実行時はモデル呼び出しなしの決定的処理に置換
• 制約付きコード生成システム + 4段階の生成・検証パイプラインを構築
• 関数呼び出しタスクで96%の完了率を達成
• 1,000トランザクション時のトークン消費を57倍削減（従来エージェント比）
• 文書インテリジェンスタスクではセキュリティテストで96.7%の精度