Boxでは、お客様が実際に利用する方法に即して、フロンティアモデルを評価しています。つまり、複雑で複数のドキュメントにまたがるビジネスタスクで評価します。各タスクはAIエージェントを通じて実行され、適切なドキュメントを見つけて、スプレッドシート、PDF、プレゼンテーション、画像を横断して推論し、ナレッジワーカーが実際に引き渡せる成果物を作成することが求められます。AIモデルは、完成した成果物が正しいかどうか、そしてどれだけ迅速かつ効率的に完了できるかという観点で評価されます。
今回の評価では、Claude Fable 5.1は72%のスコアを記録し、Fable 5の65%から約7パーセントポイント向上しました。より正確な結果を、より低いレイテンシと少ないトークン数で提供することで、Fable 5.1は、お客様が複雑な企業ワークフローをよりコスト効率よく実行し、企業コンテンツを活用するワークフローからより大きな価値を引き出すことを支援します。
要求の厳しいユースケース全体で大きく向上
企業の業務が、1つのドキュメントや1つのプロンプトだけで完結することはほとんどありません。AIモデルには、複数のファイル形式にまたがる情報を照合し、多段階の分析を行い、業界固有のロジックを適用し、その結果を完成した成果物に仕上げることが求められます。Claude Fable 5.1が最も大きな向上を見せたのは、まさにこの種の分析業務です。1つの誤った仮定が、その後のすべての結論に連鎖的な影響を及ぼし得るタスクです。
- データ分析（56%から69%）: これらのタスクでは、複雑なスプレッドシートを解釈し、数式や重み付け方式を適用し、正しい定量的な結果を出すことが求められます。Claude Fable 5.1は、一度の初期エラーによってその後のすべての結果が歪む可能性がある状況でも、推論プロセス全体を通して精度を維持しました。
- データに基づくレポート作成（70%から76%）: 複数のデータソースを統合して完成したレポートを作成する際、Claude Fable 5.1はClaude Fable 5よりも関連する詳細を多く取り込み、中間計算もより正確に処理しました。
- 専門家によるレビューと検証（60%から66%）: ソースデータに照らして主張を検証するよう求められた際、Claude Fable 5.1は、Claude Fable 5が見落とした不整合やエラーをより多く特定しました。
より高い精度を、より低いレイテンシで実現
Claude Fable 5.1の精度向上は、スピードを犠牲にして実現されたものではありません。タスク完了までの平均時間は23%短縮され、総トークン使用量も25%減少しました。Fable 5.1は、より少ない反復で答えに到達します。つまり、より正確であると同時に、より効率的です。
複数の業界でパフォーマンスが向上
精度とスピードの向上は、企業が日々実行するワークフローに直接反映されます。評価対象となった業界の一部で確認された結果をご紹介します。
- 金融サービス（63%から82%）：財務予測のタスクでは、Fable 5.1は税金を計算する前に資本控除を正しく適用し、その結果を利益剰余金、当座貸越、資金不足額まで一貫して反映しました。Fable 5では初期計算に誤りがあり、その後のすべての数値が歪んでいました。
- 公共（58%から74%）：変更された方式に基づき、重み付けされた学生の成績を再計算するタスクでは、Fable 5.1は文脈上の手がかりから、どの課題がどの重み付けカテゴリーに属するかを正しく推定しました。Fable 5はこの区別を見落とし、その結果、多くの学生の成績が連鎖的に誤ったものになっていました。
- テクノロジー（36%から74%）：Claude Fable 5.1は、テクノロジー分野のすべてのテストケースで、正しい形式の実質的な回答を生成しました。また、コスト最適化タスクにおいて、正規化方法が曖昧な指標を正しく扱うなど、分析面でもより優れた結果を示しました。
お客様にとっての意味
Boxのお客様にとって、Claude Fable 5.1により、困難なエンドツーエンドの企業ワークフローでAIを活用することが、より現実的になります。単にドキュメントに関する質問に答えるだけではなく、データを分析し、複数のファイルにまたがる情報を照合し、他者の作業を検証し、そのまま引き渡せるレポートを作成できます。精度の向上により、初期のミスが予測や分析全体を損なうリスクが低減され、従業員が結果に基づいて行動する前の手作業による確認ややり直しを減らせる可能性があります。同時に、処理の高速化とトークン使用量の削減により、これらのワークフローをより効率的に実行できます。その結果、財務予測の作成、重要情報のレビュー、大規模な業務データの分析などにおいて、AIはソースコンテンツから信頼できるビジネス成果まで、複雑な業務をより迅速に進めることができます。
Box AIでClaude Fable 5.1を使い始めましょう
Claude Fable 5.1は、Claude Fable 5よりも複雑なタスクを高速かつ少ないトークン数で完了しながら、より正確な分析結果を提供します。Claude Fable 5.1は、まもなくBox AI Studioで利用可能になる予定です。Box AIの詳細をご覧いただき、Box AI APIを使用した構築方法をご確認ください。
関連コンテンツ
- AIエージェントの推論機能を強化: Box AIがClaude Sonnet 4.6をサポート
- ローデータからインサイトへ: Box AIでClaude Opus 4.6による推論
- First Look: Claude Sonnet 4.5とBox AIが実現する表形式データと非構造化データを含む企業コンテンツの高度な推論
- Box AI Studioのご紹介:お客様独自のビジネスニーズに合わせてAIをカスタマイズ
このブログは Box, Inc 公式ブログ（https://blog.box.com/）2025年9月1日付投稿の翻訳です。
著者: Rutuja Rajwade, Senior Product Marketing Manager, Platform & AI at Box
原文リンク: https://blog.box.com/first-look-claude-fable-51-improves-accuracy-latency-and-efficiency-complex-enterprise-work
