Salesforce、Agent Fabricにエージェント評価機能とコスト管理機能を追加

Salesforceは2026年10月27日、複数のプラットフォームにまたがるエージェントを管理・統制するAIコントロールプレーン「Agent Fabric」に、Agent Evals、API Evals、高度なコスト管理機能を柱とする一連の機能を追加すると発表した。Salesforceによると、このプラットフォームは1日あたり12億件を超えるリクエストを処理している。

今回の発表では、企業がAIの導入を拡大するにつれて、エージェントが気づかれないまま誤った回答を返し、問題が発覚する前にコストが積み上がるおそれがあるという、具体的な運用上の課題を踏まえて機能が紹介された。Salesforceによると、新機能によりCIOやAI部門の責任者は、問題が顧客からの苦情や制御不能なコストにつながる前に発見できる。品質が低下した際の自動介入と、予算の範囲内に利用を抑える厳格な支出上限を組み合わせている。

Agent Fabricは、MuleSoftを基盤とする企業向けエージェント・コントロールプレーンであり、単一のコントロールプレーンからエージェント、AI資産、エージェント型ワークフローを検出、統制、オーケストレーション、監視できる。Agent Fabricの製品ページによると、スキャナーは、Amazon、Google、Microsoft、Claude、Databricks、Kongなどのエコシステムで稼働するエージェント、Model Context Protocol（MCP）サーバー、APIを自動で検出し、AI資産の一元カタログであるAgent Registryに直接登録する。このプラットフォームには、既存のAPIをMCPツールとして公開するMCP Bridge、マルチエージェント・オーケストレーション、A2Aプロトコルのサポート、LLMとMCPを統合するゲートウェイ、Trusted Agent Identity、そして信頼度スコア、ボトルネックの検出、ハルシネーションのリスクなどの指標を用いてエージェントネットワークを可視化するAgent Visualizerも含まれる。製品ページによると、Agent Fabricと、Salesforce内でエージェントを構築・実行するためのSalesforceのプラットフォームであるAgentforceは、エージェントが対話にどう対応し、推論し、計画を立て、行動するかを定義する同じエンジンを搭載している。

継続的な評価と自動介入

Salesforceによると、Agent Evalsはデプロイ前にテストを自動生成し、その後、本番環境でエージェント、大規模言語モデル（LLM）、MCPサーバーを、定められた品質基準に照らして評価する。評価結果が基準に達しない場合、システムはあらかじめ定義された介入を実行する。これにはAgent Kill Switchも含まれ、チームのポリシーで承認が必要な場合は承認手順を挟む。製品ページでは、この機能をエージェントの品質テストを自動的なアクションにつなげるものと説明し、MCPサーバーとLLMの評価機能は近日提供予定としている。

API Evalsは、別の障害要因に対処する。依存先のAPIが変更されると、エージェントが動作しなくなることがある。Salesforceによると、このツールはAPI仕様から機能テストと性能テストを自動生成し、本番環境に影響が及ぶ前に互換性を損なう変更を検出する。

発表では、ワークフローを説明するため、小売業者の事例を紹介している。ある小売業者は、運用コストを削減するため、注文サポート用エージェントが使うAIモデルを、より低コストのものに切り替える。切り替え後、Agent Evalsが予定されたテストを実行し、エージェントが注文の遅延について不正確な情報を提供していることを検出する。システムは品質上の問題を通知し、担当チームが人間の関与を維持することを望んでいるため、エージェントを隔離する承認を求める。承認されると、エージェントは隔離され、その間にチームは注文の遅延への対応方法に関する指示を改善する。続いて、より低コストのモデルで評価を再実行して性能を確認し、エージェントを本番環境に戻す。

製品ページで本番環境のエージェントを迅速に停止する方法と説明されているAgent Kill Switchは、発表時点で一般提供されている。Triggered-Agent Kill Switchは、2027年1月に一般提供が開始される予定だ。

コスト管理と予算の適用

コスト管理では、FinOps DashboardとModel Walletにより、予算管理者はAI支出の状況と、予算超過前にリクエストを停止する厳格な上限を一元的に確認できる。Salesforceによると、Cost Optimization Policiesは、同社のテストシナリオに基づき、セマンティックキャッシュ、ペイロード圧縮、応答のトリミングによって、トークン使用量を最大75％削減する。

MuleSoftのコスト管理に関するドキュメントでは、予算を適用する仕組みについて詳しく説明している。Model Walletでは、エージェント単位、インスタンス単位、または事業部門単位で予算を設定し、支出の発生に応じてリアルタイムで追跡する。ウォレットの残高が減少すると、請求書が届いてからではなく、予算超過の前に制御が働き、予測機能は超過が見込まれる数日前に警告する。Model Proxyはトラフィック経路上に配置され、プロバイダーが実際に請求する料金に基づいてリクエストごとの費用を算出するため、ダッシュボード上の支出額を請求書と照合できる。最適化ポリシー（Progressive Disclosure、Smart Response Trimming、TOON compression）はゲートウェイで実行され、MCPサーバーやクライアントコードを変更せずに、トークンの無駄を削減する。また、ドキュメントでは、チーム、アプリケーション、ユースケースごとの支出をリアルタイムで追跡する方法と、予算を超える前に制御不能なエージェントのループを自動停止する方法も説明している。

FinOps Dashboard、Model Wallet、Cost Optimization Policiesは、発表時点で一般提供されている。

検出機能とフェデレーション・ゲートウェイ・ポリシー

Salesforceは、Agent Fabricの標準プラットフォームサポートを拡張する2つのアップデートも発表しました。Custom Agent Scannerは、社内環境、ファイアウォールの内側にあるシステム、サードパーティープラットフォームを自動検出できるようにします。これにより、チームは各アセットを手動で登録することなく、エージェント、モデル、MCPサーバー、APIをカタログ化するカスタムスキャナーを構築し、Agent Registryに登録できます。発表時点ではベータ版で、一般提供は2027年1月を予定しています。

Open Policies for Federated API Gatewaysは、Azure、Apigee、Kongの各ゲートウェイにわたってAPIポリシーを検出、適用、追跡します。IPアドレスの許可リスト登録やレート制限などのポリシーを、ゲートウェイごとに個別に設定するのではなく、1回の操作ですべてに適用できます。この機能は発表時点で一般提供されています。

調査データと顧客のコメント

今回の発表では、評価の実施状況に関する調査データを挙げ、エージェントを導入している組織のうち、実トラフィックで評価を行っているのは半数に満たないと指摘しています。LangChainの「エージェントエンジニアリングの現状」レポートを引用しており、同レポートは2025年11月18日から12月2日までに1,300人を超える専門家を対象に調査しました。レポートによると、回答者の57.3%はエージェントを本番環境で稼働させており、32%が本番導入における主要な障壁として品質を挙げ、89%がエージェントの何らかの可観測性を導入しています。評価に限って見ると、52.4%の組織がテストセットを使ったオフライン評価を実施していると回答した一方、オンライン評価の導入率は37.3%でした。

ASICS Digitalのデジタルコマース部門でエンジニアリングディレクターを務めるPoonam Deshpande氏は、ASICSがAgent Evalsのベータ版の開発に役立てるため、Salesforceと協力していると述べました。「Agent Evalsで最も期待しているのは、問題があると知らせるだけで終わらないことです」と同氏は話します。「エージェントの品質が低下すると、Agent Fabricが自動的に介入し、適切な担当者に警告したり、小さな問題が顧客全体に影響する問題に発展する前にエージェントをオフラインにしたりできます」

今回の発表には、Capita、GE Appliances、Newell Brandsの幹部によるコメントも含まれていました。CapitaでAIエンジニアリングディレクターを務めるTiina Stephens氏は、Agent Evalsによって、明確なビジネス成果とサービス成果に照らしてエージェントのパフォーマンスを検証できるようになると述べました。GE Appliancesでエンタープライズ変革担当エグゼクティブディレクターを務めるAdam Jones氏は、同社がエージェントとその構築者を把握し、問題が発生した場合には停止できる単一のコントロールプレーンについて説明しました。Newell Brandsでグローバルカスタマーサービス担当バイスプレジデントを務めるSteve Sigrist氏は、同社の各ブランドでカスタマーサービスにAIエージェントを導入するにあたり、Agent Fabricをコントロールプレーンとして利用していると述べました。

「企業がエージェントを拡大できる速度は、正確性を保ち、予算内に収められる速度に限られます」と、MuleSoftおよびAgent Fabricの上級副社長兼ゼネラルマネージャーであるAndrew Comstock氏は述べました。「これまでは、誤った回答や急な支出増を見つける作業と、それを止める作業は別々でした。Agent Fabricは評価、コスト管理、介入を統合し、チームが問題を即座に封じ込め、自信を持ってエージェントを拡大できるようにします」

提供状況

Agent EvalsとAPI Evalsは2026年11月にベータ版となり、一般提供は2027年1月を予定しています。Custom Agent Scannerは発表時点でベータ版で、Triggered-Agent Kill Switchと同じく、2027年1月に一般提供される予定です。Agent Kill Switch、Open Policies for Federated API Gateways、FinOps Dashboard、Model Wallet、Cost Optimization Policiesは、2026年10月27日時点で一般提供されています。