Datadog、「LLM Observability」に新機能を追加〜AIエージェントの監視、開発効率の向上とモデル性能の最適化を支援

3つの新機能「AI Agent Monitoring」「LLM Experiments」「AI Agents Console」によりAIエージェントへの投資効果の可視化を実現

ニューヨーク – 2025年6月10日 – オブザーバビリティとセキュリティの統合プラットフォームを提供するDatadog, Inc.（NASDAQ: DDOG）は本日、自社およびサードパーティのAIエージェントの監視や実験を支援する新機能をDatadogの年次カンファレンス「DASH」で発表しました。これらはAI Agent Monitoring、LLM Experiments、AI Agents Consoleの3つで構成されており、AIエージェントの動作全体を可視化するとともに、LLMアプリケーションの品質を継続的に評価し、AIエージェントの管理を一元化するためのガバナンス体制の構築も支援します。

昨今の生成AIや自律型エージェントの登場により、企業におけるソフトウェアの開発・提供のあり方は大きく変わりつつあります。一方で、こうした革新は新たな複雑さをもたらしています。AIを自社の製品や業務フローに急速に取り込もうとする企業の多くは、AIシステムがどのように動作しどのような処理を行っているのか、そしてビジネスにどのような価値を生み出しているのか、明確に把握できていないという重大な課題に直面しています。

Datadogはこの課題に対処するため、ログやメトリクスなどの外部出力を活用してAIシステム内部の状態を把握・分析するオブザーバビリティの手法をAI領域にも導入しています。今回「LLM Observability」に追加された新機能により、企業はエージェント型AIシステムの挙動を詳細に監視し、LLMに対する構造化された実験を行い、カスタムおよびサードパーティ製エージェントの利用傾向やその影響を定量的に評価できるようになります。これにより、LLMアプリケーションを迅速かつ安全に導入できるだけでなく、継続的な改善のスピードを高め、その成果を客観的に示すことが可能になります。

「最近の調査によると、AIプロジェクトのうち、当初想定されていたROI（投資対効果）を達成できているのはわずか25％にとどまっています。世界中で膨大な数のAIプロジェクトが推進されている現状を踏まえると、これは非常に憂慮すべき状況です」とDatadogのプロダクト担当バイスプレジデントであるイリエ・ガルニエ（Yrieix Garnier）は述べています。「本日発表した新機能は、AIに巨額の予算を投じている企業が、その成果に対して説明責任を果たせるよう支援し、AIへの投資の実効性を高めることを目的としています。AI Agent Monitoring、LLM Experiments、AI Agents ConsoleをLLM Observabilityに追加することで、Datadogをご利用のお客様はAI投資の状況を可視化し、活用効率を高め、その取り組みを本格的に拡大・発展させていくためのツールを手にすることができます。」

Datadog AI Agent Monitoring
各エージェントの意思決定の流れ（入力、ツールの呼び出し、他のエージェントとの連携、出力）をインタラクティブなグラフで即座に可視化します。また、レイテンシーの急増や誤ったツール呼び出し、同じ処理が止まらず繰り返される不具合（無限ループ）といった予期せぬ挙動についても詳細に分析でき、これらの事象を品質、セキュリティ、コストなどの各種指標と関連付けて把握することが可能です。これにより、構造が複雑で分散され、実行結果が一定しないエージェントシステムのような環境でも、デバッグが容易になり、全体のパフォーマンスの最適化につながります。

「エージェントはチャットアシスタントを超えて進化した存在であり、生成AIの可能性を最大限に引き出す鍵を握っています。エージェントに多様なツールを組み込んで実用性を高めていくと、その挙動は一層複雑になり、予測が難しくなります。そうした挙動をリアルタイムに把握・分析できるオブザーバビリティがあってこそ、ユースケースを本番環境へと自信を持って展開することが可能になります。Datadogとのパートナーシップにより、私たちのチームはAIエージェントを活用したソリューションを組織全体で展開していくために必要な可視性とインサイトを得ています」と、Mistral AIの共同創業者兼CTOであるティモテ・ラクロワ（Timothée Lacroix）氏は述べています。

LLM Experiments（Preview）
LLMアプリケーションに対して、プロンプトの変更やモデルの切り替え、アプリケーションの修正といった要素がパフォーマンスにどのような影響を与えるかを検証するためのものです。実際の本番環境から得られたトレースデータ（入出力ペア）や、顧客がアップロードしたデータセットをもとに実験を行い、それらを比較することで、応答精度・スループット・コストの改善効果を定量的に把握でき、リグレッション（性能や精度の劣化）を未然に防ぐことが可能になります。

「AIエージェントは概念段階から本番活用へと急速に移行しつつあります。Claude 4を活用したアプリケーションは、カスタマーサポートからソフトウェア開発、研究開発に至るまで、さまざまな領域で実際の業務を支援しています」と、Anthropicのプロダクト担当バイスプレジデントであるマイケル・ガーステンハーバー（Michael Gerstenhaber）氏は述べています。「エージェントがより多くの責任を担うようになる中で、安全に動作し、確かな価値をもたらし、ユーザーに寄り添ってビジネス目標に貢献しているかどうかを確認するうえで、オブザーバビリティは極めて重要です。Datadog のLLM Observability の進化によって、エージェント型システムを本格的に展開するうえで不可欠な可視性が得られると、大いに期待しています。」

AI Agents Console（Preview）
OpenAI のOperator、Salesforce のAgentforce、Anthropic の Claude 搭載アシスタント、IDE のCopilotなど、外部のAIエージェントを重要な業務フローに組み込む動きが広がるなかで、企業にはそれらの挙動や利用状況、複数のシステムにまたがる権限を正確に把握し、エージェント導入の最適化を図ることが求められています。こうした課題に対応する「AI Agents Console」により、企業は自社およびサードパーティ製エージェントの動作を継続的に可視化し、利用実態や影響、ROI（投資対効果）を測定するとともに、セキュリティやコンプライアンス上のリスクを事前に検知することが可能になります。

Salesforce ソフトウェアエンジニアリング担当シニアバイスプレジデント
アルミタ・ペイマンドゥースト（Armita Peymandoust）氏からのコメント

「企業がAIエージェントの活用を本格化させる過程において、AIエージェントがビジネスにもたらすインパクトを明確に可視化することは、極めて重要な課題となっています。SalesforceのAgentforceはオープン性と信頼性を基盤に構築されており、すでに多くのお客様がAIの導入によって大きな成果を上げています。Salesforceは、信頼性の高いパートナーエコシステムとの連携を通じてこの基盤をさらに強化し、お客様が自社のニーズに最適化されたAIエージェントを安心して活用できるよう、柔軟にソリューションを提供しています。Datadogのオブザーバビリティの進化により、AIエージェントの意思決定や挙動を構造的に可視化することで、私たちのビジョンをさらに前進させ、AIエージェントの透明性とスケーラビリティを次の段階へと引き上げてくれるでしょう」

DatadogのAI Observability機能についての詳細は、以下のページ（英語）をご覧ください。
https://www.datadoghq.com/product/llm-observability/ 

Datadogについて

Datadogは、クラウドアプリケーション向けのオブザーバビリティおよびセキュリティの統合プラットフォームを提供しています。DatadogのSaaSプラットフォームは、インフラストラクチャーのモニタリング、アプリケーションパフォーマンスモニタリング、ログ管理、リアルユーザーモニタリング、クラウドセキュリティ、その他多くの機能を統合および自動化し、お客様のテクノロジースタック全体に統合されたリアルタイムのオブザーバビリティとセキュリティを提供します。Datadogは、あらゆる規模の企業、幅広い業界で使用され、デジタルトランスフォーメーションとクラウド移行を可能にし、開発、運用、セキュリティ、ビジネスチーム間のコラボレーションを促進し、アプリケーションの市場投入までの時間と問題解決までの時間を短縮し、ユーザーの行動を理解し、主要なビジネス指標をトラッキングします。

将来の見通しに関する記述

本プレスリリースには、新製品および新機能の利点に関する記述を含め、米国1933年証券法（Securities Act of 1933）第27A条および米国1934年証券取引所法（Securities Exchange Act of 1934）第21E条に規定される「将来予想に関する記述」が含まれています。これらの将来予想に関する記述は、当社の新製品および新機能の利点に関する記述が含まれますが、これらに限定するものではありません。実際の結果は、将来見通しに関する記述とは異なる可能性があり、「リスクファクター」の見出しの下に詳述されているリスクをはじめ、2025年5月6日に米国証券取引委員会に提出したForm 10-Qの四半期報告書を含む米国証券取引委員会への提出書類および報告書、ならびに当社による今後の提出書類および報告書に記載されている、当社が制御できない様々な仮定、不確実性、リスクおよび要因の影響を受けます。法律で義務付けられている場合を除き、当社は、新しい情報、将来の事象、期待の変化などに応じて、本リリースに含まれる将来の見通しに関する記述を更新する義務または責務を負いません。