Managing deployed agents

Consolidated monitoring view of deployed agents, with performance, health, feedback, and consumption metrics, plus execution traces for individual runs.

[デプロイ済みのエージェント] タブには、運用環境でアクティブなすべてのエージェントをまとめたビューが、パフォーマンス、健全性、フィードバックのリアルタイムのメトリックとともに表示されます。これは、運用効率を監視し、問題を診断して、デプロイされたエージェントから一貫した高品質の結果が提供されるようにするためのプライマリ ワークスペースとして機能します。

エージェントの可視性の統合

このビューには、テナント全体にわたる運用環境で使用できるすべてのエージェントが集約され、管理者や開発者は運用ステータスや最近のアクティビティを素早く評価できます。各エージェント カードには、次のような主要な運用メトリックがまとめられています。

• 成功率 – 成功した実行の割合です。機能低下しているエージェントやパフォーマンスの低いエージェントを特定するのに役立ちます。
• 平均応答時間 – 最近のジョブの実行速度と効率の指標。
• フィードバックの量 – エージェントに対して収集されたユーザーまたはシステムの評価の数。
• 健全性インジケーター – 全体的なパフォーマンスの傾向と実行時の安定性を示す視覚的な手掛かり (正常性、機能低下など)。

エージェントは、ステート、種類、フォルダー、または時間範囲で絞り込みができるため、ビジネス領域やデプロイ環境全体にわたって正確に監視できます。

運用上の洞察とパフォーマンスの追跡

このタブでは、単純なランタイム ステータスを超えたコンテキスト分析を行うことができます。以下を探索できます。

• アクティブなジョブと完了したジョブ – 別々のタイムラインでライブ実行と完了した実行を追跡し、ワークロードのピークとボトルネックを特定するのに役立ちます。
• エラーと遅延のパターン – パフォーマンスのグラフには、実行エラー、初回応答までの時間、遅延のパーセンタイルが表示され、これによってチームは応答性を微調整できます。
• フィードバックの傾向 – 集約された感情分析 (肯定的および否定的) により、エージェントの品質が時間とともにどのように変化しているか、およびどの更新がユーザーの満足度に影響を与えているのかが示されます。

これらのインサイトは、体系的な問題の診断、新しいデプロイの検証、および最適化作業の優先順位付けに役立ちます。

使用状況と消費の分析

このダッシュボードでは、エージェントが環境とどのように対話し、リソースがどのように消費されているかが強調表示されます。

• エージェント ユニットの使用状況 – 合計消費量を追跡し、コストまたはリソース使用率の外れ値を特定します。
• 呼び出された機能の上位 – エージェントの実行全体で最も頻繁に使用されるアクション (ツール、アクティビティ、またはインデックス) をリストし、チームが動作パターンと一般的な依存関係を把握するのに役立ちます。

詳細なエージェントのランタイム ビュー

個々のエージェントを選択すると、以下の情報を組み合わせた詳細な分析ワークスペースが開きます。

• エージェントのロジック、ツール、およびメモリ ソースをマップする実行時のダイアグラム。
• プロンプトの設計、ツールの統合、評価のカバレッジを評価するヘルス スコアの表示。
• 各実行についてきめ細かく (入力、出力、エラー、タイミングの詳細) 示した実行トレース。これにより開発者はエージェントの推論プロセスを再構築してデバッグできます。

エージェント インスタンスのビューでは、エージェントの個々の実行を完全に監視でき、意思決定、アクション、およびパフォーマンス メトリックを 1 回の実行で完全にトレースできます。

トレース ビューを理解する

トレース ビューでは、エージェントのロジックのグラフィカル表現と、時間が一致している実行データを組み合わせて、各ステップのフローと結果を検証できます。キャンバスには、モデルやツールなどのエージェントの主要なコンポーネントを表すノードが、順次連結された状態で表示されます。

エージェントの実行のトレース ビューでは、以下の手順に従ってトレース データを操作および調査します。

1. ノードの情報をプレビューします。キャンバス上で任意のノードにマウス カーソルを置くと、以下のようなツールチップが表示されます。
   • 実行ステータス (成功、リトライ、または失敗)
   • 開始タイムスタンプと終了タイムスタンプ
   • 入力データと出力データのプレビュー 詳細をすべて開かなくても、各ステップの処理状況を素早く把握できて便利です。
2. ノードの詳細を表示します。ノードを選択すると、詳細パネルが開きます。このパネルには以下が含まれます。
   • 完全な入出力ペイロード (JSON)
   • 実行ログまたはエラー メッセージ (該当する場合)
   • レイテンシやトークンの使用状況など、実行時のメトリック
   • 構成パラメーター (該当する場合)
3. 関連するステップ間を移動して、エージェントの中で情報がどのように流れたかを調べます。
   • 連結されたノードを選択して、上流または下流に移動します。
   • こうすると、あるステップの決定、入力、出力が、次のステップにどのように影響を与えたかを追跡するのに役立ちます。
4. [実行トレース] パネルを使用します。このパネルには、エージェントの実行中に記録されたすべてのアクションが時系列で表示されます。
   • トレース ログの行を選択して、対応するノードをキャンバスで強調表示します。
   • 同様に、キャンバスでノードを選択すると、トレース ログ内の関連する行が自動的に強調表示されます。