Autopilot のチャットについて

Autopilot チャットとは何ですか?

Autopilot Chat is a context-aware and action-enabled agent which is available in Test Manager in Public Preview. Autopilot Chat brings an intelligent, conversational assistant in Test Manager, designed to enhance how testers interact with and manage their assets.

ユーザーは、メニューやフィルターを操作する代わりに、自然言語で質問をしたり、検索を実行したり、アセットを生成したり、アクションをトリガーしたりできます。ツールの使用時に会話のコンテキストが維持されるため、対話がより自然で滑らかになります。

Autopilot Chat connects with Test Manager’s built-in Autopilot tools and extends further through MCP server integration, allowing it to execute commands, evaluate requirements, generate test cases, and even run external automation processes and agents.

重要:

Autopilot Chat is available in Test Manager only when delivered through Test Cloud.

Figure 1. Autopilot Chat - generic window

For additional information and recorded tutorials, subscribe to the complementary information maintained on the UiPath Insider Portal where you can also leave feedback.

Autopilot Chat にはいくつの作業モードがありますか?

Autopilot Chat can be used with 2 modes: Edit mode and Agent mode.

1. Edit mode enables users to query the system and then choose one of the tools or operations suggested by Autopilot to perform the queried task. Autopilot does not proceed unless users confirm the tool to be used.

Figure 2. Autopilot Chat - Edit mode

When working in Edit mode, you can consult the reasoning and expand it.

Figure 3. Autopilot Chat - Edit mode reasoning

2. Agent mode enables users to query the system but then fully rely on Autopilot to choose the best tools and operations to perform the queried task (with no human intervention). Autopilot proceeds automatically and no user confirmation is required.

Figure 4. Autopilot Chat - Agent mode

Autopilot Chat ではどのような LLM を使用できますか?

The list of supported LLMs can be found in the Configuring LLMs topic.

Test Manager から Autopilot チャットにアクセスするにはどうすればよいですか?

To access Autopilot Chat, look for the Autopilot icon in the global header. Open a chat, access the Settings menu or the Chat History. To learn more about the chat screen and the available settings, refer to Autopilot - User interface.

Autopilot チャットは Test Manager でどのような機能に対応していますか?

ユーザーは、メニューやフィルターを操作する代わりに、自然言語で質問をしたり、検索を実行したり、アセットを生成したり、アクションをトリガーしたりできます。

Open the Autopilot Chat settings.

Figure 5. Autopilot Chat settings

Test Manager のフレームワーク ツールは次のとおりです。

• ドキュメント検索
• Autopilot での検索
• Web 検索
• 要件の評価
• テストの生成
• 古いテストの検出
• Autopilot によるグラフ

Figure 6. Test Manager framework tools

Test Manager の MCP ツールは次のとおりです。

• テスト ケースを要件に割り当てる
• テスト セットにテスト ケースを割り当てる
• オブジェクト ラベルを割り当て
• テスト ケースを一括作成する
• 要件の作成
• テスト ケースを作成する
• テスト セットを作成する
• すべてのラベルを取得
• すべてのオブジェクト ラベルを取得する
• 要件を取得する
• テスト ケースを取得する
• テスト セットを取得する
• テスト実行を取得する
• テスト実行のテスト ケース ログを取得する
• 要件へのテスト ケースの割り当てを解除
• テスト セットへのテスト ケースの割り当て解除

Figure 7. Test Manager MCP tools

To learn more about Autopilot Chat across the UiPath suite of products, refer to Autopilot - About Autopilot chat.

Test Manager でカスタム MCP サーバーを Autopilot Chat に接続できますか?

Only the custom MCP servers created in Orchestrator are supported. Open the Autopilot Chat settings and configure the MCP servers as described in the Autopilot - User interface topic.

Autopilot チャットに関するクエリとプロンプトのガイドラインはありますか?

To learn more about query and prompt guidelines, refer to Autopilot - Interacting with Autopilot chat - recommendations.

Is there support for queries which contain custom fields?

Is there support for queries which contain custom fields? Yes.

The queries support both text-based custom fields and label custom fields. Use Autopilot Chat for custom field operations such as:

• Find all the available custom fields (example prompt: Show me all the custom fields).
• Find data objects which bear one or more custom fields (example prompt: Find all requirements where Sprint = S1 and owner = John Smith).
• Move data objects (example prompt: Move requirement REQ:2 from S3 to S4.)

Autopilot Chat はどのリージョンでデプロイされていますか?

Autopilot Chat is deployed in the following regions: EU, US, JA, CA, AUS, SI, UK, IN. For more information, refer to the Global cloud regions section of the documentation.

The LLMs which support Autopilot Chat are deployed in the following regions: EU, US, JP. For all the other available regions, the LLMs are re-routed. For more information, refer to the AI features and model routing section of the documentation.

Autopilot のチャットの前提条件

1. UiPath Test Cloud アカウントを持っている必要があります。
2. Make sure to enable AI models (LLMs) in your AI Trust Layer policies. To use the AI capabilities provided by Autopilot, make sure you have an AI Trust Layer policy active and deployed to your tenant. Learn how to:
   • ガバナンス ポリシーを作成する
   • AI Trust Layer のポリシーの設定
   • テナント レベルでポリシーをデプロイする
3. Make sure you have prepared any documents you want to attach as part of your query. Autopilot Chat accepts PDF, TXT, MD, Word, and Excel formats. Note that, if you attach PDF documents, Autopilot Chat takes into account its structure and formatting during processing.
4. Before entering your query into the Autopilot Chat window, make sure that you choose the working mode (Edit mode or Agent mode).

Figure 8. Autopilot Chat mode

Autopilot のチャットの機能

Autopilot での検索

Use Autopilot Search directly inside the chat, by typing full, partial or fuzzy terms of what you are looking for. The agent retrieves all the matching objects. If a typo is made, the chat auto-corrects common mistakes.

結果が表示されたら、チャットを離れることなく、結果を展開したり、成果物テーブルでフィルター処理されたビューを開いたりできます。

クエリ例:

• カスタム フィールド スプリントが 123 に設定されているすべての要件を検索します。
• 過去 5 日間に不合格だったテスト ケースをすべて検索します。

Figure 9. Autopilot Search in Autopilot Chat

Autopilot のグラフ

Use the Autopilot Charts functionality to generate a visual representation of your data in the form of bar charts, line charts, and pie charts. Note that Autopilot Charts supports defects.

クエリ例:

• ファイルの種類別の添付ファイルの分布を表示する
• 完全にテストされた要件、部分的にテストされた要件、またはテストされていない要件はいくつありますか?
• 失敗したテスト ケースを要件別にグループ化して表示します。
• 不具合がリンクされていない失敗したテストを要件別にグループ化して表示します。
• ラベル別のテスト ケースの分布を表示します。
• カスタム フィールド「Sprint」で要件の分布を表示します。
• 実行に最も時間がかかるテスト セットはどれですか?
• 最近実行されていないテストケースの傾向を表示する
• 未解決のすべての問題を重要度別にグループ化した円グラフを生成します。
• [未解決の問題] の影響を受ける要件ごとに 1 本の棒を含む棒グラフを生成します。各棒は、不具合のスタックとして重要度別にグループ化され、重要度が一番上に表示されます。

Figure 10. Autopilot Charts in Autopilot Chat

AI を活用した要件評価

Use the Evaluate Quality functionality to assess the clarity, completeness, and testability of requirements, ensuring higher-quality inputs before test design begins.

To invoke a requirement evaluation from Autopilot Chat, reference the requirement by name or ID. Autopilot Chat understands the context, opens the Requirement Evaluation interface, and displays a detailed analysis with improvement suggestions.

要件の評価が完了したら、チャットを離れることなく結果を確認し、特定された問題を確認して要件を調整します。

クエリ例:

• 「ローンの提出」要件の品質を評価します。
• UIB:24の品質を評価します。

Autopilot チャットを使用して要件を評価する方法 (編集モード)

1. 評価する必要のある要件を示すクエリを入力します。

Figure 11. Autopilot Chat - Evaluate Requirement query

2. Select Configure and edit the fields: add any documents or select which documents to be included in the analysis, add or edit a prompt, select an AI model, and then either Accept or Reject the operation.

Figure 12. Autopilot Chat - Evaluate Requirement configuration

3. If you select Reject, the operation is not performed. If you select Accept, Autopilot works behind the scenes to provide the results.

Figure 13. Autopilot Chat - Evaluate Requirements result review

4. (Optional) Enter a query about the most immediate action that needs to be performed next.

AI を活用したテスト生成

Use the Generate Test Cases functionality to automatically create high-quality, structured test cases based on requirement details, user documents, RAG or user prompts.

To invoke Generate Test Cases from Autopilot Chat, reference a requirement by name or ID. Autopilot Chat interprets your intent, identifies the relevant requirement, and launches the Generate Test Cases tool where you can provide more context (labels, custom fields).

テストが生成されたら、生成されたテストをレビューします。

クエリ例:

• 「ローンを提出」要件のテスト ケースを生成します。
• UIB:24 のテスト ケースを生成します。

Leverage RAG vs. Attach documents

Leverage RAG only when:

• Requirements contain ambiguous terms or abbreviations
• Need to pull the ambiguous context from multiple sources dynamically

This is an example when you should leverage RAG: “Enable SSO for the CR, BH and FI modules and sync with the BI dashboard.” In this example scenario, documents should be uploaded for RAG, referencing the ambiguous abbreviations.

Attach documents when:

• Requirements do not contain ambiguous terms
• The files contain crisp information about the requirement
• You can define custom prompts and instruct LLMs to extract the context which is relevant for the requirement

Autopilot Chat を使用してテストを生成する方法 (編集モード)

1. 特定の要件のテストを生成するクエリを入力します。

Figure 14. Autopilot Chat - Test Generation query

2. Enter a query indicating which requirement needs to be evaluated. 3. Select Configure and edit the fields: add any documents or select which documents to be included in the analysis, add or edit a prompt, select an AI model, and then either Accept or Reject the operation. 4. If you select Reject, the operation is not performed. If you select Accept, review the results.

Figure 15. Autopilot Chat - Generate Test result review

ドキュメントの検索

Ask questions in natural-language questions to learn how to use Test Manager. Autopilot Chat retrieves the information directly from the official documentation, complete with source links for further reading.

これにより、新しいチームのオンボーディングが大幅に迅速になり、ドキュメント画面と製品画面を切り替える必要がなくなります。

クエリ例:

• 要件を作成するにはどうすればよいですか?
• テスト セットを実行するにはどうすればよいですか?

Figure 16. Autopilot Chat - Documentation Search

古いテストの検出

Use the Find Obsolete Tests functionality to maintain a clean, up-to-date test repository by automatically identifying the outdated or redundant test cases linked to requirements.

To invoke Find Obsolete Tests from Autopilot Chat, reference a requirement by either a name or ID. Autopilot Chat interprets your intent, identifies the relevant requirement, and launches the Find Obsolete Tests tool where you can provide more context.

Autopilot Chat analyzes the relationship between requirements and their associated test cases to detect obsolete test cases caused by:

• 更新または非推奨の要件
• 同じ機能の冗長カバレッジ
• 古いテスト環境または依存関係
• テスト ステップの位置がずれている、またはサポートされていない

古いテスト ケースを見つけると、テスターは関連する実行可能なテスト アセットにのみ集中できるため、テストの精度とメンテナンス効率の両方が向上します。

Figure 17. Autopilot Chat - Find Obsolete Tests

Web リーダーと Web 検索

When a query falls outside the scope of documentation or Autopilot Search, Autopilot Chat automatically switches to web search mode, but only within the context of Test Automation.

Autopilot Chat searches trusted public sources for topics related to testing frameworks, automation strategies, or QA methodologies, and then summarizes the most relevant insights.

ユーザーは、Test Manager のドメイン内にとどまりながら、自動化に焦点を当てた、コンテキストに沿ったガイダンスを利用できます。

クエリ例:

• 自動回帰テストを記述するためのベスト プラクティスは何ですか?
• オートメーションにおいてデータ ドリブンなテスト ケースを設計するにはどうすればよいですか?

MCP サーバーと設定

MCP stands for Model Context Protocol — a modern standard that allows AI systems (like Autopilot Chat) to securely connect to external data sources, tools, and automation workflows.

MCP works as a bridge between your AI assistant and the systems or APIs it needs to interact with. Instead of the AI just generating text responses, MCP lets it take action — such as creating requirements, assigning test cases, or running a UiPath process — all through well-defined, secure interfaces.

MCPサーバーは、AIエージェントがチャットプロンプトで関連するインテントを検出したときに呼び出すことができる一連のツール(または「機能」)をホストします。

各 MCP ツールは API エンドポイントのように動作しますが、AI を認識しているため、チャットは自然言語に基づいて、いつ、どのように呼び出すかを理解します。

• チャットに「この Excel ファイルから最後の 2 つの要件をインポートしてください」などの自然言語による要求を入力します。
• チャットは意図を解釈し、このアクションを実行できる MCP ツールを探します。
• 関連する MCP ツール (例: Create_requirement) がトリガーされ、コンテキストからの入力 (Excel データなど) が取得されます。
• 要件の作成やテスト ケースのリンクなど、アクションが自動的に実行されます。

In addition to the built-in Test Manager MCP server, only the MCP servers created in Orchestrator are supported. To learn more about the MCP servers which can be configured via Orchestrator, refer to Orchestrator - About MCP Servers and Orchestrator - Managing MCP Servers.

Open the Autopilot Chat settings and configure the MCP servers as described in the Autopilot - User interface topic.

MCP サーバーの種類

• The built-in Test Manager MCP server provides the following tools:
  • Assign test cases to requirement
  • テスト セットにテスト ケースを割り当てる
  • オブジェクト ラベルを割り当て
  • Bulk add labels
  • テスト ケースを一括作成する
  • Bulk set custom field values
  • 要件の作成
  • テスト ケースを作成する
  • テスト セットを作成する
  • すべてのラベルを取得
  • Get all object labels by object ID
  • Get assigned test case IDs for requirement
  • Get custom field label values
  • Get custom field text values
  • 要件を取得する
  • テスト ケースを取得する
  • テスト セットを取得する
  • Get test steps for test case
  • テスト実行を取得する
  • Get test case logs by test execution
  • Search objects by custom field value
  • 要件へのテスト ケースの割り当てを解除
  • テスト セットへのテスト ケースの割り当て解除
• The custom MCP servers created via Orchestrator expose your own processes, automations, or APIs — such as a workflow that generates test data or creates accounts in a third-party app.

Test Manager MCP サーバーへのリンク

Test Manager MCP サーバーは、Autopilot チャットの設定で設定できます。

1. Autopilot チャットの設定を開きます。
2. Under MCP Servers, enter a Test Manager server URL which observes this pattern: https://{yourcloudaccount.com}/{ACCOUNT_NAME}/{TENANT_NAME}/agenthub_/mcpfps/testmanager. Add your cloud URL, account and tenant name in the relevant placeholders. Example: https://cloud.uipath.com/TestCloudAccount/DefaultTenant/agenthub_/mcpfps/testmanager
3. Select Add and Save.