あなたは薬局向けの音声エージェントを開発しています。音声による質問を受け付け、合成音声で応答し、一般的な音声モデルでは聞き間違えやすい専門的な医薬品名を正確に認識する必要があります。どの機能を構成すべきでしょうか?
Microsoft Foundry エージェントが、以下の内容を含む Azure Search インデックスからの応答を解析します。
- 商品名と商品コードを検索できるテキストフィールド
- 製品説明の埋め込みを格納するベクトル場
ユーザーが以下の方法でインデックスを照会できるようにする必要があります。
- 正確な製品名またはコード
- 製品の自然言語による説明
何を設定すればよいですか?
App1 という名前のアプリケーションがあり、Foundry Tools の Azure Speech を使用してライブ通話を文字起こししています。
トランスクリプトには、英語とスペイン語の両方が含まれていることがよくあります。App1 は、各セグメントを Foundry Tools の Azure Translator に送信し、別の言語に翻訳します。
場合によっては、複数の言語が混在する部分では、翻訳が不完全または不正確になることがあります。
翻訳エラーを減らす必要があります。解決策は、文字起こし全体が確実に正しく翻訳されることを保証するものでなければなりません。
翻訳ツールにセグメントを送信する前に、何をすべきですか?
エージェントを含む Microsoft Foundry プロジェクトがあります。
エージェントは、データ取得ツールとしてAzure AI Searchを使用します。
エージェントがドキュメント内および埋め込み画像内のテキストに基づいて応答を生成できるように、PDFをAzure AI Searchインデックスに取り込む予定です。
利用者は、出典ファイルへのリンクを含む引用を求めている。
インデックス作成の際には、画像が内蔵の光学文字認識(OCR)機能の入力として使用できる構造に抽出されるようにする必要があります。
どのインデックス作成方法を採用すべきでしょうか?
あなたは、一般公開されているウェブサイトからユーザーが生成した動画やテキストを処理する新しい販売システムを開発しています。
あなたは、ユーザーのデータが販売システムによって処理されたことをユーザーに通知する予定です。
これは、責任あるAIの原則のうち、どれを満たすのに役立ちますか?
エージェントを含む Microsoft Foundry プロジェクトがあります。
エージェントは、表と埋め込まれたQRコードを含む、スキャンされたPDF形式の仕入先請求書を取り込みます。
エージェントは、抽出された出力においてPDFのレイアウトを保持し、後続の処理でセクションや表を参照できるようにする必要があります。
Foundry Tools で Azure Content Understanding を呼び出す予定です。
言語モデルの展開を必要とせずに、コンテンツとレイアウト要素を抽出し、QRコードを検出する必要があります。
どの内蔵アナライザーを使用すべきですか?
ホットスポットに関する質問
App1という名前のPythonアプリケーションがあり、それがProject1という名前のMicrosoft Foundryプロジェクトと統合されています。
App1が以下の要件を満たしていることを確認する必要があります。
- Microsoft Entra マネージド ID を使用して認証します
- Azure OpenAI Responses API を使用して、デプロイ済みのモデルにプロンプトを送信します。Python コードをどのように完成させるべきですか?回答するには、回答領域で適切なオプションを選択してください。
注:正解ごとに1ポイントが加算されます。


あなたは生産ラインを備えた工場を所有しています。
生産ラインで作業する従業員の動きを検知・追跡するために、ビデオ映像を分析するソリューションを開発する必要があります。
ソリューションにはどのサービスを含めるべきでしょうか?
顧客サポートWebアプリで使用されるプロンプトエージェントを含むMicrosoft Foundryプロジェクトがあります。
エージェントは、Foundryポータル内で実行されていないPythonサービスから呼び出されます。
エージェント実行全体にわたる遅延の異常や例外を捕捉するために、エンドツーエンドのトレースを実装する必要があります。
どの2つの部品を使用すればよいでしょうか?それぞれの正解は完全な解決策を示しています。
注:正解ごとに1ポイントが加算されます。
事例研究1 - コントソ社
概要
会社情報
Contoso, Ltdは、Microsoft Foundryを使用して生成型AIおよびエージェントベースのソリューションを構築、展開、管理する多国籍小売企業です。
既存の環境
アイデンティティ環境
Contosoは、エージェントが組織のリソースやサービスにアクセスできるようにするID管理、認証、認可機能にMicrosoft Entra IDを使用しています。
Contosoは最近、既存のAIソリューションを最適化および保守するために、Agent1Dev Teamという新しいAIエンジニアリングチームを結成しました。
チームは、ソリューションアーキテクト、DevOpsエンジニア、セキュリティエンジニアと協力して、AIアプリケーションの設計、実装、監視、およびセキュリティ対策を行います。
Contosoには、AIソリューションの導入前にその妥当性を検証する「Agent1Test Team」というチームも存在する。
生成環境
Contosoは、Project1とProject2という名前の2つのプロジェクトを含むMicrosoft Foundry環境を構築しています。
プロジェクト1
Project1には、顧客からの製品に関する問い合わせやトラブルシューティングの依頼に対応する、Agent1という名前のカスタマーサポートエージェントが含まれています。
Agent1には以下の設定があります。
- Agent1は基本モデルのデプロイメントを使用します。
安全性評価パイプラインは有効になっていません。
ツール呼び出し承認ワークフローは有効になっていません。
会話メモリの制約は設定されていません。
Agent1は、デジタルサポートチャネルを使用して顧客とやり取りし、Contoso製品に関する一般的な質問に回答します。
Project1は、欧州連合(EU)域内にあるAzureリージョンにデプロイされています。
Agent1開発チームは、Project1を使用してAgent1の最適化と保守を行います。
プロジェクト2
Project2には、既に展開済みの動画生成モデルが含まれています。Contoso社のマーケティング部門はProject2にアクセスでき、このモデルを用いて動画制作ソリューションを開発する予定です。
解決策の開発は未完了です。
データ環境
Contosoは、AIアプリケーションをサポートするAzureリソースに製品関連情報を保存します。
Azure環境には、Contoso製品の製品詳細シートを保存するstorage1という名前のAzure Blob Storageアカウントが含まれています。
製品仕様書には、仕様、機能説明、および製品サポート情報が記載されており、エージェント1はこれらを使用して顧客からの質問に回答できます。製品仕様書はPDF形式で保存されます。
問題提起
コントソ氏は以下の問題点を指摘している。
- Agent1はContoso製品に関する一般的な知識しか持っていません。
- Agent1との最近のチャットのやり取りについて、感情分析が行われました。分析結果はまだ処理されていません。
- Agent1は、顧客からの質問に回答する際に、storage1に保存されている製品シートの詳細な製品情報を使用しません。
コントソ社の財務部門によると、仕入先からの請求書は、契約書に定められた条件と一致していることを確認するため、手作業で精査する必要があるとのことです。請求書には表やロゴ、様々なレイアウトが含まれているため、一貫した処理が困難です。
要件
計画されている変更
コントソ氏は以下の変更を実施する予定です。
プロジェクト1向けに、仕入先請求書の視覚的なレイアウトとテキスト内容の両方を評価することで請求書を分析し、仕入先との契約条件と照合できるソリューションを実装する。
- Agent1で使用される基本モデルのデプロイメントを更新し、モデルのバージョンを標準化して、継続性と一貫した応答を確保します。
- Agent1がstorage1に保存されている製品シートから詳細な製品情報を取得して使用できるようにします。
- Agent1が顧客からの質問に回答するために使用できる製品シートのインデックス作成ソリューションを実装する。
・動画制作ソリューションの開発を完了する。
技術要件
Contoso社は、以下の技術要件を特定しました。
- Agent1で使用されるモデル展開は、拡張性が高く、高スループットの生成型AIワークロードをサポートし、予約済みのスループット容量を必要とせずに、変動する顧客サポートトラフィックを処理するために動的に拡張する必要があります。
- 製品シートは、セマンティック検索とベクトル検索を可能にするインデックス作成パイプラインを使用して処理され、Agent1が関連する製品情報を取得できるようにする必要があります。
製品シートの情報に基づいて生成される回答は、関連性があり、完全かつ正確でなければなりません。
- エージェント1は、製品シートを使用して、製品の詳細に関する自然言語の質問に答えることができなければなりません。
- エージェント1が使用するモデルのバージョンは、安定した応答を確保するために一貫している必要があります。
- モデルによって処理されるデータは、EU域内に留まらなければならない。
セキュリティおよびコンプライアンス要件
Contosoは、以下のセキュリティおよびコンプライアンス要件を特定しています。
- APIキーを使用してFoundryにデプロイされたモデルにアクセスしてはなりません。
Azureリソースへのアクセスは、最小権限の原則に従う必要があります。
Contosoの開発者は、Microsoft Entra認証を使用してMicrosoft Foundryリソースへの認証を行う必要があります。
- Project1へのアクセス権は、SC_Agent1_Devという名前のセキュリティグループを使用して、Agent1Devチームのメンバーに割り当てる必要があります。
- Project1へのアクセス権は、SC_Agent1_Testという名前のセキュリティグループを使用して、Agent1Testチームのメンバーに割り当てる必要があります。
- Agent1は、顧客データを含む文書がストレージ1の製品シートリポジトリに誤って追加された場合でも、顧客情報を決して開示してはならない。
製品仕様書には、テキストが埋め込まれた画像が含まれている場合があります。Agent1は、画像内に隠されている可能性のある悪意のある命令から保護される必要があります。
ビジネス要件
Contosoは以下のビジネス要件を特定しました。
- Agent1とやり取りするユーザーは、今後のやり取りにおいてパーソナライズされた体験を得る必要があり、そのためにはAgent1が会話の文脈を保持し、過去のやり取りから関連情報を想起できる機能が必要です。
- エージェント1は、Contosoが販売する製品に関する質問のみに回答しなければならない。
Agent1は、Contoso製品に関する顧客からの質問にのみ回答するように設定する必要があります。
解決策はビジネス要件を満たす必要があります。あなたは何をすべきでしょうか?
法務チームは、非構造化契約書から条項と推論フィールドを抽出する必要があります。必須フィールドの1つは契約終了日ですが、これは明示的に記載されていないため、開始日と契約期間から導き出す必要があります。チームにはラベル付きのトレーニングデータがありません。どのツールが最適でしょうか?
エージェントを含む Microsoft Foundry プロジェクトがあります。このエージェントは、取得したポリシー文書から概要を生成します。
応答の完全性を改善する必要があります。この解決策は、応答が返される前に、アプリケーションコードのロジックに実装されなければなりません。
あなたはどうすべきでしょうか?
あなたは、Azure AI を使用してユーザーが性的に露骨な画像を共有することを防止する画像共有アプリを開発しています。
不適切な画像が正しく識別されるようにする必要があります。また、開発の手間を最小限に抑えるソリューションでなければなりません。
何を使うべきでしょうか?
Azure AIエージェントソリューションをお持ちです。
あなたは、ユーザー向けにデータを分析・要約し、データに基づいた推奨事項を生成するエージェントベースのアプリケーション「App1」を開発する予定です。App1は、技術的な知識を持たないビジネスユーザーが使用するアプリケーションであり、新たな予期せぬビジネス上の課題に適応し、時間の経過とともにパフォーマンスを向上させる必要があります。
App1で使用するエージェントの種類を特定する必要があります。ソリューションは以下の要件を満たす必要があります。
- ユーザーに基づいてエージェントのパフォーマンスを時間とともに適応および改善する
フィードバック。
ユーザーが情報に基づいた意思決定を行えるよう、個別の推奨事項を提供する。
決定。
アプリのパフォーマンスを最大限に高める。
どのタイプのエージェントを特定すべきでしょうか?