インスピレーションと洞察から生成されました 5 ソースから

img6

img7

img8

img9

img10

img11

はじめに

  • Activity.Textの内容: Activity.Textには、ユーザーが直前に入力したテキストが格納されます。

  • 上書きの問題: 直前に「役に立ちましたか？」と聞いて、そこで［はい］または［いいえ］と返信した場合、Activity.Textはその回答で上書きされます。

  • 保存の必要性: 最初に入力した質問を保持するためには、Activity.Textの内容を別の変数に保存しておく必要があります。

  • 生成AIの回答: 生成AIの回答は、Answer変数に格納され、Power Automateのフローで利用されます。

  • データの収集: Copilot Studioは、ユーザーのプロンプトやシステムの応答を収集し、機能の品質評価と改善に活用します。

生成型回答の仕組み [1]

  • 生成型回答の定義: ユーザーがコパイロットに構成済みトピックが含まれていない質問をすると、コパイロットは選択したソースから関連コンテンツを検索します。

  • 情報の要約: コパイロットは生成AIを使用して、検索した情報を応答に要約し、ユーザーに返します。

  • データソース: 公開Webサイト、SharePoint、PDFファイルなどのカスタムデータソースが利用されます。

  • 推論の拡張: 2024年9月以降、画像や表形式のデータについても推論が可能になります。

img6

データ収集と利用 [1]

  • データ収集の内容: ユーザープロンプト、システムの応答、提供されたフィードバックを収集します。

  • 利用目的: 機能の品質評価と改善のためにデータを活用します。

  • プレビュー規約: 収集されるデータの詳細については、プレビュー規約を参照してください。

  • フィードバックの提供: 生成された応答に対する満足度についてフィードバックを提供できます。

生成AIの制限事項 [1]

  • 言語の一貫性: サポート言語以外では生成される回答に一貫性がなくなる可能性があります。

  • 使用制限: 機能は使用制限またはキャパシティ調整の対象となる場合があります。

  • 正確性の問題: システムは正確性チェックを実行しないため、不正確な情報が含まれる可能性があります。

  • 攻撃的な応答の除外: 無関係で攻撃的な応答を除外するための緩和策が実装されています。

改善アクション [2]

  • 改善アプリの利用: Copilot改善アプリは、Dataverseに保存されているCopilotの実行履歴を抽出し、改善活動につなげるためのアプリです。

  • 会話履歴の表示: ConversationTranscriptテーブルに保存された会話履歴を表示します。

  • データ収集の自動化: アプリを環境にインポートすると、データが自動的に収集されます。

  • 改善活動の可視化: 改善対象のログに対して、担当者の割当や改善アクションにつなげることができます。

img6

テストと評価 [1]

  • テストの実施: 生成型回答は、手動で厳選された質問と回答のデータセットに基づいて評価されます。

  • 評価指標: 攻撃的で悪意のあるプロンプトと応答について、テストスイートを拡張するための自動セッションと専用の手動セッションを通じて評価されます。

  • フィードバックの収集: コパイロットを公開する前にテストしてレビューし、ユーザーからフィードバックを収集することが推奨されます。

  • 改善のためのデータ: 提供されたフィードバックは、システムの品質を向上させるために使用されます。

img6

img7

関連動画

<br><br>

<div class="-md-ext-youtube-widget"> { "title": "\u4e00\u77ac\u3067\u8cc7\u6599\u5b8c\u6210\uff01Copilot\u3068Word\u306eAI\u30d1\u30ef\u30fc\u6d3b\u7528\u8853", "link": "https://www.youtube.com/watch?v=C2KJQxrNwhE", "channel": { "name": ""}, "published_date": "Feb 21, 2024", "length": "0:59" }</div>

<div class="-md-ext-youtube-widget"> { "title": "\u3010AI\u00d7\u30d3\u30b8\u30cd\u30b9\u6d3b\u7528\u8853\u3011Copilot\u306eChatGPT-4\u304c\u3042\u306a\u305f\u306e\u6587\u7ae0\u3092 ...", "link": "https://www.youtube.com/watch?v=VEwLFcbn_yg&pp=ygUPI2Fp5paH56ug5L2c5oiQ", "channel": { "name": ""}, "published_date": "Apr 7, 2023", "length": "16:47" }</div>