ドキュメントを参照する
Haomai Technology AI Brain

概念実証(PoC)の受入評価ガイド

概念実証では、システムがどこで役に立ち、どこで失敗するかを明らかにします。同じデータ、質問、相互に合意した基準を使用して、両方のチームがデモンストレーションを繰り返して結果を検証できるようにします。

テクニカルガイド · 11月 2026読了目安3分

開始する前にテスト条件を修正してください

参加者、ビジネス上の質問、参考回答、データのスナップショットについて同意します。製品とモデルのバージョン、展開環境、アクセス ID、データソースの範囲を記録します。自然言語による各質問を、そのビジネス上の意味とともに正確に保存し、テスト全体を通してターゲットの一貫性を保ちます。

どのエラーが起動を妨げるか、どの違いが許容されるかを事前に合意してください。金額に対して指定した丸め許容範囲を許可することもできます。不正な開示、不正確な期間、または欠落データを事実として扱う場合は、通常、別個の処理が必要です。両方のプロジェクトチームが実際のしきい値を設定します。

システムが応答できないケースも含める

テストカテゴリー何を観察すべきか
日常的な質問正確さ、単位、時代、出典
追加の質問条件は保持され、変更は明示的に要求されます
データが欠落していますギャップと次のステップの正確な説明
範囲外のアクセス許可されていないコンテンツの開示禁止
時代遅れの資料バージョンと鮮度の制限の認識
レポートのエクスポート開いて参照を確認できる完全なファイル

各質問の受諾記録を保管する

  1. 質問番号、文言、テストの内容、入力範囲、合意された期待値を記録します。
  2. 生の出力とサポートソースを最終スクリーンショットと一緒に保持します。
  3. 開始時刻と終了時刻を記録します。クエリ、キャッシュ、生成の各段階を区別します。
  4. 各テストを合格、部分合格、または不合格としてマークします。相違点と再テストの条件について説明します。
  5. 構成、定義、またはバージョンを変更した後、同じ質問を再実行し、両方の結果セットを保持します。

調査結果を使用して発売の決定を下す

短いライブデモンストレーションは、インタラクションと検証可能性を確認するのに適しています。起動に必要なデータのクリーニング、統合、またはセキュリティ評価のすべてをカバーしているわけではありません。パイロット結果に対して所有者、範囲、および受け入れ基準を割り当ててから、回復、アクセス取り消し、および例外処理をテストします。

このテストで確認できた用途、人による確認が必要なケース、テストの対象外だった機能を短くまとめます。漠然とした好印象を残すより、何が基準を満たしたかを記録するほうが、次のチームの検討に役立ちます。

「権限」「データソース」「製造」「API」などで検索できます。