4生成 AI の品質保証と可観測性
- 4.1生成 AI アプリ・エージェントの評価と検証
テストデータセットとデータマッピングの作成、AI 品質メトリクス(根拠性/関連性/一貫性/流暢性)、有害コンテンツ検出のためのリスクと安全性の評価、そして組み込み/カスタムのメトリクスによる自動評価ワークフローの構成を理解します。
- 4.2生成 AI アプリ・エージェントの可観測性
Foundry での継続的な監視、パフォーマンスメトリクス(レイテンシ・スループット・応答時間)の監視、コストメトリクス(トークン消費量・リソース使用量)の追跡と最適化、そして本番のトラブルシュートのための詳細なログ・トレース・デバッグの構成を理解します。

