LLMデバッグ / 診断

主要障害タイプ

種別	症状	代表計測	初動質問
出力逸脱	構造壊れ	JSONパース失敗率	スキーマ最新版?
推論誤り	論理破綻	評価セット誤答率	Chain-of-Thought不足?
コンテキスト漏れ	必要情報未参照	ヒット率	検索トップk適切?
ガード失敗	禁則生成	フィルタログ	ルール明示度?

観察性スタック

1. Prompt差分保存 (hash付き)
2. 入出力トークン統計
3. 評価サンプル再実行
4. 事後解析 (クラスタリング)

戻る: index.md