Prompt Quality Score
カテゴリ evaluation · 確認日 2026-08-11
要点
Prompt Quality Score(PQS)は、Prompt改善を比較可能にするための指標セット。単一の総合点が使いにくければ、Dashboard形式でよい。
定義
複数Seedにおける指示忠実度・安定性・採用可能性を、共通Rubricで要約した評価。
評価軸
- Prompt Adherence
- Character Consistency
- Composition Accuracy
- Anatomy
- Artifact Control
- Visual Quality
- Seed Stability
- Adoption Rate
採点方法
0〜5のRubric。生成前に基準を固定。失敗を分母から外さない。
参考の総合値例:
PQS_prod = mean(overall) × max(0, 1 − std/2) × (0.5 + 0.5 × adoption_rate)
ただし掛け算が常に最適とは限らない。mean / min / adoption を併記する。
注意事項
- 5 Seedで統計的有意差を主張しない
- AI自動採点を客観の同義語にしない
- 対象軸(光だけ等)と総合を混同しない
限界
- 人間採点のばらつき
- シーン依存
- 回顧適用時は当時ログの粒度に依存