Prompt Quality Score

カテゴリ evaluation · 確認日 2026-08-11

要点

Prompt Quality Score(PQS)は、Prompt改善を比較可能にするための指標セット。単一の総合点が使いにくければ、Dashboard形式でよい。

定義

複数Seedにおける指示忠実度・安定性・採用可能性を、共通Rubricで要約した評価。

評価軸

  • Prompt Adherence
  • Character Consistency
  • Composition Accuracy
  • Anatomy
  • Artifact Control
  • Visual Quality
  • Seed Stability
  • Adoption Rate

採点方法

0〜5のRubric。生成前に基準を固定。失敗を分母から外さない。

参考の総合値例:

PQS_prod = mean(overall) × max(0, 1 − std/2) × (0.5 + 0.5 × adoption_rate)

ただし掛け算が常に最適とは限らない。mean / min / adoption を併記する。

注意事項

  • 5 Seedで統計的有意差を主張しない
  • AI自動採点を客観の同義語にしない
  • 対象軸(光だけ等)と総合を混同しない

限界

  • 人間採点のばらつき
  • シーン依存
  • 回顧適用時は当時ログの粒度に依存

関連Making

辞書の次に手順が必要なとき

Knowledge は確認項目の辞書です。同じ項目で毎回止まるなら、Making の判断ログや、チェックリスト/テンプレ側で一連の流れにした方が早いことがあります。

まずはこのページのチェックだけ試し、抜けが同じ箇所に集まるときだけ続きを見てください。

実践キット・Shop を見る