caveman-commit (JuliusBrussee/caveman) vs pr (mattpocock/skills)
caveman-commit (JuliusBrussee/caveman)
26.0 / 30
状況次第安全
caveman-commit:breaking-change フッター付きの Conventional Commits メッセージを書きます(対照群 4.0、スキルあり 5.0、一文プロンプト 4.95)。トークンはほぼ同じです。対照群は平文の一文を書きますが、フォーマットの一文プロンプトでも同様に書けます。
- SOTA合格
pr (mattpocock/skills)
29.0 / 30
推奨安全
pr:純粋なフォーマットのスキルです。対照群は3セクションのPR本文を一切生成せず(1.7/5)、スキルと一文プロンプトはどちらも生成します(5.0 と 4.95)。追加トークンはありません。
- SOTA合格