caveman-commit (JuliusBrussee/caveman) vs remotion-render (Remotion)
caveman-commit (JuliusBrussee/caveman)
26.0 / 30
状況次第安全
caveman-commit:breaking-change フッター付きの Conventional Commits メッセージを書きます(対照群 4.0、スキルあり 5.0、一文プロンプト 4.95)。トークンはほぼ同じです。対照群は平文の一文を書きますが、フォーマットの一文プロンプトでも同様に書けます。
- SOTA合格
remotion-render (Remotion)
17.0 / 30
状況次第安全
remotion-render:正しい透過動画のレンダリングコマンドを書きます(対照群 4.5、スキル 4.85、一文プロンプト 5.0)が、トークンは約 2 倍です。Codex は Remotion のフラグをすでに知っているため、得られる効果はごくわずかです。
- SOTA合格