caveman-review (JuliusBrussee/caveman) vs remotion-render (Remotion)
caveman-review (JuliusBrussee/caveman)
25.1 / 30
状況次第安全
caveman-review:コードレビューを、指摘ごとの短い行へと導きます(対照群 3.3、スキルあり 4.2、一文プロンプト 4.8)。トークンは同じですが、スキル自身の L<line> 行フォーマットが守られたのは一部の実行のみでした。フォーマットの一文プロンプトの方が高得点です。
- SOTA合格
remotion-render (Remotion)
17.0 / 30
状況次第安全
remotion-render:正しい透過動画のレンダリングコマンドを書きます(対照群 4.5、スキル 4.85、一文プロンプト 5.0)が、トークンは約 2 倍です。Codex は Remotion のフラグをすでに知っているため、得られる効果はごくわずかです。
- SOTA合格