code-review (Matt Pocock) vs theme-factory (Anthropic)
code-review (Matt Pocock)
23.5 / 30
상황에 따라안전
Matt Pocock의 code-review: 리뷰 과제 3개에서 스킬 없는 Codex와 재현율이 같고 토큰은 1.5배 사용합니다
- SOTA통과
theme-factory (Anthropic)
27.7 / 30
추천안전
theme-factory: Codex는 이미 이름이 붙은 테마 두 가지를 외우고 있지만(스킬 없이 5.0), '프리셋 고르기'는 스킬만 할 수 있습니다. 해당 과제에서 5.0 대 0.0이고 토큰도 더 적게 씁니다(0.66배).
- SOTA통과