hyperframes-core (HeyGen HyperFrames) vs code-review (Matt Pocock)
hyperframes-core (HeyGen HyperFrames)
25.8 / 30
상황에 따라안전
hyperframes-core: 스킬을 쓰면 Codex가 HyperFrames 컴포지션을 훨씬 자주 올바르게 만들고(대조군 4.1, 스킬 4.9, 한 문장 4.6) 토큰도 덜 씁니다(대조군의 0.48배). 다만 이 스킬은 HeyGen 저장소에서 제거되었습니다
- SOTA통과
code-review (Matt Pocock)
23.5 / 30
상황에 따라안전
Matt Pocock의 code-review: 리뷰 과제 3개에서 스킬 없는 Codex와 재현율이 같고 토큰은 1.5배 사용합니다
- SOTA통과