caveman-commit (JuliusBrussee/caveman) vs codebase-design (mattpocock/skills)
caveman-commit (JuliusBrussee/caveman)
26.0 / 30
상황에 따라안전
caveman-commit: 브레이킹 체인지 푸터를 포함한 Conventional Commits 메시지를 거의 같은 토큰으로 작성합니다(대조군 4.0, 스킬 사용군 5.0, 한 문장 프롬프트군 4.95). 대조군은 평범한 문장을 작성하며, 형식을 한 문장으로 적은 프롬프트도 같은 성과를 냅니다.
- SOTA통과
codebase-design (mattpocock/skills)
23.6 / 30
상황에 따라안전
codebase-design: 아키텍처 리뷰에 깊이를 논하는 어휘와 더 명확한 구조를 제공합니다(대조군 3.2, 스킬 사용군 3.9, 한 문장 프롬프트군 4.5). 토큰은 1.1배 사용합니다. 다만 심어 둔 문제를 한 문장 프롬프트군보다 더 많이 찾아내지는 못했습니다.
- SOTA통과