caveman-review (JuliusBrussee/caveman) vs pdf (Anthropic)
caveman-review (JuliusBrussee/caveman)
25.1 / 30
상황에 따라안전
caveman-review: 코드 리뷰를 발견 사항별 짧은 한 줄 중심으로 바꾸며 토큰은 같은 수준입니다(대조군 3.3, 스킬 사용군 4.2, 한 문장 프롬프트군 4.8). 다만 스킬이 규정한 L<line> 줄 형식은 일부 실행에서만 지켜졌고, 형식을 한 문장으로 적은 프롬프트가 더 높은 점수를 받습니다.
- SOTA통과
pdf (Anthropic)
20.6 / 30
상황에 따라안전
pdf 스킬 리뷰: 우리 과제에서는 향상이 없었고 비용은 두 배였습니다
- SOTA통과