Sonnet 5.5와 Opus 5.5의 캐시 읽기 가격은 동일함 대신에 나머지(입력/출력/캐시쓰기)는 전부 2배 차이 그래서 턴수가 짧으면 소넷이 확실하게 절감이 되긴 하지만 (캐시 읽기 비중 낮음) 초장기 작업에서는 그 차이가 좁혀짐 (캐시 읽기 비중이 전체 읽기의 95% 이상이 됨) ==== 앤트로픽 공식 블로그에서는 이렇게 써져있었음 "On several evaluations, Sonnet 5.5 at Max effort even performs comparably to Opus 5.5. However, benchmark scores capture only one facet of a model’s capabilities; in our own testing, and in that of external testers, Opus 5.5 remains clearly stronger at complex, open-ended work requiring sustained judgment." "몇몇 평가에서는 Max 설정의 Sonnet 5.5가 Opus 5.5에 버금가는 성능을 보이기도 한다. 하지만 벤치마크 점수는 모델 역량의 한 단면일 뿐이며, 내부 테스트와 외부 테스터의 테스트 모두에서 오랜 판단이 필요한 복잡하고 열린 작업에는 여전히 Opus 5.5가 확실히 더 강했다." 이제야 소넷이 진정한 잡부 역할을 맡을수 있어보이는거 같기도 하고
📰
이슈
-
·
-
·
약 1분 분량
·
0
|
댓글 0
댓글을 작성하려면 회원 로그인이 필요합니다.