“Opus 5.5가 나왔는데, 갈아타도 될까?” 벤치마크 수치를 봐도 내 메일이나 견적 작업이 나아질지는 알 수 없습니다. ChatGPT나 Gemini의 새 버전이 나와도 같은 고민이 생깁니다.
비교해 읽어 보면, 길고 공들인 쪽이 더 좋아 보입니다. 하지만 임의로 덧붙여진 한 문장일수록, 공들인 문장 사이에 파묻혀 놓치기 쉽습니다.
Opus 5와 5.5에 같은 문제를 내어 비교해 봤습니다. 속도는 측정된 4문제 모두 5.5가 빨랐습니다. 하지만 차이가 난 것은 다른 부분이었습니 다.
관건은 평소 업무에 ‘함정’ 하나를 심어 놓은 문제입니다. 안내 메일이라면 날짜와 요일의 불일치, 가계부라면 덧셈 계산입니다.
게다가 '알아차렸는지'만으로는 측정할 수 없습니다. 요일이 어긋난 점을 지적하고도, 둘 다 메일 본문의 요일은 고치지 않았습니다. 어디까지 확인할지를 과제와 표로 정리했습니다.
출처: note 원문
번역: Gemma 3(.44) 초벌 + 교정 4청크
원문 보기 | 출처: note.com