Claude 3.7 Sonnet
Anthropic 모델 · 2025년 2월 24일 공개. 독립 벤치마크 점수, 종합 지수, 사람 투표 순위와 개발사 발표 점수를 그래프로 정리했습니다.
- 개발
- Anthropic
- 공개일
- 이용 방식
- API 제공
- 학습 연산량
- 3.4×10²⁵ FLOPEpoch AI 추정치
- 종합 능력 지수(ECI)
- 141.2신뢰구간 138.8~142.7
- Arena 점수(사람 투표)
- 1314238위 · 투표 38,162표
주요 반응
하이브리드 추론 모델과 Claude Code 프리뷰로 주목받았고, Aider 폴리글랏 벤치마크 1위 등 코딩 성능에 호평이 이어졌다. 다만 3.5보다 요청 범위를 넘어 코드를 고치고 지침을 무시한다는 개발자 불만과 Claude Code 비용 부담, 개선 폭이 점진적이라는 평가도 있었다.
- 호평개발자 Simon Willison이 정리한 Aider 폴리글랏 리더보드에서 Claude 3.7 Sonnet은 사고 토큰 3만 2천 개 설정으로 64.9%를 기록해 1위였고, 전체 실행 비용은 $36.83으로 o1-high($186.5)보다 낮았다.[1]
- 엇갈림출시 보도에서는 Anthropic이 첫 하이브리드 추론 모델이라 소개한 점과 터미널 기반 Claude Code 프리뷰가 주목받았지만, 3.5가 이미 최상급 코딩 모델이어서 향상은 점진적이고 수치도 대부분 자체 결과라는 단서가 붙었다.[2]
- 엇갈림분석 글은 SWE-bench 70.3%(맞춤 스캐폴딩 기준)와 매우 긍정적인 초기 리뷰를 전했으나, 가격이 Gemini 2.0 Pro·o3-mini보다 비싸고 수치 대부분이 자체 발표라는 점을 한계로 꼽았다.[3]
- 비판개발자 커뮤니티에서는 3.7이 요청하지 않은 코드까지 고치고 규칙과 린터 경고를 무시하며 과하게 복잡한 코드를 낸다는 불만이 나와 일상 코딩에는 3.5를 택하는 이도 있었다. 코드 품질을 옹호하는 의견도 있었다.[4][5]
- 비판개발자 커뮤니티에서는 일부 이용자가 Claude Code 비용이 시간당 약 100달러에 달할 수 있다고 우려했고, 구독 이용자가 작업 도중 사용 한도에 걸린다는 불만과 정액제 요구도 나왔다.[6]
반응 출처 6개
- aider polyglot leaderboard · simonwillison.net
- Anthropic Unveils Claude 3.7 Sonnet and Claude Code · maginative.com
- Claude 3.7 Sonnet Unleashed · patmcguinness.substack.com
- Claude 3.7 vs. 3.5 in Cursor - A step in the wrong direction? · forum.cursor.com
- Claude 3.7 vs 3.5 Sonnet for Coding - Which One Should You Use? · prompt.16x.engineer
- Claude 3.7 Sonnet and Claude Code (Hacker News) · news.ycombinator.com
출시 기사·리뷰·전문가 평가·개발자 커뮤니티 토론을 LUCAS AI News가 읽고 요약했습니다(2026-10-11 기준). 원문 표현은 옮기지 않았으니 자세한 내용은 출처에서 확인하세요.
영역별 강점
같은 시험을 치른 모델 가운데 어디쯤인지(백분위)를 영역별로 평균했습니다. 바깥일수록 상위권이고, 점수가 없는 영역은 가운데 빈 점으로 표시합니다.
Anthropic 모델 흐름
큰 점이 이 모델입니다. 선은 그때까지의 최고 기록입니다.
독립 벤치마크 점수
- GPQA Diamond과학79.7%
94개 모델 중 47위. 대학원 수준의 생물·물리·화학 객관식 문제 198개. 검색으로 답을 찾기 어렵게 만든 문항이다. 오차 ±2.6%.
- MATH Level 5수학91.2%
45개 모델 중 12위. MATH 데이터셋에서 가장 어려운 단계. AMC 10·12, AIME 같은 경시대회 문제다. 오차 ±0.8%.
- OTIS 모의 AIME수학57.8%
91개 모델 중 61위. OTIS의 경시대회형 수학 문제 45개. MATH Level 5보다 어렵고 FrontierMath보다 쉽다. 오차 ±7.4%.
- FrontierMath(2025판)수학4.1%
46개 모델 중 35위. 연구 수준의 매우 어려운 수학 문제(비공개). 2026년 6월 새 판으로 바뀌기 전 기록이다. 오차 ±1.2%.
- SWE-bench Verified코딩61%
23개 모델 중 20위. 실제 오픈소스 저장소의 이슈를 고치는 과제. 사람이 검증한 500개 문항이다. 오차 ±2.2%.
- Aider Polyglot코딩64.9%
29개 모델 중 10위. C++·Go·Java·JavaScript·Python·Rust의 어려운 연습 문제 225개를 코드 편집으로 푸는 시험(두 번째 시도까지 통과율). (Aider 측정)
세로선은 무작위로 찍었을 때 기대되는 점수입니다. 같은 벤치마크라도 평가 방식과 설정에 따라 점수가 달라지므로 개발사 발표 수치와 다를 수 있습니다.
함께 볼 모델
- Claude Opus 4 Anthropic · 2025-05-22
- Claude Sonnet 4 Anthropic · 2025-05-22
- GPT-4.5 OpenAI · 2025-02-27
Gemini 2.0 Pro Google · 2025-02-05