AI의 변화, 근거와 맥락까지.AI NEWS & CONTEXT
AI 모델 · Anthropic

Claude Opus 4.1

Anthropic 모델 · 2025년 8월 5일 공개. 독립 벤치마크 점수, 종합 지수, 사람 투표 순위와 개발사 발표 점수를 그래프로 정리했습니다.

개발
Anthropic
공개일
이용 방식
API 제공
종합 능력 지수(ECI)
144.1신뢰구간 141.7~146.0
Arena 점수(사람 투표)
1419117위 · 투표 49,555표

비슷한 모델과 비교하기사전에서 Claude 알아보기

영역별 강점

과학수학코딩지식추론공간·학습Claude Opus 4.1Claude Opus 4.1 · 과학: 46백분위Claude Opus 4.1 · 수학: 26백분위Claude Opus 4.1 · 코딩: 45백분위Claude Opus 4.1 · 지식: 점수 없음Claude Opus 4.1 · 추론: 25백분위Claude Opus 4.1 · 공간·학습: 10백분위

같은 시험을 치른 모델 가운데 어디쯤인지(백분위)를 영역별로 평균했습니다. 바깥일수록 상위권이고, 점수가 없는 영역은 가운데 빈 점으로 표시합니다.

Anthropic 모델 흐름

큰 점이 이 모델입니다. 선은 그때까지의 최고 기록입니다.

독립 벤치마크 점수

  • GPQA Diamond과학77.3%

    94개 모델 중 51위. 대학원 수준의 생물·물리·화학 객관식 문제 198개. 검색으로 답을 찾기 어렵게 만든 문항이다. 오차 ±3%.

  • OTIS 모의 AIME수학68.9%

    91개 모델 중 56위. OTIS의 경시대회형 수학 문제 45개. MATH Level 5보다 어렵고 FrontierMath보다 쉽다. 오차 ±7%.

  • 46개 모델 중 28위. 연구 수준의 매우 어려운 수학 문제(비공개). 2026년 6월 새 판으로 바뀌기 전 기록이다. 오차 ±1.5%.

  • 57개 모델 중 51위. 연구 수준의 매우 어려운 수학 문제(비공개) 2026년 판의 1~3단계. 오차 ±2%.

  • 48개 모델 중 42위. FrontierMath 2026년 판에서 가장 어려운 4단계 문제(비공개). 오차 ±2.4%.

  • 23개 모델 중 13위. 실제 오픈소스 저장소의 이슈를 고치는 과제. 사람이 검증한 500개 문항이다. 오차 ±2%.

  • 60개 모델 중 52위. 체스 엔진으로 새로 만든 퍼즐 100개. 퍼즐마다 최선의 다음 수가 하나 있다. 오차 ±2.6%.

  • 47개 모델 중 30위. 잘 알려진 게임을 퍼즐용으로 바꾼 변형판의 100개 국면. 어떤 게임인지는 일부러 밝히지 않았다. 오차 ±4.1%.

  • EBR-bench공간·학습7.9%

    21개 모델 중 19위. 덜 알려진 게임 Earthborne Rangers를 반복해서 할수록 점수가 오르는지 보는 학습 능력 시험.

세로선은 무작위로 찍었을 때 기대되는 점수입니다. 같은 벤치마크라도 평가 방식과 설정에 따라 점수가 달라지므로 개발사 발표 수치와 다를 수 있습니다.

함께 볼 모델