GPT-5.1
OpenAI 모델 · 2025년 11월 13일 공개. 독립 벤치마크 점수, 종합 지수, 사람 투표 순위와 개발사 발표 점수를 그래프로 정리했습니다.
- 개발
- OpenAI
- 공개일
- 이용 방식
- API 제공
- 종합 능력 지수(ECI)
- 149.6신뢰구간 148.2~151.1
- Arena 점수(사람 투표)
- 144367위 · 투표 41,674표
영역별 강점
같은 시험을 치른 모델 가운데 어디쯤인지(백분위)를 영역별로 평균했습니다. 바깥일수록 상위권이고, 점수가 없는 영역은 가운데 빈 점으로 표시합니다.
OpenAI 모델 흐름
큰 점이 이 모델입니다. 선은 그때까지의 최고 기록입니다.
독립 벤치마크 점수
- GPQA Diamond과학87.6%
94개 모델 중 33위. 대학원 수준의 생물·물리·화학 객관식 문제 198개. 검색으로 답을 찾기 어렵게 만든 문항이다. 생각 수준 '높음' 기준. 오차 ±1.9%.
- OTIS 모의 AIME수학88.6%
91개 모델 중 37위. OTIS의 경시대회형 수학 문제 45개. MATH Level 5보다 어렵고 FrontierMath보다 쉽다. 생각 수준 '높음' 기준. 오차 ±4%.
- FrontierMath(2025판)수학31%
46개 모델 중 15위. 연구 수준의 매우 어려운 수학 문제(비공개). 2026년 6월 새 판으로 바뀌기 전 기록이다. 생각 수준 '높음' 기준. 오차 ±2.7%.
- SWE-bench Verified코딩68%
23개 모델 중 17위. 실제 오픈소스 저장소의 이슈를 고치는 과제. 사람이 검증한 500개 문항이다. 생각 수준 '높음' 기준. 오차 ±2.1%.
- SimpleQA Verified지식48%
52개 모델 중 23위. 정치·과학·예술·스포츠·지리 등 짧은 사실 질문 1,000개에 검색 없이 답한 정확도. 생각 수준 '높음' 기준. 오차 ±1.6%.
- 체스 퍼즐추론32%
60개 모델 중 27위. 체스 엔진으로 새로 만든 퍼즐 100개. 퍼즐마다 최선의 다음 수가 하나 있다. 생각 수준 '높음' 기준. 오차 ±4.7%.
- 미공개 게임 퍼즐추론19%
47개 모델 중 32위. 잘 알려진 게임을 퍼즐용으로 바꾼 변형판의 100개 국면. 어떤 게임인지는 일부러 밝히지 않았다. 생각 수준 '낮음' 기준. 오차 ±3.9%.
세로선은 무작위로 찍었을 때 기대되는 점수입니다. 같은 벤치마크라도 평가 방식과 설정에 따라 점수가 달라지므로 개발사 발표 수치와 다를 수 있습니다.
함께 볼 모델
- GPT-5.2 Pro OpenAI · 2025-12-11
- GPT-5.2 OpenAI · 2025-12-11
Gemini 3 Pro Google · 2025-11-18- Claude Opus 4.5 Anthropic · 2025-11-24