BENCHMARK · 추론
미공개 게임 퍼즐 순위
잘 알려진 게임을 퍼즐용으로 바꾼 변형판의 100개 국면. 어떤 게임인지는 일부러 밝히지 않았다.
상위 모델
- OpenAI
- Anthropic
Google- xAI
세로 점선은 무작위로 찍었을 때 기대되는 점수입니다.
공개일에 따른 점수
선은 개발사별로 그때까지의 최고 점수를 잇습니다. 오른쪽 위로 갈수록 최근에 나온 높은 점수입니다.
- GPT-6 Astra 84%
- Claude Opus 5.5 71%
- Gemini 3.8 Flash 47%
- Grok 4.6 34%
전체 순위
| 순위 | 모델 | 점수 | 생각 수준 | 공개일 |
|---|---|---|---|---|
| 1 | GPT-6 AstraOpenAI | 84%±3.7% | 최대 | 2026-09-03 |
| 2 | GPT-6.1 SolOpenAI | 80%±4% | 최대 | 2026-09-29 |
| 3 | Claude Opus 5.5Anthropic | 71%±4.6% | 최대 | 2026-09-22 |
| 4 | Claude Sonnet 5.5Anthropic | 65%±4.8% | 최대 | 2026-09-28 |
| 5 | Claude Opus 5Anthropic | 59%±4.9% | 최대 | 2026-07-24 |
| 6 | Claude Fable 5.1Anthropic | 58%±5% | 최대 | 2026-09-01 |
| 6 | GPT-5.6 SolOpenAI | 58%±5% | 최대 | 2026-07-09 |
| 8 | GPT-6 SolOpenAI | 56%±5% | 최대 | 2026-09-22 |
| 8 | GPT-5.5OpenAI | 56%±5% | 매우 높음 | 2026-04-23 |
| 10 | Claude Fable 5Anthropic | 52%±5% | 최대 | 2026-06-09 |
| 11 | Gemini 3.8 FlashGoogle | 47%±5% | 높음 | 2026-09-02 |
| 12 | Gemini 3.7 FlashGoogle | 37%±4.9% | 높음 | 2026-08-13 |
| 12 | GPT-5.4OpenAI | 37%±4.9% | 매우 높음 | 2026-03-05 |
| 14 | Claude Opus 4.8Anthropic | 36%±4.8% | — | 2026-05-28 |
| 15 | GPT-5.6 TerraOpenAI | 35%±4.8% | 최대 | 2026-07-09 |
| 15 | Claude Sonnet 5Anthropic | 35%±4.8% | 최대 | 2026-06-30 |
| 17 | Grok 4.6xAI | 34%±4.8% | 매우 높음 | 2026-08-12 |
| 17 | Gemini 3.1 ProGoogle | 34%±4.8% | — | 2026-02-19 |
| 19 | Gemini 3.5 FlashGoogle | 32%±4.7% | — | 2026-05-19 |
| 20 | Claude Haiku 5.5Anthropic | 30%±4.6% | 최대 | 2026-10-07 |
| 20 | Gemini 3.6 FlashGoogle | 30%±4.6% | — | 2026-07-21 |
| 22 | Grok 4.7xAI | 29%±4.6% | 매우 높음 | 2026-09-21 |
| 22 | o3OpenAI | 29%±4.6% | 높음 | 2025-04-16 |
| 24 | Claude Opus 4.7Anthropic | 28%±4.5% | 최대 | 2026-04-16 |
| 25 | Gemini 3 FlashGoogle | 26%±4.4% | — | 2025-12-17 |
| 26 | Claude Opus 4.6Anthropic | 25%±4.3% | 최대 | 2026-02-05 |
| 27 | GPT-5.2OpenAI | 23%±4.2% | 높음 | 2025-12-11 |
| 27 | GPT-5OpenAI | 23%±4.2% | 높음 | 2025-08-07 |
| 29 | Claude Opus 4.5Anthropic | 22%±4.2% | — | 2025-11-24 |
| 30 | GPT-5.6 LunaOpenAI | 21%±4.1% | 최대 | 2026-07-09 |
| 30 | Claude Opus 4.1Anthropic | 21%±4.1% | — | 2025-08-05 |
| 32 | Gemini 3.5 Flash-LiteGoogle | 19%±3.9% | — | 2026-07-21 |
| 32 | GPT-5.1OpenAI | 19%±3.9% | 낮음 | 2025-11-13 |
| 34 | Claude Sonnet 4.5Anthropic | 17%±3.8% | — | 2025-09-29 |
| 35 | Claude Sonnet 4.6Anthropic | 16%±3.7% | 낮음 | 2026-02-17 |
| 36 | GPT-4o miniOpenAI | 12%±3.3% | — | 2024-07-18 |
| 36 | GPT-4 (Jun 2023)OpenAI | 12%±3.3% | — | 2023-06-13 |
| 38 | GPT-5.4 MiniOpenAI | 11%±3.1% | 없음 | 2026-03-17 |
| 39 | GPT-5 miniOpenAI | 10%±3% | 최소 | 2025-08-07 |
| 40 | GPT-5.4 NanoOpenAI | 9%±2.9% | — | 2026-03-17 |
| 40 | GPT-5 nanoOpenAI | 9%±2.9% | 중간 | 2025-08-07 |
| 42 | GPT-6 LunaOpenAI | 7%±2.6% | 최대 | 2026-09-22 |
| 42 | GPT-4.1 miniOpenAI | 7%±2.6% | — | 2025-04-14 |
| 42 | o3-miniOpenAI | 7%±2.6% | 높음 | 2025-01-31 |
| 45 | o4-miniOpenAI | 5%±2.2% | 높음 | 2025-04-16 |
| 46 | GPT-3.5 Turbo (Jan 2024)OpenAI | 3%±1.7% | — | 2024-01-25 |
| 47 | gpt-oss-120bOpenAI | 2%±1.4% | — | 2025-08-05 |
다른 벤치마크
- GPQA Diamond 과학
- MATH Level 5 수학
- OTIS 모의 AIME 수학
- FrontierMath(2025판) 수학
- FrontierMath 1~3단계 수학
- FrontierMath 4단계 수학
- SWE-bench Verified 코딩
- MirrorCode 코딩
- SimpleQA Verified 지식
- 체스 퍼즐 추론
- 가구 조립 검사 공간·학습
- EBR-bench 공간·학습
- Aider Polyglot 코딩