AI의 변화, 근거와 맥락까지.AI NEWS & CONTEXT
BENCHMARK · 수학

OTIS 모의 AIME 순위

OTIS의 경시대회형 수학 문제 45개. MATH Level 5보다 어렵고 FrontierMath보다 쉽다.

평가: Epoch AI · 측정한 모델 91개 · 찍어서 맞힐 때 0.1%· 평가 기관 설명 보기

상위 모델 여러 개가 95% 이상을 받아 이 시험은 최신 모델끼리의 차이를 가리기 어려워졌습니다(포화). 최신 모델 비교에는 다른 벤치마크를 함께 보세요.

상위 모델

  • OpenAI
  • Anthropic
  • Google
  • xAI
GPT-6.1 SolGPT-6.1 Sol · 100% · 생각 수준 최대100%Claude Sonnet 5.5Claude Sonnet 5.5 · 100% · 생각 수준 최대100%GPT-6 SolGPT-6 Sol · 100% · 생각 수준 최대100%Claude Opus 5.5Claude Opus 5.5 · 100% · 생각 수준 최대100%GPT-6 AstraGPT-6 Astra · 100% · 생각 수준 최대100%Claude Fable 5.1Claude Fable 5.1 · 100% · 생각 수준 최대100%GPT-5.6 SolGPT-5.6 Sol · 100% · 생각 수준 최대100%Claude Fable 5Claude Fable 5 · 100% · 생각 수준 높음100%GPT-5.5 ProGPT-5.5 Pro · 100% · 생각 수준 매우 높음100%GPT-5.5GPT-5.5 · 100% · 생각 수준 매우 높음100%GPT-5.6 TerraGPT-5.6 Terra · 99.7% · 생각 수준 최대99.7%Grok 4.6Grok 4.6 · 99.2% · 생각 수준 매우 높음99.2%Claude Haiku 5.5Claude Haiku 5.5 · 98.9% · 생각 수준 매우 높음98.9%GPT-6 LunaGPT-6 Luna · 98.9% · 생각 수준 최대98.9%Gemini 3.8 FlashGemini 3.8 Flash · 98.9% · 생각 수준 높음98.9%Claude Opus 5Claude Opus 5 · 98.9% · 생각 수준 최대98.9%GPT-5.6 LunaGPT-5.6 Luna · 98.3% · 생각 수준 최대98.3%Claude Opus 4.8Claude Opus 4.8 · 98.3%98.3%Grok 4.7Grok 4.7 · 98.1% · 생각 수준 매우 높음98.1%Claude Opus 4.7Claude Opus 4.7 · 97.8% · 생각 수준 매우 높음97.8%무작위로 찍었을 때의 점수
GPT-6.1 SolGPT-6.1 Sol · 100% · 생각 수준 최대100%Claude Sonnet 5.5Claude Sonnet 5.5 · 100% · 생각 수준 최대100%GPT-6 SolGPT-6 Sol · 100% · 생각 수준 최대100%Claude Opus 5.5Claude Opus 5.5 · 100% · 생각 수준 최대100%GPT-6 AstraGPT-6 Astra · 100% · 생각 수준 최대100%Claude Fable 5.1Claude Fable 5.1 · 100% · 생각 수준 최대100%GPT-5.6 SolGPT-5.6 Sol · 100% · 생각 수준 최대100%Claude Fable 5Claude Fable 5 · 100% · 생각 수준 높음100%GPT-5.5 ProGPT-5.5 Pro · 100% · 생각 수준 매우 높음100%GPT-5.5GPT-5.5 · 100% · 생각 수준 매우 높음100%GPT-5.6 TerraGPT-5.6 Terra · 99.7% · 생각 수준 최대99.7%Grok 4.6Grok 4.6 · 99.2% · 생각 수준 매우 높음99.2%Claude Haiku 5.5Claude Haiku 5.5 · 98.9% · 생각 수준 매우 높음98.9%GPT-6 LunaGPT-6 Luna · 98.9% · 생각 수준 최대98.9%Gemini 3.8 FlashGemini 3.8 Flash · 98.9% · 생각 수준 높음98.9%Claude Opus 5Claude Opus 5 · 98.9% · 생각 수준 최대98.9%GPT-5.6 LunaGPT-5.6 Luna · 98.3% · 생각 수준 최대98.3%Claude Opus 4.8Claude Opus 4.8 · 98.3%98.3%Grok 4.7Grok 4.7 · 98.1% · 생각 수준 매우 높음98.1%Claude Opus 4.7Claude Opus 4.7 · 97.8% · 생각 수준 매우 높음97.8%무작위로 찍었을 때의 점수

세로 점선은 무작위로 찍었을 때 기대되는 점수입니다.

공개일에 따른 점수

선은 개발사별로 그때까지의 최고 점수를 잇습니다. 오른쪽 위로 갈수록 최근에 나온 높은 점수입니다.

0%20%40%60%80%100%202420252026OTIS 모의 AIME 점수GPT-6.1 Sol · 100% · 2026-09-29Claude Sonnet 5.5 · 100% · 2026-09-28GPT-6 Sol · 100% · 2026-09-22Claude Opus 5.5 · 100% · 2026-09-22GPT-6 Astra · 100% · 2026-09-03Claude Fable 5.1 · 100% · 2026-09-01GPT-5.6 Sol · 100% · 2026-07-09GPT-5.5 · 100% · 2026-04-23GPT-5.6 Terra · 100% · 2026-07-09Claude Haiku 5.5 · 99% · 2026-10-07GPT-6 Luna · 99% · 2026-09-22Claude Opus 5 · 99% · 2026-07-24GPT-5.6 Luna · 98% · 2026-07-09Grok 4.7 · 98% · 2026-09-21Gemini 3.5 Flash · 96% · 2026-05-19Claude Sonnet 5 · 95% · 2026-06-30Gemini 3.6 Flash · 94% · 2026-07-21GPT-5.4 Mini · 89% · 2026-03-17GPT-5.1 · 89% · 2025-11-13GPT-5.4 Nano · 88% · 2026-03-17GPT-5 mini · 87% · 2025-08-07Claude Sonnet 4.6 · 86% · 2026-02-17o4-mini · 82% · 2025-04-16GPT-5 nano · 81% · 2025-08-07Gemini 3.1 Flash-Lite · 80% · 2026-03-03Gemini 3.5 Flash-Lite · 71% · 2026-07-21Gemini 2.5 Flash (May 2025) · 71% · 2025-05-20Claude Opus 4.1 · 69% · 2025-08-05GPT-5.5 Instant · 68% · 2026-05-05Claude Haiku 4.5 · 67% · 2025-10-15gpt-oss-20b · 65% · 2025-08-05Claude Opus 4 · 64% · 2025-05-22GPT-4.1 mini · 45% · 2025-04-14GPT-4.1 · 38% · 2025-04-14GPT-4.5 · 38% · 2025-02-27o1-preview · 31% · 2024-09-12GPT-4.1 nano · 29% · 2025-04-14Gemini 1.5 Flash (Sep 2024) · 16% · 2024-09-24GPT-4o (Aug 2024) · 6% · 2024-08-06GPT-4o (Nov 2024) · 6% · 2024-11-20GPT-4o (May 2024) · 6% · 2024-05-13Gemini 1.5 Flash 8B · 5% · 2024-10-03Claude 3.5 Haiku · 4% · 2024-10-22Gemini 1.5 Flash (May 2024) · 4% · 2024-05-23Claude 3 Sonnet · 3% · 2024-02-29Claude 2.1 · 2% · 2023-11-21Claude 3 Haiku · 2% · 2024-03-07Claude Fable 5 · 100% · 2026-06-09GPT-5.5 Pro · 100% · 2026-04-23Grok 4.6 · 99% · 2026-08-12Gemini 3.8 Flash · 99% · 2026-09-02Claude Opus 4.8 · 98% · 2026-05-28Claude Opus 4.7 · 98% · 2026-04-16Grok 4.5 · 98% · 2026-07-08GPT-5.4 · 98% · 2026-03-05Gemini 3.7 Flash · 97% · 2026-08-13GPT-5.2 · 96% · 2025-12-11Gemini 3.1 Pro · 96% · 2026-02-19Gemini 3 Flash · 96% · 2025-12-17Claude Opus 4.6 · 94% · 2026-02-05Grok 4.3 Beta · 93% · 2026-04-17Grok 4.20 · 92% · 2026-02-17Gemini 3 Pro · 91% · 2025-11-18GPT-5 · 91% · 2025-08-07gpt-oss-120b · 89% · 2025-08-05Claude Opus 4.5 · 86% · 2025-11-24Gemini 2.5 Pro (Jun 2025) · 85% · 2025-06-05o3 · 84% · 2025-04-16Grok 4 · 84% · 2025-07-09Claude Sonnet 4.5 · 78% · 2025-09-29Grok-3 mini · 78% · 2025-06-24o3-mini · 77% · 2025-01-31o1 · 73% · 2024-12-17Gemini 2.5 Flash (Apr 2025) · 73% · 2025-04-17Claude Sonnet 4 · 71% · 2025-05-22Claude 3.7 Sonnet · 58% · 2025-02-24Grok 3 · 56% · 2025-04-09o1-mini · 47% · 2024-09-12Gemini 1.5 Pro (Sept 2024) · 23% · 2024-09-24Grok-2 (Dec 2024) · 12% · 2024-12-12Claude 3.5 Sonnet (October 2024) · 8% · 2024-10-22GPT-4o mini · 7% · 2024-07-18Gemini 1.5 Pro (May 2024) · 7% · 2024-05-14GPT-4 Turbo (Apr 2024) · 7% · 2024-04-09Claude 3.5 Sonnet · 7% · 2024-06-20Claude 3 Opus · 5% · 2024-02-29Claude 2 · 3% · 2023-07-11GPT-3.5 Turbo (Jan 2024) · 2% · 2024-01-25Gemini 1.0 Pro · 1% · 2023-12-13GPT-4 (Jun 2023) · 1% · 2023-06-13GPT-4 (Mar 2023) · 1% · 2023-03-14GPT-5.5 Pro100%Claude Fable 5100%Grok 4.699%Gemini 3.8 Flash99%
0%20%40%60%80%100%202420252026OTIS 모의 AIME 점수GPT-6.1 Sol · 100% · 2026-09-29Claude Sonnet 5.5 · 100% · 2026-09-28GPT-6 Sol · 100% · 2026-09-22Claude Opus 5.5 · 100% · 2026-09-22GPT-6 Astra · 100% · 2026-09-03Claude Fable 5.1 · 100% · 2026-09-01GPT-5.6 Sol · 100% · 2026-07-09GPT-5.5 · 100% · 2026-04-23GPT-5.6 Terra · 100% · 2026-07-09Claude Haiku 5.5 · 99% · 2026-10-07GPT-6 Luna · 99% · 2026-09-22Claude Opus 5 · 99% · 2026-07-24GPT-5.6 Luna · 98% · 2026-07-09Grok 4.7 · 98% · 2026-09-21Gemini 3.5 Flash · 96% · 2026-05-19Claude Sonnet 5 · 95% · 2026-06-30Gemini 3.6 Flash · 94% · 2026-07-21GPT-5.4 Mini · 89% · 2026-03-17GPT-5.1 · 89% · 2025-11-13GPT-5.4 Nano · 88% · 2026-03-17GPT-5 mini · 87% · 2025-08-07Claude Sonnet 4.6 · 86% · 2026-02-17o4-mini · 82% · 2025-04-16GPT-5 nano · 81% · 2025-08-07Gemini 3.1 Flash-Lite · 80% · 2026-03-03Gemini 3.5 Flash-Lite · 71% · 2026-07-21Gemini 2.5 Flash (May 2025) · 71% · 2025-05-20Claude Opus 4.1 · 69% · 2025-08-05GPT-5.5 Instant · 68% · 2026-05-05Claude Haiku 4.5 · 67% · 2025-10-15gpt-oss-20b · 65% · 2025-08-05Claude Opus 4 · 64% · 2025-05-22GPT-4.1 mini · 45% · 2025-04-14GPT-4.1 · 38% · 2025-04-14GPT-4.5 · 38% · 2025-02-27o1-preview · 31% · 2024-09-12GPT-4.1 nano · 29% · 2025-04-14Gemini 1.5 Flash (Sep 2024) · 16% · 2024-09-24GPT-4o (Aug 2024) · 6% · 2024-08-06GPT-4o (Nov 2024) · 6% · 2024-11-20GPT-4o (May 2024) · 6% · 2024-05-13Gemini 1.5 Flash 8B · 5% · 2024-10-03Claude 3.5 Haiku · 4% · 2024-10-22Gemini 1.5 Flash (May 2024) · 4% · 2024-05-23Claude 3 Sonnet · 3% · 2024-02-29Claude 2.1 · 2% · 2023-11-21Claude 3 Haiku · 2% · 2024-03-07Claude Fable 5 · 100% · 2026-06-09GPT-5.5 Pro · 100% · 2026-04-23Grok 4.6 · 99% · 2026-08-12Gemini 3.8 Flash · 99% · 2026-09-02Claude Opus 4.8 · 98% · 2026-05-28Claude Opus 4.7 · 98% · 2026-04-16Grok 4.5 · 98% · 2026-07-08GPT-5.4 · 98% · 2026-03-05Gemini 3.7 Flash · 97% · 2026-08-13GPT-5.2 · 96% · 2025-12-11Gemini 3.1 Pro · 96% · 2026-02-19Gemini 3 Flash · 96% · 2025-12-17Claude Opus 4.6 · 94% · 2026-02-05Grok 4.3 Beta · 93% · 2026-04-17Grok 4.20 · 92% · 2026-02-17Gemini 3 Pro · 91% · 2025-11-18GPT-5 · 91% · 2025-08-07gpt-oss-120b · 89% · 2025-08-05Claude Opus 4.5 · 86% · 2025-11-24Gemini 2.5 Pro (Jun 2025) · 85% · 2025-06-05o3 · 84% · 2025-04-16Grok 4 · 84% · 2025-07-09Claude Sonnet 4.5 · 78% · 2025-09-29Grok-3 mini · 78% · 2025-06-24o3-mini · 77% · 2025-01-31o1 · 73% · 2024-12-17Gemini 2.5 Flash (Apr 2025) · 73% · 2025-04-17Claude Sonnet 4 · 71% · 2025-05-22Claude 3.7 Sonnet · 58% · 2025-02-24Grok 3 · 56% · 2025-04-09o1-mini · 47% · 2024-09-12Gemini 1.5 Pro (Sept 2024) · 23% · 2024-09-24Grok-2 (Dec 2024) · 12% · 2024-12-12Claude 3.5 Sonnet (October 2024) · 8% · 2024-10-22GPT-4o mini · 7% · 2024-07-18Gemini 1.5 Pro (May 2024) · 7% · 2024-05-14GPT-4 Turbo (Apr 2024) · 7% · 2024-04-09Claude 3.5 Sonnet · 7% · 2024-06-20Claude 3 Opus · 5% · 2024-02-29Claude 2 · 3% · 2023-07-11GPT-3.5 Turbo (Jan 2024) · 2% · 2024-01-25Gemini 1.0 Pro · 1% · 2023-12-13GPT-4 (Jun 2023) · 1% · 2023-06-13GPT-4 (Mar 2023) · 1% · 2023-03-14
  1. GPT-5.5 Pro 100%
  2. Claude Fable 5 100%
  3. Grok 4.6 99%
  4. Gemini 3.8 Flash 99%

전체 순위

순위모델점수생각 수준공개일
1GPT-6.1 SolOpenAI100%최대2026-09-29
1Claude Sonnet 5.5Anthropic100%최대2026-09-28
1GPT-6 SolOpenAI100%최대2026-09-22
1Claude Opus 5.5Anthropic100%최대2026-09-22
1GPT-6 AstraOpenAI100%최대2026-09-03
1Claude Fable 5.1Anthropic100%최대2026-09-01
1GPT-5.6 SolOpenAI100%최대2026-07-09
1Claude Fable 5Anthropic100%높음2026-06-09
1GPT-5.5 ProOpenAI100%매우 높음2026-04-23
1GPT-5.5OpenAI100%매우 높음2026-04-23
11GPT-5.6 TerraOpenAI99.7%±0.3%최대2026-07-09
12Grok 4.6xAI99.2%±0.5%매우 높음2026-08-12
13Claude Haiku 5.5Anthropic98.9%±0.5%매우 높음2026-10-07
13GPT-6 LunaOpenAI98.9%±0.7%최대2026-09-22
13Gemini 3.8 FlashGoogle98.9%±0.9%높음2026-09-02
13Claude Opus 5Anthropic98.9%±1.1%최대2026-07-24
17GPT-5.6 LunaOpenAI98.3%±1.2%최대2026-07-09
17Claude Opus 4.8Anthropic98.3%±1.4%—2026-05-28
19Grok 4.7xAI98.1%±1.4%매우 높음2026-09-21
20Claude Opus 4.7Anthropic97.8%±2.2%매우 높음2026-04-16
21Grok 4.5xAI97.8%±1.3%높음2026-07-08
21GPT-5.4OpenAI97.8%±2.2%높음2026-03-05
23Gemini 3.7 FlashGoogle97.2%±1.9%높음2026-08-13
24GPT-5.2OpenAI96.1%±2.6%높음2025-12-11
25Gemini 3.1 ProGoogle95.6%±3.1%—2026-02-19
26Gemini 3.5 FlashGoogle95.6%±2.7%—2026-05-19
26Gemini 3 FlashGoogle95.6%±3.1%—2025-12-17
28Claude Sonnet 5Anthropic94.7%±2.3%매우 높음2026-06-30
29Claude Opus 4.6Anthropic94.4%±2.8%—2026-02-05
30Gemini 3.6 FlashGoogle94.2%±3.1%—2026-07-21
31Grok 4.3 BetaxAI93.3%±3%—2026-04-17
32Grok 4.20xAI92.2%±3.3%—2026-02-17
33Gemini 3 ProGoogle91.4%±3.7%—2025-11-18
33GPT-5OpenAI91.4%±3.7%높음2025-08-07
35GPT-5.4 MiniOpenAI88.9%±4.7%매우 높음2026-03-17
35gpt-oss-120bOpenAI88.9%±4.5%—2025-08-05
37GPT-5.1OpenAI88.6%±4%높음2025-11-13
38GPT-5.4 NanoOpenAI87.8%±3.9%높음2026-03-17
39GPT-5 miniOpenAI86.7%±4.3%높음2025-08-07
40Claude Opus 4.5Anthropic86.1%±4.3%—2025-11-24
41Claude Sonnet 4.6Anthropic85.8%±4.5%—2026-02-17
42Gemini 2.5 Pro (Jun 2025)Google84.7%±4.8%—2025-06-05
43o3OpenAI84.4%±5.5%중간2025-04-16
44Grok 4xAI84%±5%—2025-07-09
45o4-miniOpenAI81.7%±4.7%높음2025-04-16
46GPT-5 nanoOpenAI81.1%±4.6%높음2025-08-07
47Gemini 3.1 Flash-LiteGoogle80%±6%—2026-03-03
48Claude Sonnet 4.5Anthropic77.8%±6.3%—2025-09-29
48Grok-3 minixAI77.8%±6.3%—2025-06-24
50o3-miniOpenAI76.9%±5.2%높음2025-01-31
51o1OpenAI73.3%±6.7%높음2024-12-17
52Gemini 2.5 Flash (Apr 2025)Google73.1%±5.5%—2025-04-17
53Gemini 3.5 Flash-LiteGoogle71.1%±6.8%—2026-07-21
53Claude Sonnet 4Anthropic71.1%±6.8%—2025-05-22
55Gemini 2.5 Flash (May 2025)Google70.8%±5.7%—2025-05-20
56Claude Opus 4.1Anthropic68.9%±7%—2025-08-05
57GPT-5.5 InstantOpenAI68.1%±6.2%—2026-05-05
58Claude Haiku 4.5Anthropic66.7%±7.1%—2025-10-15
59gpt-oss-20bOpenAI65.3%±5.9%—2025-08-05
60Claude Opus 4Anthropic64.4%±7.2%—2025-05-22
61Claude 3.7 SonnetAnthropic57.8%±7.4%—2025-02-24
62Grok 3xAI55.6%±7.5%—2025-04-09
63o1-miniOpenAI46.9%±6.5%높음2024-09-12
64GPT-4.1 miniOpenAI44.7%±6.2%—2025-04-14
65GPT-4.1OpenAI38.3%±6.3%—2025-04-14
66GPT-4.5OpenAI37.8%±7.3%—2025-02-27
67o1-previewOpenAI31.1%±7%—2024-09-12
68GPT-4.1 nanoOpenAI28.9%±6%—2025-04-14
69Gemini 1.5 Pro (Sept 2024)Google23.1%±5.2%—2024-09-24
70Gemini 1.5 Flash (Sep 2024)Google16.3%±4.1%—2024-09-24
71Grok-2 (Dec 2024)xAI11.5%±3.4%—2024-12-12
72Claude 3.5 Sonnet (October 2024)Anthropic8.5%±2.6%—2024-10-22
73GPT-4o miniOpenAI6.9%±2.7%—2024-07-18
74Gemini 1.5 Pro (May 2024)Google6.8%±1.9%—2024-05-14
75GPT-4 Turbo (Apr 2024)OpenAI6.7%±2.4%—2024-04-09
76Claude 3.5 SonnetAnthropic6.5%±2.2%—2024-06-20
77GPT-4o (Aug 2024)OpenAI6.4%±2.6%—2024-08-06
78GPT-4o (Nov 2024)OpenAI6.3%±2.4%—2024-11-20
78GPT-4o (May 2024)OpenAI6.3%±2.3%—2024-05-13
80Claude 3 OpusAnthropic4.7%±2%—2024-02-29
81Gemini 1.5 Flash 8BGoogle4.6%±2%—2024-10-03
82Claude 3.5 HaikuAnthropic4.3%±1.6%—2024-10-22
83Gemini 1.5 Flash (May 2024)Google3.9%±1.4%—2024-05-23
84Claude 3 SonnetAnthropic2.5%±1.9%—2024-02-29
84Claude 2Anthropic2.5%±1.5%—2023-07-11
86GPT-3.5 Turbo (Jan 2024)OpenAI2.2%±2.2%—2024-01-25
87Claude 2.1Anthropic1.9%±1.1%—2023-11-21
88Claude 3 HaikuAnthropic1.8%±0.8%—2024-03-07
89Gemini 1.0 ProGoogle1.1%±0.6%—2023-12-13
89GPT-4 (Jun 2023)OpenAI1.1%±0.5%—2023-06-13
91GPT-4 (Mar 2023)OpenAI0.6%±0.4%—2023-03-14

다른 벤치마크