AI의 변화, 근거와 맥락까지.AI NEWS & CONTEXT
AI 모델 · xAI

Grok-1.5

xAI 모델 · 2024년 3월 28일 공개. 독립 벤치마크 점수, 종합 지수, 사람 투표 순위와 개발사 발표 점수를 그래프로 정리했습니다.

개발
xAI
공개일
이용 방식
서비스로만 제공
학습 연산량
9.3×10²⁴ FLOPEpoch AI 추정치
종합 능력 지수(ECI)
아직 없음
Arena 점수(사람 투표)
아직 없음

비슷한 모델과 비교하기사전에서 Grok 알아보기

독립 벤치마크 점수

독립 평가 기관이 아직 이 모델의 점수를 발표하지 않았습니다. 점수가 나오면 반영합니다.

개발사 발표 점수

개발사가 공식 페이지나 논문에 직접 밝힌 수치입니다. 평가 조건이 서로 달라 다른 모델과 바로 비교하기는 어렵습니다. 항목마다 원문에서 확인할 수 있습니다.

항목발표 값원문
GPQA35.9%x.ai
MMLU81.3%x.ai
MMLU-Pro51%x.ai
MATH §50.6%x.ai
HumanEval ¶74.1%x.ai
MMMU53.6%x.ai
MathVista52.8%x.ai
DocVQA85.6%x.ai
MATH50.6%x.ai
GSM8K90%x.ai
HumanEval74.1%x.ai

함께 볼 모델