AI 모델 · OpenAI
GPT-4 (Mar 2023)
OpenAI 모델 · 2023년 3월 14일 공개. 독립 벤치마크 점수, 종합 지수, 사람 투표 순위와 개발사 발표 점수를 그래프로 정리했습니다.
- 개발
- OpenAI
- 공개일
- 이용 방식
- API 제공
- 매개변수(공개·추정치)
- 1.8조 개
- 학습 연산량
- 2.1×10²⁵ FLOPEpoch AI 추정치
- 종합 능력 지수(ECI)
- 125.9신뢰구간 119.3~130.4
- Arena 점수(사람 투표)
- 1206315위 · 투표 54,173표
주요 반응
GPT-4는 GPT-3.5를 뛰어넘는 성능, 이미지 입력, 각종 시험 상위권 성적으로 호평받았고 마이크로소프트 연구진은 AGI의 초기 징후라고까지 평가했다. 반면 모델 구조와 학습 데이터를 밝히지 않은 기술 보고서는 검증이 불가능하다는 비판을 받았고 환각 문제도 남았다.
- 호평출시 직후 보도는 GPT-4가 복잡한 과제에서 GPT-3.5보다 분명히 낫다고 평가했다. 이미지를 입력받는 멀티모달 모델이며 변호사 시험, SAT, GRE, LSAT 등에서 상위권 점수를 받았다고 전했다.[1]
- 엇갈림마이크로소프트 연구진은 초기 버전을 시험한 논문에서 수학·코딩·의학·법률 등에서 인간 수준에 가까운 성능을 보였다며 AGI의 불완전한 초기 형태로 볼 수 있다고 주장했다. 다만 다음 단어 예측을 넘어서는 접근이 필요할 수 있다고 덧붙였다.[2]
- 비판98쪽 기술 보고서가 모델 크기·구조·학습 데이터·학습 방법을 공개하지 않아, 연구자들은 성능 주장을 검증할 수 없다며 비판했다. OpenAI는 경쟁 환경과 안전성을 이유로 들었다.[3][4]
- 엇갈림OpenAI는 ChatGPT보다 사실 지어내기가 40% 적다고 했지만 환각은 남았다. 코딩 대회 문제 성적은 학습 데이터 오염 가능성이 제기됐고, 변호사 시험 통과가 실무 능력을 뜻하지는 않는다는 지적도 나왔다.[5]
- 엇갈림개발자 커뮤니티는 32k 토큰 문맥 창으로 법률·의료 문서를 한 번에 다루는 활용에 기대를 모았다. 한편 민감 정보를 외부에 보내도 되는지, OpenAI가 폐쇄적으로 변했다는 점에 대한 우려도 컸다.[6]
반응 출처 6개
- GPT-4 Ups the Ante in the AI Arms Race · spectrum.ieee.org
- Sparks of Artificial General Intelligence: Early experiments with GPT-4 · arxiv.org
- Lightning AI CEO slams OpenAI's GPT-4 paper as 'masquerading as research' · venturebeat.com
- Researchers, developers, and experts criticise OpenAI’s GPT-4 release: “There is no way to validate it” · ing.dk
- GPT-4, Bard arrive but GPU shortages, hallucination remain challenges · fortune.com
- GPT-4 · news.ycombinator.com
출시 기사·리뷰·전문가 평가·개발자 커뮤니티 토론을 LUCAS AI News가 읽고 요약했습니다(2026-10-11 기준). 원문 표현은 옮기지 않았으니 자세한 내용은 출처에서 확인하세요.
OpenAI 모델 흐름
큰 점이 이 모델입니다. 선은 그때까지의 최고 기록입니다.
독립 벤치마크 점수
- GPQA Diamond과학35.7%
94개 모델 중 87위. 대학원 수준의 생물·물리·화학 객관식 문제 198개. 검색으로 답을 찾기 어렵게 만든 문항이다. 오차 ±2.4%.
- OTIS 모의 AIME수학0.6%
91개 모델 중 91위. OTIS의 경시대회형 수학 문제 45개. MATH Level 5보다 어렵고 FrontierMath보다 쉽다. 오차 ±0.4%.
세로선은 무작위로 찍었을 때 기대되는 점수입니다. 같은 벤치마크라도 평가 방식과 설정에 따라 점수가 달라지므로 개발사 발표 수치와 다를 수 있습니다.
함께 볼 모델
- GPT-4 (Jun 2023) OpenAI · 2023-06-13
- GPT-3.5 Turbo (Jun 2023) OpenAI · 2023-06-13
- Claude 2 Anthropic · 2023-07-11
- Claude Instant Anthropic · 2023-08-09