Cloudflare가 텍스트, 이미지, 오디오, 영상을 한 번의 호출로 평가하는 오픈 가중치 결정 모델 Clef-omni를 2026년 10월 9일 공개했다. 기존 Clef 결정 모델 계열의 새 모델로, 원래 Clef와 Clef-flash가 나온 지 8일 만이다. 개발자는 멀티모달 에이전트 파이프라인에서 흔히 필요한 전사와 캡션 생성 단계를 건너뛸 수 있다.
Clef-omni는 Workers AI에서 @cf/cloudflare/clef-omni라는 이름으로 쓸 수 있다. 호스팅 컨텍스트는 64,000 토큰이고 입력 요금은 100만 토큰당 0.15달러, 라이선스는 Apache-2.0이다. 직접 운영하는 경우 H200 GPU 한 장에서 테스트했으며, bfloat16 기준 GPU 메모리를 약 64GB 쓴다.
작동 방식과 입력 한도
결정 모델은 글을 생성하지 않고, 상태와 질문 스키마를 받아 허용된 선택지마다 확률을 돌려준다. Clef가 지원하는 질문 유형은 참/거짓, 선택, 점수 세 가지다. 이 형식은 TypeSafe AI의 Jev와 SystemOne API를 따른다.
Clef-omni는 Qwen3-Omni-30B-A3B-Instruct를 후속 학습한 모델이다. 총 300억, 활성 30억 파라미터의 전문가 혼합 구조다. Cloudflare는 이해 백본을 유지하고 음성 출력 경로는 뺐다. 전체 입력을 한 번의 prefill로 처리하며 영상 프레임과 오디오는 하나의 시퀀스로 동기화한다. 작은 스키마 헤드가 선택지별로 입력에서 근거를 모은 뒤 필드 벡터가 전체 문맥에 교차 어텐션을 해 신뢰도를 계산한다. Qwen3 백본은 고정하고 LoRA 어댑터를 학습했으며, 레이블 스무딩 교차 엔트로피에 Brier 점수 보정을 결합했다.
| 입력 | 한도 |
|---|---|
| 이미지 | 최대 4장, PNG·JPEG·WebP, 장당 64~1,024 토큰 |
| 오디오 | 최대 4개, WAV·MP3, 개당 300초, 분당 약 780 토큰 |
| 영상 | 최대 2개, MP4·WebM, 개당 60초, 초당 2프레임 샘플링 |
| 질문 | 요청당 1~64개 |
Cloudflare는 텍스트 판정이 중앙값 약 130ms, 이미지는 약 150ms 걸린다고 밝혔다. 소리가 있는 21초 영상은 약 1.5초에 평가한다.
벤치마크 결과
Cloudflare가 자체 Decision Index로 Clef, Clef-flash, Jev와 비교한 결과, Clef-omni는 의도 분류에서 앞섰다. BANKING77에서 macro-F1 94.8, CLINC150+OOS에서 97.7을 기록했다. 의도 분류와 별개로 Amazon ESCI에서도 57.8로 선두였다.
다른 항목은 뒤진다. 가전 과제의 완전 일치 정확도는 69.3으로 Clef-flash의 97.73에 못 미친다. When2Call 정확도는 63.3으로 Jev의 80.97보다 낮다. TypeSafe의 워크플로 평가에서는 보고된 5개 지표 모두 Clef보다 낮다. GPQA Diamond는 47.4로 Jev의 78.3에 크게 못 미치고, POP909-CL 정확도 2.6은 보고된 점수 가운데 가장 낮다. 이 점수는 Cloudflare가 발표한 수치이며 독립 기관이 검증하지는 않았다.
| 항목 | Clef-omni | Clef | Clef-flash | Jev |
|---|---|---|---|---|
| 파라미터 | 300억 총, 30억 활성(MoE) | 270억 밀집 | 90억 밀집 | 비공개 |
| 기반 모델 | Qwen3-Omni-30B-A3B-Instruct | Qwen3.8-27B | Qwen3.5-9B | 비공개 |
| 입력 | 텍스트·이미지·오디오·영상 | 텍스트·이미지·영상 프레임 | 텍스트·이미지·영상 프레임 | 텍스트(Cloudflare 기준) |
| 호스팅 컨텍스트 | 64,000 | 64k | 24k(자체 호스팅 256k) | TypeSafe 비공개(Cloudflare는 32k로 인용) |
| 입력 100만 토큰당 가격 | $0.15 | $0.24 | $0.038 | $0.042 |
| 라이선스 | Apache-2.0 | Apache-2.0 | Apache-2.0 | API 전용, 얼리 액세스 |
| BANKING77(macro-F1) | 94.8 | 94.20 | 90.93 | 79.74 |
| CLINC150+OOS(macro-F1) | 97.7 | 97.43 | 66.77 | 89.27 |
| When2Call(정확도) | 63.3 | 72.37 | 65.58 | 80.97 |
| BRIGHT(nDCG@10) | 42.0 | 45.91 | 39.26 | 47.52 |
| 송장 처리, 주 작업 | 82.0 | 86.2 | 73.3 | 83.1 |
호스팅 Clef 속도·가격 변화
같은 업데이트로 Cloudflare는 호스팅 Clef를 SGLang으로 옮기고 서빙 스택을 조정했다. 새 가중치는 나오지 않았다. 약 800토큰 입력의 중앙값 지연 시간은 262ms에서 152ms로 1.7배, 약 3,400토큰은 616ms에서 305ms로 2.0배 빨라졌다. 약 16,000토큰은 2,721ms에서 1,635ms로 줄었다. 별도로 Clef 지원이 SGLang 0.5.22에 반영된다.
Clef-flash 요금은 100만 토큰당 0.038달러로, Jev의 0.042달러보다 낮아졌다. Clef-flash의 호스팅 컨텍스트는 24k이고, 자체 호스팅하면 256k까지 쓸 수 있다.
출처
이 기사는 아래 자료를 바탕으로 정리했습니다. 제목을 누르면 원문이 새 창으로 열립니다.