모델과 서비스

Ollama 0.40.9 시험판, Apple Silicon에서 Phonon 음성 생성 지원

Ollama v0.40.9-rc3 시험판이 Apple Silicon에서 Phonon 모델로 음성을 만드는 기능을 넣었다. 결정 모델 d3 추가와 Flint의 Linux·Windows 지원도 포함됐다.

루카스 ·

Ollama가 시험판 v0.40.9-rc3에서 Apple Silicon 기기 한정으로 Phonon 기반 음성 생성을 지원한다. ollama run은 소리가 만들어지는 동안 텍스트나 채팅 모델의 답변을 바로 재생한다.

회색 금속 케이스의 MacBook Pro 13인치 노트북이 열린 상태로, 키보드 위쪽에 터치바가 보인다.
터치바가 달린 MacBook Pro 13인치(M1) 노트북Frankee 67 / Wikimedia Commons · CC BY-SA 4.0 · 원본 · 크기 조정

앱 개발자는 OpenAI 호환 /v1/audio/speech 엔드포인트로 오디오를 스트리밍으로 받을 수 있다. Ollama는 ollama run phonon "Hello from Ollama."를 예시 명령으로 제시했다. 음성 기능을 설명하는 상세 문서는 Ollama 문서 사이트에 따로 있다.

이번 버전에는 d3 모델군도 들어갔다. vLLM Semantic Router의 결정 모델을 Ollama에서 쓰게 한 것으로, 텍스트, 구조화된 상태, 이미지를 입력하면 분류하거나 예·아니오로 답하거나 선택지에 확률 점수를 매긴다. 크기는 2B, 4B, 9B, 27B가 있다.

Flint는 macOS에 더해 Linux와 Windows에서도 실행된다.

스트리밍으로 받는 OpenAI Responses와 Anthropic Messages 요청은 생성이 실패하면 일부 출력 뒤에 조용히 끝나지 않고 실패를 알린다. ollama launch는 클라우드 모델의 컨텍스트 길이와 기능 정보를 코딩 도구에 넘겨, 잘못 잡히던 컨텍스트와 대화 압축 설정을 바로잡았다. Anthropic 호환 웹 검색은 후속 요청에서 모델이 지원하는 사고 설정을 따라 피할 수 있던 실패를 막는다.

댓글

기사에 대한 의견이나 틀린 내용 제보를 남겨 주세요.

댓글을 불러오고 있습니다.