Apple Watch 대화 되감기·요약 기능 베타 시작, iOS 27.3 개발자 대상

Apple이 Apple Watch용 AI 기능 묶음 'Audio Intelligence'의 베타 테스트를 시작했다. 개발자를 대상으로 iOS 27.3 업데이트에서 먼저 공개했으며, 9월 Surprise and Shine 하드웨어 행사에서 처음 소개한 기능이다.

사용자가 직접 켜야 하는 기능 네 가지로, Apple Watch Series 12와 Apple Watch Ultra 4 착용자가 중요한 소리 감지, 노래 식별, 대화 따라잡기, 메모를 할 수 있다. 이후 일반 대상 공개 베타로 넓혀 더 많은 사용자가 시험한 뒤 모든 사용자에게 제공할 예정이다.

소리 감지부터 대화 요약까지

소리 인식은 청각장애인과 난청 사용자가 사이렌, 경보, 초인종 같은 소리를 손목에서 알아채도록 돕는다. 노래 인식은 Apple의 Shazam 앱을 이용해 주변에서 나오는 음악의 제목과 가수를 알려 준다.

Live Rewind는 방금 들은 말을 다시 확인하는 기능이다. 디지털 크라운을 두 번 누르면 최근 15초 동안의 말이 텍스트로 시계 화면에 나타난다. 누군가 말로 해 주는 길 안내나 식당에서 읽어 주는 긴 오늘의 특선 목록처럼 놓치기 쉬운 말을 확인하는 용도다. 나중에 보려면 iOS 27과 함께 나온 독립 Siri 앱에 저장하면 되고, 저장하지 않은 조각은 30초 뒤 자동으로 영구 삭제된다.

텍스트 아래에는 'Ask Siri' 선택지가 뜬다. 모르는 기술 용어나 웨이터가 말한 소스 이름 같은 것을 Siri에게 물을 수 있다고 Apple은 설명했다. 크라운을 누르면 알림음이 울리고 화면에 애니메이션이 나와, 제스처와 소리와 화면으로 주변 사람에게 기록 사실을 알린다.

Siri Recaps는 대화를 요약해 메모로 남긴다. Apple은 화자를 구분하지 않고, 음성 원본을 저장하지 않으며, 한 글자씩 받아 적지도 않는다고 밝혔다. 사용자가 직접 메모하듯 짧은 문장 하나와 핵심을 짚은 항목 몇 개로 정리하되 감정이나 어조는 담지 않는다. 주제에 따라 날짜나 마감, 가격이나 결제 조건 같은 사실이 들어간다. Apple은 업무 회의, 학부모 상담, 개인 트레이닝 수업 같은 자리를 예로 들었다.

하루가 끝나면 저장된 요약을 검토하라는 알림이 뜨고, 아침에 시계 잠금을 처음 풀 때도 같은 알림이 나온다. 남길 요약은 Notes 앱에 저장하거나, 개인적인 내용이면 Journal 앱으로 내보낸다. 아무것도 하지 않으면 7일 안에 삭제된다.

Siri Recaps는 직접 켜거나 일정을 정해 쓸 수 있다. 근무 시간에만 작동시키거나 밤에는 돌지 않게 할 수 있고, 일정을 걸어 둬도 제어 센터에서 언제든 끌 수 있다. Siri Recaps는 헤드폰으로 음악을 듣거나 노이즈 캔슬링을 쓰는 동안에는 대화를 기록하지 않는다. 정부가 부여한 식별번호, 금융·인증 정보, 일부 개인 식별 정보, 자해를 부추기는 표현은 요약에서 빠지게 설계했다고 Apple은 밝혔다.

처리 과정과 개인정보 보호

Audio Intelligence는 S11 칩, 내장 마이크, iPhone에서 도는 Apple Intelligence 모델, Apple의 Private Cloud Compute(PCC)를 함께 쓴다. 상시 작동하는 프로세서 안의 보안 영역(secure enclave)에 전용 오디오 버퍼가 있어 원본 음성을 처리하며, Apple을 포함해 누구도 이 음성에 접근할 수 없다. 음성은 보안 페어링으로 연결된 iPhone만 받을 수 있다.

S11 칩의 경량 AI 모델이 착용자가 참여한 대화가 진행 중인지 판별하면, 해당 음성이 iPhone의 보안 영역으로 넘어간다. iPhone은 기기 안에서 음성을 군더더기 단어를 뺀 압축 텍스트로 바꾸고, 이를 암호화해 PCC로 보내 요약을 만든다. 요약은 iPhone으로 돌아오며, PCC에 남은 요약과 생성 과정의 자료는 즉시 지워진다. iPhone의 요약은 사용자만 볼 수 있고 Apple 기기 사이에서 동기화될 때도 암호화된다. Live Rewind의 15초 조각도 Apple Watch가 음성을 iPhone으로 넘겨 만든다.

Apple은 이 기능들이 시계와 iPhone의 배터리 수명에 영향을 주지 않을 것이라고 밝혔다.

TechCrunch는 대화를 듣는 Live Rewind와 Siri Recaps를 논란 소지가 큰 기능으로 꼽았다. Meta의 AI 안경 같은 AI 기록 기기에 반발이 있었던 만큼, Apple이 기능의 쓸모와 주변 사람의 프라이버시 존중을 함께 꾀했다는 설명이다.