Apple Watch의 Audio Intelligence, 개발자 베타 테스트 시작

TechCrunch는 2026년 11월 2일, Apple Watch용 Audio Intelligence 기능인 Live Rewind와 Siri Recap이 iOS 27.3 베타에서 개발자에게 제공되기 시작했다고 보도했다. 기능이 정식 출시되기 전에 더 폭넓은 공개 베타를 진행할 예정이다.

Apple은 2026년 9월 9일 Apple Watch Series 12 발표에서 이 기능 묶음을 소개하며, 두 가지 대화 기능을 그해 후반에 베타 버전으로 선보이겠다고 밝혔다. Apple의 지원 안내서는 Audio Intelligence를 사용자가 선택해 활성화할 수 있는 네 가지 기능으로 설명한다. Live Rewind와 Siri Recap 외에도 사이렌, 경보기, 초인종 소리를 감지해 사용자에게 알리는 Sound Recognition과 Shazam을 통한 자동 Music Recognition이 포함된다. 자동 Music Recognition은 감지한 곡의 제목과 아티스트를 Smart Stack에 표시한다.

대화를 다시 확인하는 두 가지 방법

라이브 되감기는 디지털 크라운을 의도적으로 두 번 눌렀을 때만 활성화됩니다. 시계 화면에 이전 15초 동안의 음성을 텍스트로 표시하며, 해당 내용에 대해 Siri에게 질문하거나 발췌 내용을 Siri 앱에 저장할 수 있습니다. 사용자가 이 중 어느 작업도 하지 않으면 시계 화면이 어두워진 뒤 약 30초 후 텍스트가 사라집니다.

시계가 무음 상태이거나 헤드폰이 연결되어 있어도 기능이 활성화되면 소리 알림이 울리고, 전체 화면 애니메이션과 마이크 표시기가 나타난다. 이러한 신호는 주변 사람들에게 이 기능이 사용되고 있음을 알리기 위한 것이다.

Siri Recap은 수동으로 실행하거나 시간과 위치를 기준으로 일정을 설정해 실행할 수 있으며, 언제든지 제어 센터에서 끌 수 있다. 이 기능은 축어록 대신 제목과 간단한 요약, 핵심 내용을 제공하며, 발언을 신원이 확인된 화자에게 귀속하지 않는다. 저장하지 않은 요약은 7일이 지나면 자동으로 삭제된다. 저장한 내용은 편집하거나 삭제할 수 있고 Notes, Journal 등의 앱으로 내보낼 수도 있다. Apple은 생성된 요약과 발췌 내용이 불완전하거나 부정확할 수 있으며, 중요한 세부 사항이 빠지거나 잘못 이해되거나 부정확하게 요약될 수 있다고 경고한다.

하드웨어에서 클라우드까지 이어지는 처리 과정

Apple의 Audio Intelligence 개인정보 보호 개요에 따르면, S11 칩의 Secure Exclave는 센서 데이터를 시스템의 나머지 부분과 분리해 처리하는 하드웨어 격리 공간이다. 순환 오디오 버퍼는 watchOS와 앱, 사용자, Apple 모두 접근할 수 없으며, 이전 오디오는 녹음으로 축적되는 대신 계속해서 새 오디오로 덮어쓰인다.

Siri Recap의 경우 S11 칩의 경량 모델이 대화가 진행 중인지 감지한다. 시계는 오디오를 암호화해 페어링된 iPhone의 Secure Exclave로 전송한다. 그곳에서 기기 내 음성 인식 기능이 오디오를 텍스트로 변환하고, 언어 모델이 원래 길이의 절반 미만으로 축약한다. 그런 다음 원본 오디오는 영구적으로 삭제된다.

축약된 텍스트는 암호화되어 Private Cloud Compute로 전송되며, 그곳에서 Apple Foundation Models가 제목과 요약, 핵심 내용을 생성한다. Apple은 결과를 돌려보낸 뒤 클라우드 서비스에서 즉시 삭제한다고 밝혔다. 이중 인증과 기기 암호를 설정하면 저장한 요약과 Live Rewind 발췌 내용을 종단 간 암호화 방식으로 iCloud와 동기화할 수 있으며, Apple은 암호화 키를 보관하지 않는다.

Siri Recap은 금융 데이터와 정부 발급 식별자, 인증 데이터, 일부 개인 식별 정보를 제외하도록 설계됐다. 지원 안내서에서는 자동 필터링으로 모든 민감한 정보가 제거되지 않을 수도 있다고 경고한다.

호환 기기와 초기 사용 제한

Live Rewind와 Siri Recap을 사용하려면 Apple Intelligence를 지원하는 iPhone 16 이상 모델(iPhone 16e 제외)과 페어링된 Apple Watch Series 12 또는 Apple Watch Ultra 4가 필요하다. Apple의 출시 조건에 따르면 초기 지원 언어는 영어이며, 처음에는 EU에서 이 기능을 사용할 수 없다. 또한 서버 측 모델에 의존하는 기능에는 일일 사용 한도가 적용된다. 대화 기능은 13세 미만 사용자가 이용할 수 없으며, 아동 계정을 사용하는 18세 미만 사용자는 부모나 보호자가 접근 권한을 활성화해야 한다.

이 기능은 시계와 휴대전화, 클라우드에 걸쳐 대화 내용을 다시 확인할 수 있도록 설계된 독특한 형태의 웨어러블 AI다. 엄격한 삭제 및 접근 제어 기능을 갖췄지만, 대화 내용을 정확하게 기록한다고 보장하지는 않는다. 사용자에게 중요한 차이는 원본 오디오에 접근할 수 없도록 하는 것과 생성된 텍스트를 신뢰하는 것 사이에 있다. 이 구조는 전자를 뒷받침하지만, 후자에는 Apple 자체의 정확도 경고가 따른다.