AI 모델 및 플랫폼

앤트로픽, 클로드 데스크톱 제어 기능을 맥에 적용

Alex McFarland
Unite.AI를 Google의 선호 소스에 추가
핵심 포인트Claude는 어떤 앱 통합으로도 작업을 완료할 수 없을 때만 데스크톱을 점유합니다.
더 보기
  • Claude는 어떤 앱 통합으로도 작업을 완료할 수 없을 때만 데스크톱을 점유합니다.
  • Anthropic은 데스크톱 제어 기능을 구축하기 위해 Vercept를 인수하고 그 팀을 흡수했습니다.
  • 데스크톱 제어는 화면에 보이는 데이터를 노출하고 통합 방식이 피하는 프롬프트 주입 공격을 유발합니다.

앤트로픽은 클로드의 기능을 확장하여 맥에서 직접 데스크톱 제어를 가능하게 하여, AI가 클릭, 입력, 및 애플리케이션을 탐색할 수 있도록 하였습니다. 이는 슬랙, 캘린더 앱 등과 같은 표준 통합이 불가능한 경우에 사용됩니다.

이 기능은 현재 클로드 코워크와 클로드 프로 구독자($20/월) 및 클로드 맥스 구독자($100/월)를 위한 클로드 코드에서 연구 프리뷰로 제공되고 있습니다. 현재는 맥에서만 사용할 수 있습니다.

데스크톱 제어의 작동 방식

클로드는 기본적으로 데스크톱 제어를 사용하지 않습니다. 시스템은 먼저 연결된 캘린더, 슬랙 또는 지원되는 다른 도구 등 기존 앱 통합을 통해 작업을 완료하려고 시도합니다. 기존 통합이 불가능한 경우에만 클로드가 마우스와 키보드를 제어하여 작업을 직접 완료합니다.

사용자는 클로드가 제어할 수 있는 각 애플리케이션에 대해 명시적으로 승인해야 하며, 사용자는 세션 중에 언제든지 클로드를 중지할 수 있습니다. 설계는 연구 프리뷰 단계에서 인간을 루프에 유지하는 앤트로픽의 우선순위를 반영합니다.

데스크톱 제어와 함께, 앤트로픽은 디스패치를 출시했습니다. 이는 사용자가 아이폰에서 클로드에 작업을 할당하고 데스크톱에서 완료된 작업으로 돌아갈 수 있는 동반 기능입니다. 모바일 앱은 활성화된 코워크 세션에 연결되며, 모든 처리는 로컬에서 맥에서 발생합니다.

버셉트 인수, 기술의 기반이 되는 기술

이 기능은 앤트로픽이 2026년 2월에 인수한 시애틀 소재 스타트업 버셉트 AI의 기술을 기반으로 합니다. 버셉트는 2024년 11월에 설립되었으며, 알렌 인스티튜트 포 AI의 전 연구원인 키아나 에스하니, 루카 웨이즈, 로스 기르식, 매트 디트케가 공동 설립했습니다. 버셉트는 인수 거래가 완료되기 전에 Fifty Years가 주도한 시드 투자 라운드에서 1,600만 달러를 조달했습니다. 에인젤 투자자는 전 구글 (GOOGL ) CEO 에릭 슈미트, 구글 딥마인드 수석 과학자 제프 딘, 크루즈의 설립자 카일 보그트, 드롭박스 (DBX )의 공동 설립자 아라시 페르도시 등이 포함되어 있습니다.

버셉트의 제품인 Vy는 맥용 클라우드 기반 컴퓨터 제어 에이전트로 작동했습니다. 앤트로픽은 버셉트 사용자에게 30일간의 통지 후 2026년 3월 25일에 Vy를 종료하고 팀을 흡수했습니다. 공동 설립자 에스하니는 그녀의 팀이 “앤트로픽에 합류한 지 4주가 채 되기 전에 첫 번째 제품을 출시했다”고 말했습니다. 디스패치를 그 결과로 지적했습니다.

클로드의 컴퓨터 사용 성능은 앤트로픽이 2024년 말에 처음으로 이 기능을 도입한 이후 크게 개선되었습니다. 컴퓨터를 조작하는 AI 모델의 표준 평가인 OSWorld Verified에서 클로드 소네트 모델은 초기 출시 시 15% 미만의 점수를 받았습니다. 클로드 소네트 4.6에서는 이 점수가 72.5%로 상승하여 인간 기준선의 70-75%에 근접했습니다. 오퍼스 4.6은 동일한 테스트에서 72.7%의 점수를 받았습니다.

보안 및 안정성, 여전히 열린 질문

데스크톱 제어는 브라우저 기반 또는 API 통합과는 다른 위험을 생성합니다. 클로드가 라이브 데스크톱을 작동할 때, 화면에 보이는 모든 데이터, 열린 파일 및 사용자가 승인한 애플리케이션에 접근할 수 있습니다. 앤트로픽의 이전 컴퓨터 사용 연구는 화면 콘텐츠에 삽입된 악의적인 지시가 사용자의 의도를 무시하게 만들 수 있는 프롬프트 인젝션을 주요 공격 표면으로 확인했으며, 소네트 4.6은 이전 버전보다 개선된 저항력을 보여주었습니다.

안정성은 추가적인 우려입니다. 클로드의 이전 컴퓨터 사용 아키텍처는 연속적인 비디오 피드가 아닌 순차적인 스크린샷을 처리하여 클로드가 짧은 동작이나 알림을 놓칠 수 있었습니다. 버셉트 팀의 접근 방식이 대규모 환경에서 이 문제를 해결하는지 여부는 아직 공개적으로 문서화되지 않았습니다.

오픈AI의 맥 기반 브라우저 에이전트와 유사한 제품은 데스크톱 자동화가 소프트웨어 인터페이스가 변경될 때 쉽게 중단되기 때문에 도입에 어려움을 겪었습니다. 앤트로픽의 데스크톱 제어를 표준 통합에 실패할 경우에만 활성화하는 선택은 오류의 표면을 줄이지만, 기능의 범위를 완전히 자율적인 데스크톱 에이전트와 비교하여 좁히게 됩니다.

더 큰 질문은 비즈니스 자동화를 위한 AI 에이전트가 제어된 데모에서 라이브 프로덕션 환경으로 신뢰성 있게 이동할 수 있는지에 관한 것입니다. 클로드의 컴퓨터 사용 벤치마크 점수는 약 16개월 동안 5배로 개선되었습니다. 이는 의미 있는 트레이젝토리입니다. 그러나 엄선된 작업의 벤치마크 향상이 복잡한 실제 맥 환경에서의 성능을 항상 예측하는 것은 아닙니다. 예상치 못한 대화 상자, 애플리케이션 업데이트 및 상태 변화 등은 어떤 평가도 완전히 포착하지 못합니다. 연구자들이 이 기능을 더 체계적으로 조사하기 시작할 때, 앤트로픽이 보안 공개를 처리하는 방식은 데스크톱 제어가 연구 프리뷰 상태를 넘어서 준비가 되었는지 여부를 테스트하는 첫 번째 실제 테스트가 될 것입니다.

Alex는 Unite.AI의 AI 기반 뉴스 운영을 이끌고 있습니다. 저널리즘, 조사, 자동화를 결합해 인공지능에 관한 소식을 시의적절하게, 확장 가능한 방식으로 보도할 수 있도록 지원합니다. 그의 업무는 매체의 편집 기준을 유지하면서 새로운 AI 동향을 효율적으로 찾아 보도하는 데 기여합니다.