인터뷰

AssemblyAI의 Dylan Fox CEO & 설립자 – 인터뷰 시리즈

Antoine Tardif
Unite.AI를 Google의 선호 소스에 추가
핵심 포인트AssemblyAI의 3000만 달러 규모의 시리즈 B 투자는 최첨단 AI 모델을 간단한 API를 통해 제공하겠다는 사명을 가속화할 것입니다.
더 보기
  • AssemblyAI의 3000만 달러 규모의 시리즈 B 투자는 최첨단 AI 모델을 간단한 API를 통해 제공하겠다는 사명을 가속화할 것입니다.
  • 이 회사의 가장 큰 도전 과제는 음성 인식 기술에 필요한 높은 비용과 전문 인재입니다.
  • AssemblyAI는 요약, 감정 분석, 콘텐츠 조정을 위한 오디오 인텔리전스 모델로 단순 필사를 넘어 확장하고 있습니다.

Dylan Fox는 AssemblyAI의 CEO 겸 설립자입니다. AssemblyAI는 Speech-to-Text API를 통해 오디오·비디오 파일과 라이브 오디오 스트림을 자동으로 텍스트로 변환하는 플랫폼입니다.

머신 러닝에 처음 관심을 갖게 된 계기는 무엇인가?

저는 프로그래밍을 배우기 시작했고 대학을 다니던 워싱턴 DC에서 열린 파이썬 미트업에 참석했습니다. 대학 과정에서 저는 알고리즘 유형의 프로그래밍 문제에 더 관심을 갖게 되었고, 자연스럽게 머신 러닝과 NLP로 관심을 확장했습니다.

AssemblyAI를 설립하기 전에 시스코의 선임 소프트웨어 엔지니어로 근무했다. 당시에는 어떤 일을 했나?

시스코에서 저는 협업 제품을 위한 머신 러닝에 중점을 둔 선임 소프트웨어 엔지니어로 근무했습니다.

시스코에서 근무하고 음성 인식 기술을 구입하는 문제로 인해 AssemblyAI를 설립하게 된 계기는 무엇인가?

전 직장에서 저는 여러 AI 프로젝트를 진행했으며, 음성 인식이 필요한 프로젝트도 있었습니다. 그러나 음성 인식을 제공하는 모든 회사는 매우 구식이었고, 구입하기 어려웠으며, 구식 AI 기술을 사용하고 있었습니다.

AI 연구에 점점 관심을 갖게 되면서 음성 인식 분야에서 많은 연구가 이루어지고 얼마나 빠르게 발전하는지 알게 되었습니다. 이런 요인들이 합쳐져, 최신 AI 연구를 활용하는 Twilio 같은 API 회사를 만들면 개발자가 최첨단 음성 인식 AI 모델에 훨씬 쉽게 접근하고 훨씬 나은 개발 경험을 얻을 수 있지 않을까 생각하게 되었습니다.

그리고 그것이 AssemblyAI의 아이디어가 탄생한 계기가 되었습니다.

정확하고 신뢰할 수 있는 음성 인식 기술을 구축하는 데 가장 큰 도전은 무엇인가?

비용과 인재가 음성 인식 기술을 구축하는 데 가장 큰 도전입니다.

데이터를 확보하는 데는 큰 비용이 들며, 견고한 음성 인식 시스템을 구축하려면 보통 수십만 시간의 데이터가 필요합니다. 학습에 필요한 연산 자원도 막대합니다. 이런 모델을 실제 서비스 환경에서 제공하는 데도 비용이 많이 들며, 최적화를 통해 경제성을 확보하려면 전문 인력이 필요합니다.

이런 기술을 구축하려면 구하기 어려운 전문 역량도 필요합니다. 그래서 고객들은 저희가 자체적으로 연구·학습·배포하는 강력한 AI 모델을 이용하기 위해 찾아옵니다. 간단한 API 하나로 ASR과 NLP용 최첨단 AI 모델에 관한 수년간의 연구 성과에 접근할 수 있습니다.

AssemblyAI는 오디오와 비디오 콘텐츠의 전사 외에도 추가 모델을 제공합니다. 이러한 모델에 대해 설명해 주시겠습니까?

저희 AI 모델 제품군은 실시간 및 비동기 전사를 넘어섭니다. 고객이 오디오 데이터를 분석하고 더 잘 이해하도록 돕는 추가 모델들을 Audio Intelligence 모델이라고 부릅니다.

요약 모델은 전체 요약과 시간 코드가 있는 요약을 제공합니다. 대화 주제가 바뀌면 자동으로 구간을 나누고 각 ‘챕터’의 요약을 생성합니다. YouTube 챕터와 비슷합니다.

감성 분석 모델은 오디오 파일에서 말한 각 문장의 감성을 감지합니다. 각 문장은 긍정적, 부정적, 중립적으로 표시될 수 있습니다.

엔티티 감지 모델은 오디오 파일에서 말한 다양한 엔티티를 식별합니다. 사람이나 회사 이름, 이메일 주소, 날짜, 위치 등입니다.

주제 감지 모델은 오디오와 비디오 파일에서 말한 주제를 레이블링합니다. 예측된 주제 레이블은 표준화된 IAB 분류법을 따르므로 컨텍스트 타게팅에 적합합니다.

콘텐츠 모더레이션 모델은 오디오와 비디오 파일에서 민감한 콘텐츠를 감지합니다. 혐오 발언, 폭력, 민감한 사회 문제, 알코올, 마약 등입니다.

AssemblyAI를 사용하는 회사의 가장 큰 사용 사례는 무엇인가?

AssemblyAI를 사용하는 회사의 가장 큰 사용 사례는 통신, 비디오, 가상 회의, 미디어 등 4가지 범주에 걸쳐 있습니다.

CallRail은 전화 통신 분야의 좋은 고객 사례입니다. AssemblyAI의 핵심 전사, 자동 전사 하이라이트, 개인 식별 정보(PII) 삭제 모델을 활용하여 고객에게 강력한 대화 인텔리전스 솔루션을 제공합니다.

CallRail은 이제 전화 통화의 중요한 내용을 고객을 위해 대규모로 자동 발굴하고 식별할 수 있습니다. 특정 고객 요청, 자주 묻는 질문, 자주 쓰이는 키워드와 문구 등이 해당됩니다. PII 삭제 모델은 전사 텍스트에서 사회보장번호, 신용카드 번호, 개인 주소 등 민감한 정보를 자동으로 찾아 제거합니다.

비디오 사용 사례는 동영상 스트리밍 플랫폼에서 Veed 같은 편집기까지 다양합니다. Veed는 AssemblyAI의 핵심 전사 모델로 사용자의 동영상 편집 과정을 단순화합니다. 사용자는 동영상을 전사한 뒤 자막을 이용해 직접 편집할 수 있습니다.

가상 회의 분야에서는 Fathom 같은 회의 전사 소프트웨어 회사가 AssemblyAI로 지능형 기능을 구축합니다. 사용자가 Zoom 통화를 전사하고 주요 순간을 강조할 수 있어 회의 참여도를 높이고, 회의 중이나 이후의 메모 작성 같은 지루한 작업을 없애 줍니다.

미디어 분야에서는 팟캐스트 호스팅 플랫폼이 콘텐츠 모더레이션 및 주제 감지 모델을 사용합니다. 이를 통해 브랜드 안전성을 위한 더 나은 광고 도구를 제공하고 동적 광고로 사용자 생성 콘텐츠에서 수익을 창출할 수 있습니다.

AssemblyAI는 최근 3,000만 달러의 시리즈 B 자금을 조달했습니다. 이것은 어떻게 AssemblyAI의 미션을 가속화할 수 있을까요?

AI 분야의 발전은 매우 흥미롭습니다. 저희 목표는 간단한 API 모음을 통해 인터넷의 모든 개발자와 제품 팀이 이러한 발전을 이용하도록 하는 것입니다. 음성 인식, 요약, 언어 식별 등 ASR 및 NLP 작업을 위한 최첨단 AI 모델을 계속 연구하고 학습하면서, 간단한 API를 통해 이 모델들을 개발자와 제품 팀에 무료로 제공할 것입니다.

AssemblyAI는 개발자와 제품 팀이 접근할 수 있는 곳입니다. 여기서 개발자와 제품 팀은 새로운 제품, 서비스, 회사를 구축하는 데 필요한 고급 AI 모델에 쉽게 접근할 수 있습니다.

지난 6개월 동안 스페인어, 독일어, 프랑스어, 이탈리아어, 힌디어, 일본어 등 15개 새 언어에 대한 ASR 지원을 출시했습니다. 또한 요약 모델, 실시간 ASR 모델, 콘텐츠 모더레이션 모델을 크게 개선하고 수많은 다른 제품 업데이트를 내놓았습니다.

시리즈 A 자금은 아직 거의 사용하지 않았습니다. 이번 신규 자금으로 기존 자금이 운영을 뒷받침할 수 있는 기간을 줄이지 않으면서 활동을 적극적으로 확대할 수 있습니다.

이 자금으로 제품 로드맵을 앞당기고, AI 연구와 추론 엔진의 속도를 높이기 위한 더 나은 AI 인프라를 구축하며, AI 연구 팀을 확대할 것입니다. 현재 팀에는 DeepMind, Google (GOOGL ) Brain, Meta AI, BMW, Cisco 출신 연구자들이 있습니다.

AssemblyAI에 대해 추가로 공유하고 싶은 내용이 있나요?

저희의 미션은 개발자와 제품 팀이 매우 큰 규모에서 최첨단 AI 모델에 접근할 수 있도록 하는 것입니다. 간단한 API를 통해 제공됩니다.

감사합니다. 더 많은 정보를 원하는 독자는 AssemblyAI를 방문하십시오.

앙투안은 Unite.AI의 비전 있는 리더이자 창립 파트너로, AI와 로봇공학의 미래를 만들어 가고 발전시키는 데 변함없는 열정을 쏟고 있습니다. 여러 기업을 창업한 그는 AI가 전기만큼 사회를 크게 변화시킬 것이라고 믿으며, 혁신적인 기술과 범용 인공지능(AGI)의 잠재력에 관해 자주 열정적으로 이야기합니다.

미래학자로서 이러한 혁신이 세상을 어떻게 바꿀지 탐구하는 데 전념하고 있습니다. 또한 미래를 새롭게 정의하고 산업 전반을 변화시키는 첨단 기술에 대한 투자에 초점을 맞춘 플랫폼인 Securities.io의 설립자입니다.