토머 아하로니, Nagish의 CEO 및 공동 창립자 – 인터뷰 시리즈

토머 아하로니, Nagish의 CEO 및 공동 창립자는 블룸버그에서 소프트웨어 엔지니어로 일한 강한 기술적 기반과 컬럼비아 대학교에서 NLP 및 IoT 연구, 以及 이스라엘 국방군 내 기술 정보 역할에서 얻은 경험을 통해 접근성과 기술 및 의사소통의 교차점에 대한 열정을 결합합니다.

Nagish는 청각 장애인 또는 난청인들이 전화 통화를 완전히 사용할 수 있도록 설계된 AI 기반 의사소통 플랫폼입니다. 이 앱은 실시간 자막 및 텍스트 음성 변환 기능을 제공하며 사용자가 기존 전화 번호를 유지하고 완전한 개인 정보를 유지하며 개인화된 사전, 저장된 전사본, 무결한 장치 통합과 같은 기능을 통해 대화를 관리할 수 있습니다.

블룸버그와 컬럼비아 대학교에서 NLP 연구를 한 경험을 바탕으로 Nagish를 만들게 된 결정적인 순간이나 통찰력이 무엇입니까?

저는 컬럼비아 대학교에서 학부 시절에 한 번 수업 중에 전화가 왔습니다. 저는 수업을 방해할까 봐 전화를 받지 못했는데, 그때부터 전화 통화를 어떻게 해야 할까라는 생각을 하게 되었습니다. 청각 장애인이나 난청인들이 전화 통화를 어떻게 하는지에 대한 더 큰 질문으로 이어졌습니다.

그것은 2019년이었고, 저와 공동 창립자 알론 에저는 청각 장애인 커뮤니티가 통역사와 자막 보조를 많이 의존하고 있다는 것을 발견했습니다. 우리는 그것이 미친 생각이라고 생각했습니다. 그래서 우리는 지역 청각 장애인 커뮤니티의 사람들과 접촉하기 시작했고, 그들이 말하는 내용은 우리에게 정말 놀라웠습니다. “전화가 오면 그냥 끊어버립니다”, “전화를 사용하지 않습니다”, “형제에게 전화를 부탁합니다”와 같은 대답을 받았을 때, 우리는 사람들이 전화 사용법을 물었을 때 받았습니다.

그 여름, 저는 블룸버그에서 소프트웨어 엔지니어로 인턴했습니다. 우리 팀에는 또 다른 인턴이 있었는데, 그는 청각 장애인이었습니다. 저는 그녀와 만나서 어떤 문제를 해결해야 했을 때, 저는 그녀와 두 명의 통역사를 예약해야만 했습니다. “빨리 통화해서 문제를 해결하자”라는 말은 불가능했습니다. 인사과에 그것에 대해 이야기했을 때, 기술 용어에 익숙한 두 명의 통역사를 찾는 것이 거의 불가능하다는 것을 알게 되었습니다. 우리는 그들을 사용할 때마다 사용하지만, 그들은 전시간 사용할 수 없습니다.

더 많이 배우면 배울수록, 이것들이 고립된 불편함이 아니라 더 큰 패턴의 일부라는 것이 분명해졌습니다. 오늘날, 접근성 개선에도 불구하고, 여전히 많은 도전과 해결해야 할 영역이 있습니다. Nagish에서는 최근에 조사하고 보고서를 발표했습니다. 청각 장애인과 난청인들이 의사소통 기술의 영향, 청각 장애인 65%가 효과적으로 의사소통하기 위해 주당 최소 한 번은 청각 있는 사람의 도움을 필요로 한다고回答했습니다.那种 의존은 전문 환경에서 실제 장벽을 창조하며, 62%의 청각 장애인 응답자가 의사소통 도전이 경력 결정과 특정 역할을 추구하거나 발전시키는 능력을 제한한다고回答했습니다.

이러한 경험과 저의 청각 장애인과의 연결이 증가함에 따라, 저는 Nagish의 첫 번째 버전을 만들게 되었습니다. 우리는 하나의 믿음이 변하지 않았습니다. 의사소통은 접근 가능하고 비공개되어야 합니다.

알론과 저는 프로토타입을 만들었고, 반응은 믿을 수 없었습니다. 우리는 Nagish가 삶을 변화시키는 것이 될 수 있다는 것을 깨달았습니다. 그런 다음 COVID-19가 발생했고, 필요는 폭발적으로 증가했으며, 사람들이 의사소통하는 방식의 접근성 부족이 실제로 명백해졌습니다.

Nagish의 초기 날들은 어떤 것이었으며, 접근성 목표와 최신 AI 기술을 결합하는 도전을 어떻게 극복했습니까?

Nagish의 초기 날들은 전염병 期間이었으므로, 우리의 삶에서 일 외에는 거의 아무 일도 없었습니다. 알론과 저는 몇 블록 떨어진 곳에 살았고, 많은 시간을 моз물어고, 프로토타입을 만들고, 최신 기술을 구현하는 데 사용했습니다. 우리는 몇 개월 동안 하루 12시간 이상 우리의 아파트에서 일했습니다.

그만큼의 시간을 갖는 것은 우리에게 사용자와 그들의 필요를 이해하는 데 많은 시간을 보낼 수 있었습니다. 우리는 가정하지 않았습니다. 그 시점에서, 우리는 아직 회사를 만들 생각이 없었습니다. 우리를 추진한 것은 사용자들의 어려움에 대한 이야기였고, 기술로 그것을 해결할 수 있는 기회를 갖고 있다는 것입니다.

Nagish의 AI 기술은 어떻게 청각 장애인 또는 난청인과 청각 있는 세계 사이의 의사소통 격차를existing 도구가 할 수 없는 방식으로 연결합니까?

Nagish는 AI를 사용하여 의사소통 격차를 연결합니다. 우리의 엔진은 음성을 텍스트로, 텍스트를 음성으로, 수화로 텍스트를 변환합니다(그리고 그 반대도 마찬가지입니다). 그것은 청각 장애인 또는 난청인들이 단순히 통화 중에 무엇이 말되는지 볼 수 있고, 타이핑이나 말로 응답할 수 있는 것을 의미합니다. 반면, 다른 쪽의 청각 있는 사람은 표준 전화 통화를 경험합니다. 이러한 종류의 AI가 존재하기 전에, 사람들은 인간 운영 릴레이 서비스에 의존해야 했습니다. 그 서비스에서는 第三者の人が 줄에 앉아 모든 전사를 수행했습니다.

Nagish에서는 릴레이 운영자가 필요 없습니다. 또한, 통역사가 필요 없습니다. 기다리지 않아도 됩니다. 전통적인 릴레이 서비스는 즉시성, 개인 정보, 독립성을 제공할 수 없습니다. Nagish는 모든 종류의 통화에 대응할 수 있습니다. 작업 회의, 가족 체크인, 비상 사태, 고객 서비스 통화 등에 대응할 수 있습니다. 이 앱은 쉽게 일상 생활에 통합될 수 있습니다. 사용자는 자신의 번호를 유지할 수 있고, 실시간 자막을 사용할 수 있으며, 동일한 앱을 사용하여 전화 통화와 대면 대화를 할 수 있습니다. 전체 경험은 마찰을 줄이고 의사소통을 자연스럽고 무결하게 느끼도록 설계되었습니다.

표준 자막이나 자막을 넘어서서, Nagish는 어떻게 상호 작용을 더 자연스럽고 포괄적으로 만들까요?

우리는 언어가 단순히 단어가 아니라, 문화, 정체성, 그리고ニュアンス라는 것을 알고 있습니다. 특히 수화는 얼굴 표정, 감정, 지역적 변异에 의존합니다. 상호 작용을 기계적이 아닌 자연스럽게 만들기 위해, 우리는 직접 청각 장애인 언어학자와 수화 전문가와 협력합니다. 그들은 우리의 AI가 어떻게 학습하고 행동하는지 형성하는 데 도움을 줍니다. 그래서 기술은 커뮤니티와 함께 구축되며, 단순히 데이터에 훈련되지 않습니다.

표준 자막 도구는 종종 “말한 단어가 여기 있습니다”에서 멈춥니다. 우리의 목표는 실제 대화를 지원하는 것입니다. 우리는 대화의 흐름을 관리하고, 맥락을 제공할 수 있는 AI 에이전트를 구현하고 있습니다. 또한, Nagish는 대화 흐름을 최적화한 실시간 자막을 제공하며, 사용자 지정 글꼴, 스팸 필터링, 보이스 메일 전사, 사용자가 선택할 때 기기에서 전사본을 저장하고 검토할 수 있는 기능을 제공합니다. 모든 것이 청각 있는 사람들이 전화 통화에서 경험하는 것과 동일한 경험을 창조합니다.

의도와 тон을 포착하는 데 자연 언어 처리의 역할은 무엇입니까?

자연 언어 처리와 자연 언어 이해는 Nagish가 단순히 말한 단어가 아니라, 무엇을 의미하는지 포착하는 핵심입니다. 음성은 맥락을 추가하는 큐가 가득 차 있습니다. 강조, 더 많은 것 등, 우리의 NLP 모델은 이러한 레이어를 포착하도록 설계되었습니다. 그래서 사용자는 기본적인 전사본 이상의 것을 얻습니다. 목표는 자막이 자연스러운 대화와 가장 가까운 것처럼 느끼도록 만드는 것입니다.

실제 상황을 위해 Nagish는 빠른 말, 중첩된 목소리, 감정적 뉴앙스를 처리하도록 훈련되었습니다. 상황 인식은 우리가 인간 전사자와 다른 AI 도구보다 더 나은 성능을 내는 주요 이유입니다. 시스템은 단순히 단어를 추측하지 않습니다. 대화의 흐름을 사용하여 의도를 이해합니다.

Nagish는 어떻게 더 포괄적인 직장을 구축하는 데 도움이 되며, 접근성에 대한 금전적 및 물리적 장벽을 해결합니까?

Nagish는 접근성을 확대하기 위해 금전적 및 물리적 장벽을 제거하여 더 포괄적인 직장을 구축하는 데 도움이 됩니다. 전통적으로, 접근 가능한 직장을 만들기 위해서는 예약된 통역사를 사용해야 했으며, 이는 필수적이지만 일상적인 의사소통, 즉 임시 회의 또는 시간 민감한 작업에 대해서는 항상 실용적이지 않습니다. 이러한 제한은 지연을 초래하고, 비용을 추가하며, 의도하지 않게 청각 장애인 또는 난청인 직원을 작업의 흐름에서 제외할 수 있습니다.

Nagish는 그 역학을 변경하려고 합니다. 직원들에게 즉시적으로 그리고 독립적으로 의사소통할 수 있는 능력을 제공함으로써, 회사는 그 장벽을 제거할 수 있습니다. 사람들이 완전히 참여할 수 있고, 더 강한 팀을 만들 수 있고, 더 공평한 직장을 만들 수 있습니다.

우리가 최근에 조사한 조사에 따르면, 60% 이상의 청각 장애인 및 난청인 응답자가 의사소통 장벽이 그들의 경력 결정과 전문적 성장에 영향을 미쳤다고回答했습니다. 그것은 심각한 도전이며, 최근 몇 년 동안 이루어진 모든 진행에도 불구하고, 여전히 많은 작업이 남아 있습니다.

우리는 고용주들이 반응적인 수단에서 적극적인 포괄로 이동하도록 도와줍니다. 모든 직원이 독립적으로 그리고 자신감 있게 기여할 수 있는 직장을 만듭니다.

청각 장애인 및 난청인 사용자로부터 어떤 피드백을 받았으며, 그것은 제품의 진화에 어떻게 영향을 미쳤습니까?

우리는 청각 장애인 커뮤니티와 함께 Nagish를 구축했습니다. 그 이후로, 우리는 흥분, 호기심, 그리고 드문 경우에는 약간의 주저함을 받았습니다. 그것은 정확히 그럴 필요가 있습니다. 청각 장애인 커뮤니티는 새로운 기술에 대해 매우 주의 깊고 호기심이 많습니다. 우리는 과거의 과장된 약속을 피하려고 합니다. 우리는 완벽함보다 진행을 우선시합니다. 그것은 시간이 걸리지만, 우리의 최종 목표는 완벽함입니다.

이 커뮤니티 중심의 마음가짐은 우리가 최근에 배운 것과 일치합니다. 보조 기술을 채택한 후, 사용자들은 일일 독립성에서 큰 증가를 보였습니다. 독립적으로 의사소통할 수 있는 사람들의 수는 청각 장애인 사용자에게서 37%에서 60%로, 난청인 사용자에게서 32.9%에서 63%로 증가했습니다. 그것은 우리가 매일 듣는 피드백과 일치합니다. 사람들은 의사소통을 더 쉽게 만들고, 더 일관적이고, 언제든지 사용할 수 있는 도구를 원합니다.

수화 해석 기술을 만들기 위한 우리의 연구에 대해, 우리의 목표는 인간 통역사를 대체하거나 기존 의사소통 방법을 대체하는 것이 아닙니다. 접근성이 더 일관적이고 언제 어디서나 사용할 수 있는 또 다른 옵션을 추가하는 것입니다. 사용자 피드백은 추가 옵션이 얼마나 중요한지 강조했습니다. 특히, 통역사가 उपलब하지 않거나 개인이 개인 정보와 독립성을 원할 때, 특히 중요합니다.

우리는 기술을 진정성 있게, 정확하게, 존중되게 느끼도록 커뮤니티 중심의 접근 방식을 취하고 있습니다. 우리는 수화 사용자와 함께 계속 구축한다면, 이것이 앞으로 나아가는 강력한 단계가 될 것이라고 믿습니다.

접근성 기술에서 개인 정보는 주요 우려 사항입니다. Nagish는 어떻게 민감한 대화를 처리하며, 사용자 신뢰를 유지합니까?

개인 정보는 Nagish의 미션인 청각 장애인 및 난청인 사용자를 강화하는 데 중요합니다. 첫 번째로, Nagish를 사용하면 이미 실시간 전사자가 필요 없게 됩니다. 그래서 이미 개인 정보가 느껴집니다.

기술적으로, Nagish는 개인 정보 보호를 설계했습니다. 우리는 통화를 녹음하지 않으며, 통화 기간을 넘어서서 전사본을 서버에 저장하지 않습니다. 또한, 우리는 통화 데이터를 훈련 목적으로 사용하지 않습니다. 사용자가 전사본을 저장하도록 선택하면, 그것은 사용자의 기기에 로컬로 저장되며, 공유 클라우드에 저장되지 않습니다. 끝에서 끝까지 안전한 자막 및 전사본의 로컬 저장과 같은 기능은高度 민감한 대화를 보호하기 위해 설계되었습니다. 건강, 고용, 개인 관계와 같은 것들입니다.

앞으로 10년 동안, AI는 어떻게 접근성을 재정의할까요? 기술이 채워야 할 여전히 남아 있는 격차는 무엇입니까?

디지털 접근성의 가장 큰 문제 중 하나는 교육 및 관찰 가능성의 부족입니다. 엔지니어는 alt-text를 구현하지 않으며, 디자이너는 접근할 수 없는 색상을 선택하며, 제품 관리자는 KPI를 위해 제품 결정합니다.

AI가 제품 개발의 각 측면에 참여할수록, 우리는 접근성을 위한 적극적인 접근 방식을 보게 됩니다. AI는 접근성을 반응적인 것으로부터 주변적인 것으로 변경할 수 있습니다. 우리는 다양한 환경에서 의사소통을 강화할 수 있는 새로운 도구의 물결을 보게 될 것입니다. 직장, 교실, 교통 수단, 공공 서비스 등에서, 청각 장애인 및 난청인들이不断적으로 수단을 요청하지 않아도 됩니다. 그것은 기본적으로 제공됩니다.

인간 통역사와 AI의 협력이 어떻게 진화할까요? 하나가 다른 것을 대체할까요, 아니면 서로를 강화할까요?

수화 통역사는 놀라운 일을 합니다. 그들은 커뮤니티, 접근성, 의사소통에 필수적입니다. 그러나 현실은, 충분한 수가 없습니다. 미국에서는, 예를 들어, 미국 수화 언어를 주요 언어로 사용하는 사람들은 50만 명이 넘지만, 인증된 통역사는 약 1만 명뿐입니다. 그것은 많은 상황에서, 의사소통이 접근할 수 없다는 것을 의미합니다. 의사의 방문, 학부모-교사 회의, 면접, 더 많은 것 등입니다.

또한, 통역사가 उपलब할 때도, 예약, 비용, 지리적인 문제가 있습니다. 시골에 사는 사람들은 통역사를 얻기가 훨씬 더 어려울 것입니다. 그리고 그 지연은 실제로 중요한 결과를 초래할 수 있습니다. 특히, 의료 또는 비상 상황에서입니다.

AI는 그 격차를 메울 수 있습니다. 우리가 구축하는 것은 통역사를 대체하기 위한 것이 아닙니다. 통역사의 작업을 보완하고, 접근성을 더 확장하기 위한 것입니다. 통역사가 उपलब하지 않은 경우에 도움을 줄 수 있는 도구입니다.

구글 번역은 전문 번역가를 대체하지 않았습니다. 그러나, 일상적인 의사소통을 연결하는 데 도움을 주었습니다.

컴퓨터 비전과 자연 언어 처리의 발전으로, AI는 수화 언어를 실시간으로 해석할 수 있는 약속을 가지고 있습니다. 그것은 더 많은 사람들이 즉시 의사소통할 수 있다는 것을 의미합니다. 비디오 통화, 공공 키오스크, 비상 서비스를 통해 말이죠.