사상 리더

규모보다 관련성: 현실과 접촉해도 살아남는 AI 구축

mm
Unite.AI를 Google의 선호 소스에 추가

현장 AI에 작은 작업 전용 모델이 필수적인 이유

팀은 이제 AI 프롬프트에서 프로토타입으로 이전하는 속도가 그 어느 때보다 빨라졌습니다. 하지만 이러한 프로토타입은 현장 서비스, 제조, 시설 관리와 같은 실제 업무 흐름에서 정밀성, 일관성, 책임성이 가장 중요한 경우 종종 깨집니다. 문제는 AI가 언제든 답을 제공할 수는 있지만, 실제로 필요한 것은 매번 올바른 상황에서 정확한 답변이라는 점입니다.

이것이 대부분의 대형 언어 모델(LLM)이 가치를 잃는 지점입니다. LLM에서는 같은 질문을 다르게 표현하기만 해도 전혀 다른 결과가 나올 수 있습니다. 이는 많은 LLM이 깊이보다는 폭에 초점을 맞추기 때문입니다. 창의적인 작업에서는 유연성이 도움이 될 수 있지만, 정밀성을 추구하는 사람에게는 이러한 폭넓은 지식이 오히려 부담이 될 수 있습니다.

운영 환경에서는 일관성이 필요합니다. 자산은 알려져 있고, 절차는 문서화되어 있으며, 안전 프로토콜과 규제 요구사항이 허용 가능한 기준을 정의합니다. 일반 인터넷 지식에 기반한 출력 변동성은 문제를 악화시킬 수 있습니다. 예를 들어 HVAC 수리에서는 기술자가 정확한 자산—즉 서비스 이력과 알려진 고장 패턴—에 기반한 결과를 필요로 합니다.

시간 압박 속에서 장비 고장에 대응하는 기술자를 상상해 보세요. 시스템이 질문 표현 방식에 따라 일관되지 않은 답변을 내놓거나 권위 있는 데이터와 연결되지 못한다면 큰 문제가 발생합니다. 응답 시간은 고객과 비즈니스 성공 모두에 중요합니다.

규모에서 관련성으로의 전환

현재 진행 중인 전환은 일반 AI에서 관련 AI로 이동하는 것입니다. AI에게 모든 일을 시키는 대신, 더 많은 조직이 역할을 구체적이고 반복 가능한 작업으로 좁히고 있습니다. 규모가 작고 작업 전용 모델 및 제한된 범위의 AI 시스템이 주목받고 있는데, 이는 실시간 운영 데이터에 기반하고 비즈니스 규칙에 제한되며 기존 워크플로에 직접 삽입될 수 있기 때문입니다.

작은 모델은 다음에 더 뛰어난 것으로 나타났습니다:

  • 문제 해결: 작은 모델은 매뉴얼, 이전 경험, 비공식적인 지식 공유와 같은 고도로 미묘한 입력을 지식 증류, 으로 전환하여, 주니어 팀원이 더 빠르게 배우고 자신 있게 행동할 수 있게 합니다. 또한 작은 AI 모델은 관련된 과거 작업 주문, 수리 로그, 고장 패턴을 통합하여 다음 단계에 대한 가능성을 제시할 수 있습니다. 이를 통해 시스템 전반을 검색하는 시간을 줄일 수 있습니다.
  • 작업 인계: 불완전하거나 일관되지 않은 문서는 교대 또는 팀 간 인계를 위험하게 만들 수 있습니다. 그러나 서비스 데이터로 훈련된 작업 전용 모델은 수행된 작업, 교체된 부품, 남은 미해결 사항을 요약할 수 있습니다. 이를 통해 다음 기술자는 전체를 조합하는 대신 명확한 상황을 바로 파악하고 시작할 수 있습니다.
  • 규정 준수 및 안전: 규제된 환경에서는 한 단계라도 누락되면 실제 위험을 초래합니다. 작업 전용 소형 언어 모델은 표준화된 검사 워크플로를 안내하고, 필요한 단계를 확인하며, 실시간으로 불일치를 식별하거나 표시할 수 있습니다.

이러한 작은 모델은 알려진 데이터, 승인된 워크플로 및 정의된 작업을 중심으로 훈련되고 제한될 수 있습니다. 별도의 도구로 작동하는 대신 기존 시스템에 내장되어 실시간 데이터를 검색하고, 기록을 업데이트하며, 다음 단계를 제시합니다.

운영 팀이 신뢰할 수 있는 AI 구축

현장 서비스와 제조 환경에서 AI가 성공하려면 작업이 수행되는 현실—연결된 시스템, 구조화된 운영 데이터, 팀이 이미 신뢰하는 워크플로—에 기반해야 합니다. 그리고 신뢰할 수 있어야 합니다.

신뢰는 일관되고 구조화된 데이터 기반 위에서 시작됩니다. 모델이 자산, 작업 주문, 지표를 매번 동일하게 해석하도록 해야 합니다. 출력에도 가드레일과 거버넌스가 필요하여, 안내가 승인된 워크플로와 검증된 데이터 소스 내에 머물고 작업자가 자신의 역할이나 역량을 넘어 행동하도록 유도하지 않도록 해야 합니다. 권고 사항이 알려진 데이터에 추적되지 않으면 AI는 이를 제안해서는 안 됩니다.

AI는 또한 통합되어야 합니다—결정이 내려지는 팀이 이미 사용하는 시스템에 내장되어야 합니다; 그렇지 않으면 활용도가 낮아지거나 무시될 수 있습니다. 그리고 인간 감독은 여전히 필수적입니다. 목표는 운영자를 대체하는 것이 아니라, 함께 작업하는 것입니다. 즉, 인간이 항상 중요한 행동을 승인하고, 권고를 무시하며, 핵심 작업을 수행하고, 예상 패턴을 벗어나는 상황을 에스컬레이션해야 합니다.

AI에 대한 신뢰는 모든 운영 시스템과 마찬가지로 일관된 성능과 작업 수행 방식에 맞춰 형성됩니다. AI로부터 언제든 답을 얻을 수는 있지만, 실제로 중요한 것은 신뢰할 수 있게 정확하고 일관된 답변을 얻는 것입니다. AI가 가장 큰 가치를 창출할 수 있는 운영 환경은 모호함이 거의 없거나 전혀 없는 환경이기도 합니다.

적정 규모 AI의 효능

작은 모델에는 실용적인 장점도 있습니다. 가볍고 빠르며 관리가 용이합니다. 또한 컴퓨팅 요구량이 적고, 지연 시간이 낮은 결과를 생성하며, 프로세스 변화에 따라 업데이트할 수 있습니다.

또한 두 가지 AI 접근 방식을 결합할 수도 있습니다. 일부 기업은 더 크고 일반적인 모델을 사용해 광범위한 패턴과 추론을 포착한 뒤, 그 지식을 특정 작업에 맞춘 작은 모델로 증류합니다. 이를 통해 조직은 대규모 학습의 장점을 유지하면서 현장에서 보다 신뢰성 있게 작동하는 시스템을 제공할 수 있습니다.

효율성은 작업 주문 관리나 생산 모니터링과 같은 고볼륨 프로세스에서 가장 뚜렷하게 나타납니다. 여기서 성능 향상은 더 빠른 해결 시간 및 다운타임 감소와 같은 운영 지표로 측정될 수 있습니다.

성공 재정의

신뢰는 AI 다음 단계의 핵심입니다. 시스템은 프로토타입처럼 똑똑해 보이는 것이 아니라 실제 환경에서 성능을 발휘할 때 성공합니다. AI는 프로세스를 보다 안전하게 만들고, 인계 과정을 줄이며, 책임성을 명확히 할 때 최고의 가치를 발휘합니다. AI는 일관될 때 믿을 수 있습니다. 지능을 무분별하게 확장하는 것은 운영상의 이점을 만들지 못합니다. 현장에서 필요할 때 언제든 작동하도록 설계된 시스템이 진정한 발전의 열쇠입니다.

Marcus Torres는 Quickbase의 최고 제품 책임자입니다. Marcus는 ServiceNow, Salesforce 및 Twilio에서 리더십 역할을 포함해 SaaS 분야에서 20년 이상의 제품 경험을 보유하고 있습니다. Quickbase CPO로서 Marcus는 제품 및 디자인 팀을 이끌며 전략, 로드맵, 고객 경험에 집중해 에이전시 시대에 Quickbase 플랫폼의 진화를 형성하고 더 빠르게 더 큰 가치를 제공하고 있습니다.