사상 리더

대부분의 기업이 AI 에이전트에서 잘못 이해하는 것

mm
Unite.AI를 Google의 선호 소스에 추가

산업 전반에 걸쳐 AI 에이전트는 인간의 워크플로를 대체할 수 있는 완벽한 솔루션으로 마케팅되고 있습니다. 그러나 현실은 훨씬 더 복잡합니다. 우리는 이러한 시스템을 채택하는 초기 단계에 있으며, 그들의 성공은 의도적인 배치, 강력한 데이터 기반, 그리고 지속적인 인간의 감독에 달려 있습니다.

최신 2025 스탠퍼드 AI 인덱스 보고서에 따르면, AI는 산업 전반에서 생산성의 가시적인 향상을 주도하고 있지만, 동시에 조직들은 신뢰성 위험과 운영 감독의 지속적인 격차를 보고 있습니다. 2025년 설문조사 데이터는 출력 오류와 환각에 대한 우려의 급격한 증가를 강조하며, 고위 수준의 AI 거버넌스 성숙도가 개선되고 있지만, 시스템 수준의 안전 장치와 위험 완충은 여전히 뒤처리고 있습니다.

성공하는 팀은 새로운 기술을 스택에 밀어 넣고 변화를 기대하지 않습니다. 그들은 작업이 어떻게 흐ролж해야 하는지 다시 생각하고, 에이전트를 전략적인 기회로 운영 모델을 재설계하는 데 사용합니다.

Quantum Metric의 한 부사장은 이렇게 말했습니다. “에이전트를 개선하기 위해 1시간을 투자하면, 그 대가로 많은 시간을 돌려받을 수 있습니다.” AI를 우선하는 팀은 이러한 복리 효과를 이해합니다. 에이전트는 올바르게 배치되고 훈련되고 평가될 때 생산성의 승수자로 작용합니다. 그들은 도구가 아니라 동료입니다.

그러나 많은 조직은 세 가지 예측 가능한 함정에 빠지게 됩니다.

1. AI 에이전트를 실패로 이끄는 것

에이전트는 즉시 문제를 해결하는 것이 아니라, 이미 작동하는 전략을 확장하는 것입니다. 그러나 많은 회사들은 이러한 전략이나 데이터가 안정화되기 전에 에이전트를 배치합니다.

에이전트는 기초 지식, 훈련, 데이터 위생이 없으면 독립적으로 작동할 수 없습니다. 새로운 직원을 채용할 때와 마찬가지로, 랩톱을 주고 최선을 기대할 수 없습니다.

에이전트는 명확한 목표, 권위적인 데이터 소스, 정의된 표준, 그리고 비즈니스와 그 역할을 이해하기 위한 거버넌스 가이드레일이 필요합니다.

Gartner의 AI TRiSM 마켓 가이드는 이 점을 강조합니다. 조직은 AI 시스템을 인벤토리화하고, 기본 데이터를 분류하고 보호하며, 모든 사용 사례에 정책을 적용해야 합니다. Gartner는 런타임 검사와 정책 시행이 드리프트, 미스어린먼트 또는 고위험 결정의 방지를 위해 중요하다고 강조합니다.

데이터가 정확하고 연결되어 있지 않으면, 에이전트는 단순히 효과가 없을 뿐만 아니라, 자신감을 갖고 잘못된 결정을 내릴 것입니다.

이것이 초기 채택자 팀이 자신을 구별하는 곳입니다. 그들은 에이전트를 의도적인 온보딩이 필요한 시스템으로 다루며, 구조화된 지식 전송, 강화 루프, 지속적인 평가에 투자합니다. 그들은 에이전트의 성능이周围 환경의 품질을 반영한다는 것을 이해합니다.

2. 자동화에서 인간의 역할을 저평가하는 것

에이전트에 대한 논의는 종종 인간 대 기계의 거짓 二元論으로 전락합니다. 그러나 실제로는 대부분의 에이전트가 인간의 작업을 보완할 것입니다.

에이전트를 훈련시키고, 감독하고, 반복하는 것은熟練한 노동입니다. 이러한 전문성이 요구되는 전문가의 수요는 빠르게 증가하고 있습니다.

스탠퍼드 글로벌 리스폰서블 AI 설문조사에 따르면, AI를 채택하는 조직은 데이터 거버넌스, 신뢰성 위험, 감독, 보안 통제를 주요 우려 사항으로 지적합니다. 이는 인간의 판단이 에이전트의 수명주기 전반에 걸쳐 여전히 필수적임을 나타냅니다.

또한 McKinsey는 관리자의 역할이 사람을 관리하는 것에서 시스템을 관리하는 것으로 진화하고 있음을 강조합니다. 미래의 리더십은 하이브리드 팀을 조직하고, 일관성을 보장하며, 지속적으로 성능을 조정하는 것입니다.

이 변화는 새로운 관리 기술을 요구합니다. 리더는 에이전트를 “코칭”하는 방법, 그들의 추론을 감사하는 방법, 실패 모드를 진단하는 방법, 행동을 수정하는 방법을 알아야 합니다. 많은 방면에서 에이전트를 관리하는 것은 높은 성과를 가진 분석가를 관리하는 것과 더ใกล습니다. 그것은 반복적이고, 관계적이며, 지속적입니다.

에이전트를 잘 사용하는 팀은 “이 인간을 자동화하는 방법은 무엇입니까?”라고 묻지 않습니다.

그들은 “이 워크플로를 어떻게 재설계하여 인간과 에이전트가 서로를 높이는가?”라고 묻습니다.

이 협력적인 마음가짐은 의미 있는 ROI를 얻는 데 중요합니다.

3. 운영과 윤리적인 가이드레일을 무시하는 것

책임 있는 배치는 결정적인 요소입니다. 에이전트는 빠르게 작동하고 인간 직원과 마찬가지로 중요한 결정을 내리며, 때로는 더 빠르고 규모가 크게 작동합니다.

회사는 자율적인 결정과 관련된 운영, 규정 준수, 윤리적 위험을 종종 저평가합니다. 그러나 이러한 부분의 맹점은 연쇄적인 실패를 초래할 수 있습니다.

NIST AI 위험 관리 프레임워크는 명확한 지침을 제공합니다. 조직은 AI 위험을 재정적, 평판적, 사이버 보안, 개인 정보 보호 위험과 함께 평가해야 하며, AI 수명주기 전반에 걸쳐 안전 장치를 구축해야 합니다.

다시 말해, AI 거버넌스는 구조적인 것이어야 합니다. 그것은 사후의 생각이 될 수 없습니다.

Gartner도 이 긴급성을 강조합니다. 그들의 지침은 런타임 모니터링, 정렬 확인, 이상 감지, 활성화 확인을 강조하며, 환각, 정책 위반 또는 불일치된 추론을 방지하기 위해 중요합니다.

기술 스택, 거버넌스 모델, 위험 포지션을 검토하지 않고 구현을 급하게 하는 것은 더 많은 문제를 해결하는 것보다 소개하는 확실한 방법입니다.

이것이 가장 정교한 회사들이 이중 사명을 운영하는 이유입니다. 그들은 빠르게 배포하지만, 더 빠르게 거버넌스를 구축합니다. 그들은 혁신과 규율을 짝지어합니다. 그들은 에이전트를 보안, 신뢰성 엔지니어링, 투명한 의사 결정 추적이 필요한 발전하는 시스템으로 다루며, 검사되지 않은 블랙 박스로 다루지 않습니다.

에이전트가 이미 가치를 제공하는 곳

산업 전반에 걸쳐 초기 채택자들은 에이전트가 높은 볼륨, 규칙 기반, 컨텍스트가 많은 작업에서 실시간으로 결정하여 성능을 향상시키는 데 탁월하다는 것을 발견했습니다:

  • 고객 서비스에서, 에이전트는 트라이어지, 요약, 다음 최선의 조치를 표면화하고, 지능적으로 에스컬레이션할 수 있으며, 컨텍스트를 유지할 수 있습니다.
  • 운영에서, 에이전트는 작업량을 모니터링하고, 이상을 플래그로 표시하고, 루틴 문제를 수정하고, 인간 운영자를 위한 의사 결정 지원을 제공할 수 있습니다.
  • 판매와 마케팅에서, 에이전트는 인바운드 리드 자격, 대화 라우팅, 개인화 지원, 그리고 아무 것도 빠지지 않도록 보장할 수 있습니다. 또한 에이전트는 이메일을 통해 자동으로 인바운드 리드를 양육하고, 미팅을 예약하여, 구매자의 의도를 따라갈 수 있습니다.

모든 경우에 에이전트는 인간 전문가가 전략, 컨텍스트, 거버넌스를 제공하고, 이러한 요소가 부족할 때 중단됩니다.

다음 전선: AI 준비가 된 조직 구축

AI 에이전트는 현대의 워크포스에서 필수적인 요소입니다. 성공하는 팀과 어려움을 겪는 팀의 차이는 하나입니다. 참여입니다.

그들은 지속적으로 측정하고, 조정하고, 평가하고, 개선하고, 재훈련합니다. 인간과 에이전트가 협력하는 문화를 구축합니다.

스탠퍼드 AI 인덱스에 따르면, AI는 생산성과 과학적 진보를 가속화할 수 있지만, 또한 보안과 신뢰성 위험을 높입니다. 따라서 조직은 모델 개발만큼이나 감독, 위험 완충, 거버넌스에 투자해야 합니다.

성공하는 회사는 세 가지 습관을 따릅니다:

  1. 그들은 가시성을 유지합니다.

에이전트는 결정과 추론을 설명하고, 실패 패턴을 표면화하고, 행동을 공개합니다.

  1. 그들은 거버넌스를 활성화로 다룹니다.

가이드레일은 확장을 가속화합니다. 그것은 느리게 하지 않습니다.

  1. 그들은 인간 “컨트롤 타워”에 투자합니다.

그들은 에이전트를 감독하고, 검증하고, 감사하는 팀을 구축합니다.

의미 있는 ROI를 위한 기초 구축

AI 에이전트는 생산성을 혁신할 수 있지만, 기초가 튼튼하고 론아웃이 의도적인 경우에만 가능합니다. 이것은 다음을 필요로 합니다:

  • 정확하고 연결된 데이터
  • 구조화된 온보딩
  • 투명한 거버넌스
  • 인간의 감독
  • 지속적인 개선
  • 하이브리드 팀의 일관성

에이전트를 파트너로 다루는 회사는 에이전트가 제공할 수 있는 복리 효과를 해방할 것입니다.

에이전트 시대는 시스템을 재설계하여 인간과 에이전트가 서로의 강점을 높이는 데 관한 것입니다. 그리고 오늘날 그 작업을 수행하는 회사는 내일 생산성의 전선을 정의할 것입니다.

마우라(Maura)는 퀄리파이드(Qualified)의 최고 마케팅 책임자로 파이퍼(Piper), 최고의 AI 판매 담당자와 함께 팀이 자율적으로 파이프라인을 생성하도록 도와줍니다. 퀄리파이드 이전에 마우라는 게트피드(GetFeedback), 캠페인 모니터(Campaign Monitor), 세일즈포스(Salesforce)에서 마케팅 팀을 이끌면서 시간을 보냈습니다.