사상 리더

인공지능 에이전트는 대규모 추천 시스템을 어떻게 변화시키고 있는가

mm
Unite.AI를 Google의 선호 소스에 추가

대규모 추천 시스템은 더 이상 고립된 모델로 작동하지 않기 때문에 개선하기가 더 어려워지고 있습니다. 현대의 추천 시스템은 종종 수백 개의 연결된 모델, 데이터 파이프라인, 랭킹 레이어, 모니터링 시스템 및 비즈니스 규칙을 포함합니다. 각 구성 요소는 다른 신호를 최적화할 수 있지만 전체 시스템은 수익, 구매, 참여 또는 최종 사용자 만족과 같은 더广泛한 비즈니스 결과를 개선해야 합니다.

다음 단계는 시스템 컨텍스트를 더 잘 흡수하고 개발 마찰을 줄이고 점차 더广泛한 책임을 맡을 수 있는 인공지능 에이전트에 초점을 맞추고 있습니다. 이 전환은 자동화만이 아니라 추천 시스템이 자체적으로 모니터링, 진단, 수리 및 개선될 수 있도록 하는 것입니다.

대규모 추천 시스템은 발전하기 어렵다

대규모 추천 시스템의 개발 주기는 주요 병목 현상입니다. 단일 변경은 측정 가능한 결과를 생성하기 전에 많은 레이어를 통과할 수 있습니다. 하나의 모델은 후보 생성에 영향을 줄 수 있고, 다른 모델은 랭킹에 영향을 줄 수 있으며, 또 다른 모델은 참여, 전환 또는 수익을 최적화할 수 있습니다. 이러한 모델은 종종 독립적인 배포 주기를 갖는 다른 팀에 속할 수 있으며, 이는 숨겨진 종속성을 만들고 조정을 어렵게 만듭니다.

이 복잡성은 디버깅을 더 어렵게 만듭니다. 성능이 저하되면根本 원인은 회귀를 표시하는 모델 내에 있지 않을 수 있습니다. 업스트림의 변경은 다운스트림 랭킹에 영향을 줄 수 있으며, 사용자 행동의 변화는 여러 모델에 동시에 데이터 분포를 변경할 수 있습니다. 최근의 기술 연구는 더广泛한 기술적 컨텍스트에서 이유를 찾고 자율적인 개선 루프를 지원할 수 있는 시스템에 대한 관심이 증가하고 있음을 보여줍니다.

인공지능 에이전트는 더 빠른 반복을 제공한다

인공지능 에이전트는 대규모 추천 시스템의 개발 마찰을 줄일 수 있습니다. 새로운 엔지니어는 대규모 추천 스택을 이해하는 데 몇 개월이 걸릴 수 있습니다. 올바른 문서, 텔레메트리, 실험, 코드 경로 및 로그가 제공되면 인공지능 시스템은 더广泛한 시스템 컨텍스트를 더 빠르게 처리할 수 있습니다.

이것은 에이전트가 대규모 추천 시스템을 종단 간으로 소유할 준비가 되었다는 것을 의미하지 않습니다. 오늘날의 모델은 여전히 신뢰의 한계를 가지고 있습니다. 그들은 환각을 일으킬 수 있고, 종속성을 놓칠 수 또는 컨텍스트가 불완전할 때 잘못된 가정할 수 있습니다. 가장 강력한 초기 사용 사례는 더 좁습니다. 회귀를 감지하는 것, 실험 결과를 요약하는 것, 모델 동작을 비교하는 것, 제한된 수정을 제안하는 것 또는 알려진 대상에 대한 변경 사항을 검증하는 것입니다.

장기적인 비전은 더 야심적입니다. 여러 에이전트는 각각 특정 垂直 세그먼트에서 작동할 수 있습니다. 데이터 품질, 기능 모니터링, 랭킹 성능, 실험 분석, 회귀 감지 또는 인프라 비용. 더 높은 수준의 에이전트는 그러면 이러한 신호를 조정하고 모델의 실패 또는 개선이 더广泛한 추천 시스템에 미치는 영향을 식별할 수 있습니다. 에이전트 연구는 인공지능 시스템이 반복적인 연구 및 개선 워크플로우를 탐색하기 시작하는 방법을 보여줍니다.

안전한 채택은 제한된 실행, 검증 및 점진적인 자율성을 필요로 한다

자율적인 추천 워크플로우는 에이전트가 명확한 경계 내에서 작동할 때 더 신뢰할 수 있습니다. 에이전트에 생산 시스템에 대한 무제한적인 접근을 제공하는 대신, 팀은 승인된 도구, 워크플로우, 테스트 환경, 대시보드, 실험 템플릿 및 롤백 절차로 에이전트를 제한할 수 있습니다. 이것은 불안정한 변경, 비용 급증 또는 순환 논리의 위험을 줄입니다.

실용적인 자율성 모델에는 다음이 포함될 수 있습니다.

  • 제한된 실행. 에이전트는 열린 생산 액세스 대신 승인된 도구, 권한 및 워크플로우를 통해 작동합니다.
  • 검증 우선 개발. 각 작업에는 정의된 시작점, 측정 가능한 결과 및 진행 상황을 확인하는 자동화된 테스트가 포함됩니다.
  • 위험 기반 인수. 저위험 시스템은 에이전트 실행의 초기 후보가 되며, 고영향 영역은 더 긴밀한 인간의 검토를 유지합니다.
  • 점진적인 조정. 신뢰할 수 있는 하위 에이전트는 나중에 더广泛한 워크플로우에 연결될 수 있습니다. 각 구성 요소가 일관되게 수행되면.

이 접근 방식은 더广泛한 시스템 소유권 이전에 더 작은, 측정 가능한 승리를 선호합니다. 자율 에이전트에 대한 기술 연구는 구조화된 환경, 작업 분해 및 검증의 중요성을 강조합니다. 추천 시스템에서 이러한 원칙은 제어된 실험 및 더 큰 에이전트 조정을 의미합니다.

조직은 적절한 인재 혼합, 운영 모델 및 성과 측정을 필요로 한다

인공지능 에이전트는 경험丰富한 엔지니어의 가치를 제거하지 않습니다. 그들은 인공지능을 효과적으로 사용할 수 있는 엔지니어의 가치를 증가시킵니다. 가장 강력한 프로필은 심층 주제 지식과 인공지능을 사용하여 더 빠른 분석, 실험 및 구현을 결합합니다.

두 가지 인재 그룹이 특히 중요해집니다. 인프라 전문가들은 에이전트를 위한 하네스를 구축합니다. 도구, 가드레일, 워크플로우, 권한, 관찰 가능성 및 실행 환경. 기계 학습 연구자들은 최적화 논리, 모델 전략 및 알고리즘 방향을 안내합니다. 함께, 이러한 그룹은 에이전트가 인간의 상시 유지 없이 생산적으로 작동할 수 있는 조건을 만듭니다.

성과 측정도 변경됩니다. 지표는 계층 구조로 배열할 수 있습니다. 최상위에는 지연 비즈니스 결과가 있습니다. 수익, 구매, 전환 또는 거래량. 그 아래에는 리드 지표가 있습니다. 클릭, 조회, 스크롤, 시청 시간 또는 세션 깊이. 에이전트 수준에서 팀은 작업 정밀도, 성공률, 실패률, 완료 시간 및 상호작용 턴 수를 추적할 수 있습니다. 이러한 에이전트 수준 지표는 비즈니스 영향과 연결될 때 의미를 갖습니다.

모델 제한을 극복한다

자체 개선 추천 시스템의 미래는 세 가지 모델 수준의 발전에 달려 있습니다. 환각률이 낮아지고, 사용 가능한 컨텍스트 창이 더 커지고, 추론이 더 강해집니다. 환각은 자율적인 결정에 대한 신뢰를 약화시킵니다. 컨텍스트 제한은 에이전트가 전체 시스템을 이해하는 능력을 제한합니다. 추론 격차는 모델의 변경이 다른 모델의 결과에 미치는 영향을 연결하기 어렵게 만듭니다.

이러한 제한이 개선되면 에이전트는 狭い 작업의 최적화를 넘어 전체 시스템 동작을 이해하는 데 집중할 수 있습니다. 이것은 회귀를 감지하고, 가능한 원인을 식별하고, 수정을 테스트하고, 결과를 모니터링하며, 다음 최적화 경로를 추천하는 것을 포함합니다. 자체 개선 및 에이전트 시스템에 대한 연구는 반복적인 개선 루프에 참여할 수 있는 인공지능 시스템을 향한 更广泛한 기술적 운동을 반영합니다.

폐쇄 루프 지능으로의 길

자체 개선 추천 시스템은 기본적인 인공지능 자동화의 다음 단계를 나타냅니다. 로드맵은 제한된 에이전트 작업, 강력한 가드레일, 테스트 주도적인 검증 및 적절한 제어 지점에서의 인간의 판단에서 시작됩니다. 시간이 지나면 작은 자율적인 승리는 더广泛한 시스템 소유권으로 합계될 수 있으며, 초기 실행과 이후의 자율성을 연결합니다.

모델의 능력이 개선되면 조직은 비즈니스 메트릭과 일치하는 추천 시스템을 모니터링, 수리 및 최적화하는 데 더 가까이 다가갈 수 있습니다. 목표는 엔지니어링 노력을 줄이는 것뿐만 아니라 지원하는 시스템의 성과를 유지하는 데 도움이 되는 인공지능입니다. 기술적 진행과 비즈니스 결과를 연결합니다.

덴마크 나시르 샤이크는 메타에서 12년 이상의 경험을 가진 머신 러닝 엔지니어로, 트위터, 로쿠, 알리바바, 라쿠텐과 같은 산업 리더에서 근무했습니다. 그는 수백만 명의 사용자를 대상으로 하는 ML/AI 제품을 구축하는 팀을 이끌어 왔습니다. 그는 캘리포니아 주 치코 주립 대학교에서 컴퓨터 공학 석사 학위를, 인도 푸네 대학교에서 전자 통신 학사 학위를 취득했습니다.

免責声明: 본 기사의 견해와 의견은 저자의 것으로서, 반드시 저자의 고용주의 공식 정책이나 입장을 반영하는 것은 아닙니다.