사상 리더

2026 예측 – 오픈 소스가 AI의 다음 황금 시대를 향한 물결을 타고 다시 부상할 것

mm
Unite.AI를 Google의 선호 소스에 추가
A widescreen, photorealistic digital landscape of a futuristic smart city where glowing data streams in various colors flow like highways between glass buildings and centralized glowing hubs.

IBM의 Confluent 인수는 12월 초에 발표된 110억 달러의 대규모 인수입니다. 이것은 단순한 데이터 인프라의 통합만이 아니라, 인공 지능(AI)이 본질적으로 이벤트 驅動형이라는 것을 공개적으로 인정하는 것입니다. 즉, 이 인수는 기업들이 데이터를 움직이는 동안 신뢰할 수 있는 데이터를 필요로 하는 것과 데이터를 저장하는 것 사이에서 균형을 잡아야 한다는 것을 보여줍니다.

IBM의 입장에서는 이 인수를 통해 “엔터프라이즈 AI 에이전트를 위한 스마트 데이터 플랫폼”을 만들고자 합니다. 즉, 데이터를 실시간으로 연결하고 처리하고 관리할 수 있는 인프라를 제공함으로써 에이전트가 하이브리드 환경에서 원활하게 작동할 수 있도록 하는 것입니다. 이것은 단순히 스트리밍 인프라를 더 많이 판매하는 것이 아닙니다. AI 에이전트가 신뢰할 수 있는 컨텍스트를 필요로 하는 것을 인정하는 것입니다.

엔터프라이즈 AI의 핵심에 있는 역설

IBM의 인수는 또한 데이터 인프라 랜드스케이프에서 흥미로운 역설을 강조합니다. 최근 몇 년 동안 일부 인프라 벤더는 오픈 소스를 포기하고 라이선스를 변경하여 독점적인 모델로 돌아갔습니다. 그러나 AI의 채택은 다시 오픈 소스로 돌아가고 있습니다. 왜일까요? 에이전트는 여러 시스템에서 상호 운용 가능한 파이프라인, 커넥터, 거버넌스를 필요로 합니다. 즉, 하나의 벤더의 폐쇄적인 스택이 아닙니다.

강력한 오픈 소스 대형 언어 모델(LLM)의 등장으로 인해 전체 AI 에코시스템이 투명성과 이식성으로 이동하고 있습니다. Llama, Mistral 등과 같은 모델은 기업들에게 폐쇄적인 모델보다 더 저렴하고 좋은 대안을 제공합니다. 이것은 긴장을 유발합니다. 데이터 인프라 벤더는 자신의 정원을 닫는 반면, AI 기업은 자신의 정원을 열고 있습니다. IBM의 Confluent 인수는 다시 오픈 소스로 돌아가는 것을 시작으로 볼 수 있습니다.

컨텍스트 관리: 엔터프라이즈가 요구하는 기능

이유를 이해하기 위해 컨텍스트 관리에 대해 이야기해야 합니다. 컨텍스트 관리는 모델 컨텍스트 창에 가장 관련性이 높고 신뢰할 수 있는 컨텍스트를 제공하는 엔터프라이즈 기능입니다. 이것은 단순히 Retrieval-Augmented Generation(RAG) 구현을 여러 팀에 걸쳐서 하는 것이 아닙니다. 이것은 에이전트가 필요한 정보에 접근할 수 있도록 하는 체계적인 접근 방식입니다.

여기에는 간단한 정신 모델이 있습니다. 에이전트는 컨텍스트에서 작동합니다. 컨텍스트는 파이프라인에서 작동합니다.

컨텍스트 파이프라인은 다음과 같습니다.

소스 → 스트리밍 → 저장소 (레이크하우스/OLTP) → 인덱싱 (벡터 + 렉시컬 + SQL) → 정책/거버넌스 → 서빙 → 관찰 가능성/평가.

각 계층은 신뢰할 수 있게 작동해야 하며, 함께 작동해야 합니다. 스트리밍은 에이전트가 필요로 하는 연속적인 신선함을 제공하기 때문에 기본이 됩니다.

전통적인 RAG 접근 방식은 종종 반응적입니다. 즉, 요청이 있을 때 컨텍스트를 가져옵니다. 그러나 에이전트는 또한 프로액티브 업데이트를 필요로 합니다. 즉, 이벤트가 계속해서 메모리를 새로 고치고, 인덱스를 업데이트하고, 권한을 조정하고, 정책을 시행합니다. Confluent의 인수는 기본적으로 이러한 “항상 업데이트되는 컨텍스트 계층”이 엔터프라이즈 AI의 중요한 인프라가 될 것이라는賭입니다.

에이전트가 실패하는 이유 (그리고 왜 중요한지)

엔터프라이즈 AI 팀은 불행히도 이러한 진실을 직접 경험하고 있습니다. 에이전트가 실패하는 이유는 LLM이 “멍청하다”는 것이 아닙니다. 에이전트가 실패하는 이유는 기본적인 컨텍스트가 깨져 있거나, 구식이거나, 관리되지 않기 때문입니다. 실제로 분석가들은 AI 프로젝트의 60%가 AI 준비가 된 데이터가 없기 때문에 중단될 것이라고 추정합니다. 어제의 재고 데이터를 기반으로 구매 결정을 내리는 에이전트는 쓸모가 없습니다. 적절한 승인이 없는 고객 기록에 접근하는 에이전트는 규정 준수에 대한 악몽입니다. 이유를 설명할 수 없는 에이전트는 규제 산업에서 사용할 수 없습니다.

엔터프라이즈는 에이전트의 결정에 대한 감사를 할 수 없습니다. 일관된 데이터 신선도를 확보할 수 없습니다. 적절한 거버넌스 가드를 두지 않고 에이전트를 배포할 수 없습니다. 이러한 모든 요구 사항은 동일한 결론으로 이어집니다. 컨텍스트 관리는 후속 고려 사항이 아니라 1등급 인프라가되어야 합니다.

오픈 소스의 부흥

이것은 오픈 소스의 부흥이 시작되는 곳입니다. 컨텍스트는 여러 벤더와 시스템을 넘나들기 때문에, 단일한 독점적인 스택으로 승리할 수 없습니다. 성공적인 접근 방식은 오픈 인터페이스와 이식 가능한 빌딩 블록을 사용하는 것입니다. 즉, 커넥터, 스트리밍 플랫폼, 메타데이터 관리, 검색 시스템, 정책 시행 등입니다. 폐쇄적인 라이선스는 통합을 느리게 만들며, 통합은 에이전트 AI의 전체 게임입니다.

IBM은 이것을 이해합니다. Red Hat을 통해 오픈 소스에 대한 역사를 가지고 있기 때문에, 그들은 신뢰를 가지고 있습니다. IBM-Confluent 엔티티는 통합 지점에서 오픈 소스를 채택함으로써 “이벤트 驅動형 지능”을 가속화할 수 있습니다.

이미 이러한 전환을 보이고 있습니다. 오픈 소스 스트리밍 플랫폼, 오픈 테이블 형식(Apache Iceberg, Delta Lake), 메타데이터 및 거버넌스에 대한 오픈 표준이 엔터프라이즈 AI 인프라의 연결 고리를 형성하고 있습니다. 조직은 여러 AI 모델, 여러 데이터 저장소, 여러 도구를 사용할 것이라는 것을 알고 있기 때문에, 이식성과 상호 운용성을 요구하고 있습니다. 잠금은 그들이 필요로 하는 유연성의 적입니다.

2026년 예측

2026년 말까지, “컨텍스트 관리”가 엔터프라이즈 기술 스택에서 명명된 카테고리로 등장할 것입니다. 구매자는 세 가지 것을 요구할 것입니다.

  • 첫째, 데이터 저장소와 인덱스에 대한 오픈 커넥터와 “자신의 것을 가져오기” 아키텍처입니다. 단일 벤더가 전체 컨텍스트 파이프라인을 제어하지 않을 것입니다.
  • 둘째, 도구 간에 표준화된 컨텍스트 API입니다. 팀은 구성 요소를 교체할 때 전체 시스템을 다시 구축하지 않아야 합니다.
  • 셋째, 기본적으로 거버넌스된 프로벤ンス입니다. 컨텍스트의 각 조각은 명확한 계보를 가져야 하며, 각 에이전트 결정은 감사 추적을 가져야 합니다.

이것들은 좋을 뿐만 아니라, 엔터프라이즈 AI의 대규모 채택을 위한 필수 조건입니다.

리셋의 시작

IBM이 Confluent를 인수하는 것은 데이터 인프라의 근본적인 리셋의 시작을 표시합니다. AI의 모멘텀, 신선하고 신뢰할 수 있는 컨텍스트에서 작동하는 복잡한 에이전트의 필요성에 의해 주도되는 것은, 산업을 다시 오픈 소스로 돌아가게 합니다. 이것이 순수한 오픈 소스인지, 또는 최소한 오픈하고 강제할 수 있는 상호 운용성인지에 따라 시장의 발전 방향이 결정될 것입니다. 그러나 방향은 명확합니다.

이 새로운 시대에서 번창할 벤더는 가장 폐쇄적인 독점적인 스택을 가진 것이 아닙니다. 그것은 통합 계층에서 오픈 소스를 채택하고, 진정한 상호 운용성을 제공하며, 기업이 인공적인 제약 없이 컨텍스트 관리 기능을 구축하는 것을 도와주는 것입니다.

다음의 혁신은 오픈 소스 AI 인프라에서 나올 것입니다. 즉, 기업이 벤더 잠금 없이 복잡한 에이전트와 애플리케이션을 구축할 수 있는 것입니다. 이것은 이상주의가 아닙니다. 현실주의입니다. 엔터프라이즈 전체에 걸쳐 작동해야 하는 임무 臨界 AI 시스템을 구축할 때, 오픈 소스는 철학이 아닙니다. 그것은 요구 사항입니다.

시지에 구오(Sijie Guo)는 스트림네이티브(StreamNative)의 창립자이자 최고경영자입니다. 시지에의 아파치 펄사(Apache Pulsar)와의 여정은 야후!(Yahoo!)에서 시작되었으며, 그는 회사에서 글로벌 메시징 플랫폼을 개발하는 팀의 일원으로 활동했습니다. 이후 그는 트위터(Twitter)로 이동하여 메시징 인프라 그룹을 이끌었고 분산 로그(DistributedLog)와 트위터 이벤트 버스(Twitter EventBus)를 공동으로 개발했습니다. 2017년, 그는 스트림리오(Streamlio)를 공동 창립했으며, 이는 스플렁크(Splunk)가 인수했습니다. 그리고 2019년, 그는 스트림네이티브를 창립했습니다. 그는 아파치 펄사와 아파치 북키퍼(Apache BookKeeper)의 원래 제작자 중 한 명이며, 현재 아파치 북키퍼의 부사장 및 아파치 펄사의 PMC 멤버로 활동하고 있습니다. 시지에는 캘리포니아의 샌프란시스코 베이 에リア에 거주합니다.