Líderes de pensamento

Por que a Corrida de Chips de IA Agora é Dirigida por Software

mm
Adicione Unite.AI às suas fontes preferidas no Google

Cada novo acelerador de IA chega com uma história de benchmarking: throughput máximo, teraops por watt, números impressionantes que prometem que esse chip mudará tudo. O que esses números deixam de fora é se o cliente pode realmente usar o chip em produção. Na maioria das vezes, eles não podem, e essa é a história real de onde a indústria de hardware de IA está hoje. Ela enfrenta um problema de maturidade de software, e a maioria das empresas ainda não está preparada para admitir isso publicamente.

A Lacuna que Ninguém Fala

Os ciclos de desenvolvimento de silício duram de dois a quatro anos, enquanto o cenário de modelos de IA evolui em um ciclo que mede meses e tende a semanas. Por baixo disso, há um problema de cadeia de valor: os casos de uso finais, desde veículos e fábricas até hospitais e dispositivos, estão amadurecendo em funcionalidade e começando a gerar impacto mensurável no P&L. Essa maturidade impulsiona a demanda por adaptações de software, que por sua vez exigem alterações de hardware. Cada uma dessas três camadas opera em uma velocidade fundamentalmente diferente, e essa falta de alinhamento é a causa raiz da fricção que está se construindo em todo o mercado. A pilha de software necessária para executar a inferência de modelos de linguagem grande difere fundamentalmente do que foi construído para as cargas de trabalho de aprendizado de máquina anteriores. Os prazos de desenvolvimento de hardware não se comprimiram para atender a esse ciclo. As empresas que enviam novo silício hoje entregam aos clientes software que não pode desbloquear completamente as capacidades do chip, produzindo um padrão que se repete em todo o mercado: silício impressionante, software imaturo, adoção lenta e receita perdida. O chip faz o que foi projetado para fazer. O problema é que os clientes não podem usá-lo facilmente.

Considere o que aconteceu com a indústria automotiva. Os carros em si eram basicamente um problema resolvido no meio do século XX, mas quando o software se tornou o diferenciador, as empresas com as maiores tradições de fabricação lutaram mais para se adaptar. A Ford e a GM sabiam como construir motores, mas não tinham memória muscular para construir sistemas operacionais. A indústria de hardware de IA está passando pela mesma transição agora, e o paralelo é desconfortavelmente preciso. A NVIDIA (NVDA ) desempenha o papel de disruptor nativo de software, enquanto as empresas semicondutoras tradicionais ainda estão tentando descobrir como vender ecossistemas de desenvolvedores junto com o silício.

A dominância da NVIDIA tem quase nada a ver com ter os melhores chips. A CUDA (Arquitetura de Dispositivo Unificado de Computação) tem vinte anos, com todo o débito técnico que isso implica, mas o que a NVIDIA realmente construiu é o sistema operacional do cálculo de IA: um ecossistema previsível e maduro que os desenvolvedores e os OEMs podem confiar em produção.

Os clientes selecionam plataformas com base na maturidade do software e no risco de integração, então, quando um novo acelerador chega sem uma pilha de software de produção, a conversa comercial termina antes de começar.

O tempo para o primeiro modelo, definido como a rapidez com que um cliente obtém uma carga de trabalho de IA real em execução em um determinado acelerador, é uma métrica comercial muito mais significativa do que o throughput máximo. Essa é a conversa que a maioria das empresas de hardware está menos preparada para ter.

O Mercado Real é a Inferência

A linguagem nativa dos negócios é o P&L, e cada empresa que implanta IA precisa responder à mesma pergunta: onde está o dinheiro, e o que me impede de capturá-lo? O treinamento é um passo necessário, mas a IA comercial vive na inferência, e esse mercado mal começou.

A assimetria de escala aqui é impressionante. O treinamento cobre um caso de uso; a inferência cobre um número infinito. Cada aplicação de IA em um veículo, fábrica, hospital, telefone ou armazém requer inferência. Um chip que executa sistemas de segurança em um carro não pode consumir energia de centro de dados, e um dispositivo que executa inferência em tempo real em um chão de fábrica não pode tolerar alta latência. O mercado de inferência de borda requer silício projetado especificamente para eficiência de energia, restrições físicas e requisitos de segurança e confiabilidade das indústrias que o implantam.

A decisão recente do Google de dividir seu oitavo TPU em dois chips distintos, um para treinamento e um para inferência, vale a pena considerar. Essa escolha arquitetônica reconhece que as duas cargas de trabalho divergiram tanto que otimizar para ambas em um único design agora significa excelência em nenhuma. Quando uma empresa que executa algumas das maiores infraestruturas de IA decide que a especialização é mais importante do que a consolidação, isso sinaliza para onde o resto do mercado está indo: em direção a silício de inferência personalizado implantado na borda, em volume, sob restrições do mundo real que os benchmarks de centro de dados nunca foram projetados para medir.

Estamos em uma corrida de inferência, enquanto a maior parte do mercado ainda está organizada em torno do treinamento.

Os Limites Estruturais do Legado

As empresas melhor posicionadas para fabricar em escala ainda estão estruturalmente impossibilitadas de atender aos mercados onde a inferência viverá. Os clientes automotivos precisam que os fornecedores garantam a disponibilidade de componentes por uma década. Empresas semicondutoras de propósito geral, como a Intel (INTC ), simplesmente não se comprometem com isso. Essa restrição estrutural deixa uma indústria inteira subatendida, e nenhuma quantidade de negociação muda isso.

A plataforma de IA de borda da NVIDIA já está enfrentando um desafio de alternativas compatíveis com PIN que oferecem melhor desempenho por watt sem exigir alterações na pilha de software. Um cliente pode trocar o chip e manter tudo o mais, tornando isso um ataque comercial direto à parte mais defensável da posição de borda da NVIDIA.

As empresas que provaram seu conceito no CUDA estão descobrindo que o depósito econômico em escala exige uma reestruturação para silício de baixa potência, porque, quando as organizações implantam dezenas de milhares de dispositivos, o custo por unidade e o consumo de energia se tornam fatores decisivos. A sequência que se desenrola no mercado de inferência é direta: use algo que funcione, teste, então encontre uma maneira de implantá-lo economicamente, porque você precisa ganhar dinheiro com isso. Dada a velocidade da adoção de IA, a janela para estabelecer vantagem de software e ecossistema é medida em trimestres.

O Investimento de Engenharia que a Maioria das Empresas Está Pulando

As empresas de hardware de IA continuam a enviar chips poderosos com software que não pode executá-los completamente. O software de sistema de produção, que abrange tempos de inferência, otimização de compilador e habilitação de carga de trabalho, exige engenharia profunda e especializada que a maioria das empresas de hardware simplesmente não tem internamente.

Construir essa capacidade significa contratar engenheiros de compilador e arquitetos de tempo de execução que possam fechar a lacuna entre o que um chip é teoricamente capaz de fazer e o que um cliente pode implantar na prática. As empresas também precisam investir em cadeias de ferramentas antes que a receita justifique, porque, no momento em que a receita chega, a janela fechou. As empresas que pulam esse investimento não apenas perdem terreno. Elas perdem negócios.

Os chips que alcançam escala são os chips mais implantáveis, e a implantabilidade é uma função da qualidade do software. Os principais compradores downstream, desde os OEMs e os hyperscalers até os clientes empresariais, foram queimados antes por silício que faz benchmarking bem e integração mal. Eles escolhem com base na maturidade do ecossistema e no risco de integração. As empresas que tratam o software como uma prioridade de engenharia de primeira classe convertem mais pilotos em contratos de produção e atingem a receita mais rapidamente. Aquelas que o tratam como um pensamento posterior assistem a silício tecnicamente superior perder negócios para chips inferiores apoiados por pilhas mais maduras.

O Relógio Já Está Tiquetaqueando

As empresas de hardware de IA posicionadas para capturar uma participação significativa na próxima fase estão construindo vantagens de ecossistema hoje que serão difíceis para os entrantes posteriores replicar. A flexibilidade de software, a capacidade de se adaptar a novas arquiteturas de modelo sem esperar pela próxima fita, separa o silício que permanece comercialmente relevante do silício que cíclica eternamente por meio de pilotos sem nunca gerar a receita necessária para financiar a próxima geração.

As decisões sendo tomadas agora, nas equipes de engenharia, acordos de parceria e pilotos comerciais em todo o cenário de hardware de IA, determinarão quais empresas ainda serão relevantes em 2028. O head start de vinte anos da CUDA é uma trincheira construída sobre a profundidade do ecossistema, mas qualquer empresa disposta a tratar o software como uma prioridade de engenharia sustentada pode construir a mesma profundidade com o tempo.

A pergunta que a indústria precisa responder é qual empresa está se movendo rápido o suficiente para construir a profundidade do ecossistema que torna seus chips a escolha padrão antes que a escolha de outra empresa se torne muito enraizada para ser deslocada.

Craig Melrose é o Sócio-Gerente Global para Tecnologias Avançadas na HTEC, onde ele ajuda os clientes a aplicar IA e engenharia digital a desafios complexos de negócios e industriais. Ele traz mais de 20 anos de experiência em operações e transformação digital, incluindo funções de liderança sênior na PTC e McKinsey & Company, e experiência anterior em melhorar o desempenho da produção da Toyota na América do Norte