Codice Umano Del 2020 Sconfigge Agenti Codati Con Vibe In Test Agente

ChatGPT e altri strumenti di codifica con vibe sono stati sottoposti a un test in quasi 40.000 partite – e hanno perso contro il codice scritto da uno studente di dottorato prima dell’invenzione dei Large Language Model.

In uno studio recente del Regno Unito, i ricercatori hanno messo a confronto agenti codificati dall’uomo con agenti codificati con vibe sviluppati con gli ultimi Large Language Model (LLM), come ChatGPT-5 e Claude, e hanno scoperto che gli agenti creati senza l’aiuto dell’IA hanno battuto facilmente le versioni facilitate dall’IA.

Entrambi i set di agenti sono stati creati da diverse generazioni di studenti del Laboratorio di Intelligenza Artificiale dell’Istituto Federale Svizzero di Tecnologia di Losanna. Gli agenti non-IA sono stati sviluppati come parte di un corso di laurea nel 2020, due anni prima dell’invenzione di ChatGPT e dell’inizio della rivoluzione LLM, mentre i nuovi agenti sono stati creati da studenti attuali, aiutati dagli LLM più recenti e migliori disponibili.

Anche con un gioco truccato, le soluzioni codificate con vibe non sono riuscite a vincere, e i primi cinque posti sono stati costantemente occupati da agenti “grezzi”, con la maggior parte degli agenti LLM (33 su 40) battuti facilmente da agenti di base “molto semplici”, in 38.304 sfide in un torneo, su un ampio numero di variabili e circostanze.