Modèles et plateformes d’IA
Stability AI lance StableLM : des alternatives open source à ChatGPT
Ajouter Unite.AI à vos sources préférées sur Google
Stability AI, le créateur du logiciel de génération d’images Stable Diffusion, a présenté une collection d’outils de modèles de langage open source, contribuant à l’expansion de l’industrie des grands modèles de langage (LLM). Cette nouvelle addition offre une alternative viable à ChatGPT d’OpenAI, qui peut bénéficier à une industrie de plus en plus inquiète de la monopolisation d’OpenAI et de son principal investisseur Microsoft.
Les versions alpha de la suite StableLM, dotées de modèles de 3 milliards et 7 milliards de paramètres, sont désormais accessibles au public. Des modèles de 15 milliards, 30 milliards et 65 milliards de paramètres sont actuellement en développement, tandis qu’un modèle de 175 milliards de paramètres est prévu pour l’avenir.
En comparaison, GPT-4 d’OpenAI compte environ 1 billion de paramètres, soit six fois plus que GPT-3. Cependant, Stability AI a souligné que le nombre de paramètres ne peut pas être un indicateur précis de l’efficacité des LLM.
“StableLM est formé sur un nouveau jeu de données expérimental basé sur The Pile, mais trois fois plus grand, contenant 1,5 billion de jetons de contenu. La richesse de ce jeu de données permet à StableLM de présenter des performances étonnamment élevées dans les tâches de conversation et de codage, même avec ses 3 à 7 milliards de paramètres plus petits.”
La robustesse des modèles StableLM reste à voir. L’équipe de Stability AI s’est engagée à divulguer plus d’informations sur les capacités des LLM sur leur page GitHub, y compris les définitions de modèle et les paramètres d’entraînement. L’émergence d’une alternative open source puissante à ChatGPT d’OpenAI est accueillie avec enthousiasme par la plupart des insiders de l’industrie.
Des outils tiers sophistiqués et avancés, tels que BabyAGI et AutoGPT, comme rapporté récemment, intègrent la récursion dans les applications d’IA, ce qui signifie qu’ils peuvent créer et modifier leurs propres invites pour les instances récursives en fonction des informations nouvellement acquises.
L’intégration de modèles open source dans le mélange pourrait bénéficier aux utilisateurs de l’industrie qui préfèrent ou ne peuvent pas payer les frais d’accès d’OpenAI. Les personnes intéressées peuvent tester une interface en direct pour le modèle StableLM de 7 milliards de paramètres hébergé par HuggingFace.
Il reste à voir quelle entreprise sera la prochaine à proposer des modèles LLM similaires.
