Meta construirait sa propre infrastructure massive pour entrainer ses modèles d'IA

Félix Cattafesta |

Meta compte bien rattraper OpenAI dans la course aux modèles de langage. Si elle a récemment présenté son nouveau Llama 2, celui-ci n'est pas encore au niveau du GPT-4 d'OpenAI. Qu'à cela ne tienne : l'entreprise de Mark Zuckerberg envisage de finaliser un nouveau modèle qu'elle espère au moins aussi efficace que son concurrent direct au début d'année prochaine. Le Wall Street Journal rapporte que Meta serait en train de mettre la main sur de nombreuses cartes graphiques spécialisées de NVIDIA afin de construire un énorme data center dédié à son entraînement.

Le data center de Microsoft. Image : Microsoft.

La nouvelle peut surprendre. Microsoft dispose déjà de sa propre infrastructure lui ayant coûté des millions de dollars et notamment utilisée pour entraîner ChatGPT ou les premières versions de Llama. Les deux entreprises se sont récemment rapprochées à l'occasion du lancement de Llama 2, et on pouvait donc s'attendre à ce que le parc de Microsoft soit réutilisé pour de futurs projets. Cependant, des personnes proches du dossier affirment que Meta veut cette fois-ci entraîner son IA sur sa propre infrastructure. Le modèle sera ensuite diffusé de manière open source.

Avec ce nouveau modèle, Meta voudrait développer « des outils d'IA capables d'émuler les expressions humaines ». À terme, des chatbots devraient être proposés dans WhatsApp et Instagram : Mark Zuckerberg avait évoqué le développement de « personnages IA » capables « d'aider les gens de diverses manières ». Une première version du concept pourrait être déployée pas plus tard que ce mois-ci.

Meta ne veut pas se laisser faire par ChatGPT et va mettre de l'IA dans WhatsApp et Instagram

Si Meta fait de son mieux pour rattraper OpenAI, cela risque de ne pas être suffisant. GPT-4 est sorti au mois de mars, et l'alternative de Meta arriverait quasiment un an après. Google aurait également un nouveau modèle dans les tuyaux baptisé Gemini, qui pourrait voir le jour entre temps. Toute l'industrie est dans la course, les rumeurs voulant qu'Apple débourse quotidiennement des millions de dollars pour faire progresser ses technologies d'IA. Amazon planche de son côté sur une nouvelle version plus intelligente d'Alexa.

Accédez aux commentaires de l'article