Elon Musk dépenserait 10 milliards de dollars en IA cette année
Entre Tesla et xAI, les aspirations d'Elon Musk en matière d'intelligence artificielle ont coûté environ 10 milliards de dollars en mettant en ligne des capacités de calcul de formation et d'inférence cette année, selon un article publié jeudi sur X (anciennement Twitter) par l'investisseur de Tesla, Sawyer Merritt.
"Tesla a déjà déployé et s'entraîne plus tôt que prévu sur un cluster Nvidia H100 de 29 000 unités à Giga Texas – et disposera d'une capacité de 50 000 H100 d'ici fin octobre et d'une capacité équivalente d'environ 85 000 H100 d'ici décembre", a noté Merritt.
D’ici la fin de cette année, les sociétés d’Elon Musk (Tesla et xAI) auront mis en ligne une capacité de calcul de formation d’une valeur d’environ 10 milliards de dollars rien qu’en 2024.
Tesla a déjà déployé et s'entraîne plus tôt que prévu sur un cluster Nvidia H100 de 29 000 unités à Giga Texas – et aura… pic.twitter.com/UgvmsBLuQp
— Sawyer Merritt (@SawyerMerritt) 29 octobre 2024
Tesla a également dévoilé son cluster Cortex AI en août, qui sera exploité pour former le système Full Self-Driving de l'entreprise et utilise 50 000 GPU Nvidia H100 ainsi que 20 000 autres puces Dojo AI développées par Tesla lui-même. Le supercalculateur Colossus, dévoilé par Tesla en septembre, utilise autant de GPU H100 que le Memphis et devrait s'étendre de 50 000 GPU H100 et 50 000 H200 supplémentaires dans les mois à venir.
xAI, quant à lui, a commencé à assembler son supercalculateur Memphis en juillet dans sa Gigafactory of Compute, située dans une ancienne usine de production Electrolux à Memphis, Tennessee. Musk affirme que Memphis est « le cluster de formation en IA le plus puissant au monde », car il fonctionne sur 100 000 GPU H100 de Nvidia, et Musk a promis de doubler cette capacité dans les plus brefs délais. Il a été mis en ligne en septembre et a depuis été chargé de créer « l'IA la plus puissante au monde selon tous les paramètres d'ici décembre de cette année » – probablement, Grok 3 . xAI n'a pas révélé combien a coûté la construction de Memphis, bien que Tom's Hardware estime que la société a dépensé au moins 2 milliards de dollars uniquement pour les GPU.
Le chiffre de 10 milliards de dollars représente en réalité la moitié de ce que Musk avait affirmé en avril que Tesla dépenserait cette année en capacité de calcul de l’IA. "Tesla dépensera environ 10 milliards de dollars cette année en combinaison de formation et d'IA d'inférence, cette dernière étant principalement destinée aux voitures", avait-il déclaré à l'époque . « Toute entreprise qui ne dépense pas à ce niveau, et qui ne le fait pas de manière efficace, ne peut pas rivaliser. »
Selon cette mesure, les efforts de Musk en matière d’IA sont déjà à la traîne de concurrents aux poches profondes comme Microsoft, OpenAI et Google. En juillet, par exemple, les analystes estimaient qu’OpenAI dépenserait environ 7 milliards de dollars en calcul d’IA, tout en perdant environ 5 milliards de dollars en autres coûts d’exploitation. Cependant, la société a annoncé début octobre que son dernier cycle de financement d'investissement s'élevait à 6,6 milliards de dollars, pour une valorisation post-monétaire de 157 milliards de dollars. "Le nouveau financement nous permettra de renforcer notre leadership dans la recherche de pointe sur l'IA, d'augmenter la capacité de calcul et de continuer à créer des outils qui aident les gens à résoudre des problèmes difficiles", a écrit la société dans son communiqué .
Selon un rapport de Reuters publié jeudi, Microsoft et Meta dépensent librement pour développer leurs capacités de calcul d'IA respectives. Microsoft dépenserait autant de capital chaque trimestre qu'elle en dépensait annuellement avant 2020. La société rapporte également que ses dépenses en capital ont augmenté de plus de 5 % au premier trimestre 2024, pour atteindre 20 milliards de dollars, et s'attend à dépenser encore plus. au T2. Meta, en revanche, a dépensé autant de capital chaque trimestre de 2024 qu’elle l’a fait chaque année jusqu’en 2017.
Quant à Google, il aurait dépensé 13 milliards de dollars en dépenses d'investissement au troisième trimestre 2024 , soit une augmentation de 63 % par rapport à la même période de l'année dernière. De plus, l'entreprise a investi quelque 38 milliards de dollars dans l'infrastructure informatique depuis le début de l'année, soit un bond de 80 % par rapport aux trois premiers trimestres de 2023. Soudain, 10 milliards de dollars entre deux entreprises et une poignée de projets semblent presque surannés.