What makes it tick

Informatique

GitHub

Comment fonctionne un centre de données

Suivez en 3D le parcours de l’électricité dans un centre de données d’IA : de la ligne haute tension à une baie de 120 kW, où elle devient chaleur, évacuée ensuite par le toit.

01

L’électricité entre, la chaleur sort

Un centre de données est un bâtiment rempli d’ordinateurs, appelés serveurs, qui font tourner les sites web, les applications et l’IA. Son fonctionnement suit un cycle simple : l’électricité entre, la chaleur sort. Le courant arrive par une ligne haute tension, et le poste électrique en abaisse la tension. Des groupes électrogènes diesel sont alignés à côté de la salle informatique. Sur son toit, un groupe froid refroidit l’eau, à la manière d’un grand réfrigérateur, et des aéroréfrigérants transmettent la chaleur à l’air extérieur.

Dans la salle se dressent les baies : de hautes armoires en acier remplies de serveurs. La salle de ce modèle compte 192 baies, réparties en 16 rangées. Cette disposition est propre au modèle : en réalité, il existe des salles de toutes les tailles. Quand toutes les baies sont à pleine charge, les serveurs consomment environ 23 MW. En ajoutant le refroidissement et les pertes électriques, un site moyen prélève environ 35 MW sur le réseau. Les meilleurs sites font mieux, comme le montre le dernier chapitre.

En 2024, l’ensemble des centres de données de la planète a consommé environ 415 TWh d’électricité. Cela représente environ 1,5 % de l’électricité consommée dans le monde. L’Agence internationale de l’énergie prévoit environ 945 TWh d’ici 2030. Les sites géants sont dits « hyperscale » : on en comptait 1 136 fin 2024. Google a ouvert son premier centre de données en 2006, à The Dalles, dans l’Oregon.

Le repère lumineux indique où se trouve l’énergie à chaque instant de l’animation. Il est ambre tant qu’elle circule sous forme d’électricité, rouge dès qu’elle s’est changée en chaleur. En réalité, l’énergie ne se transmet pas par paquets distincts. Suivre une petite quantité d’énergie permet toutefois de voir où va l’ensemble. L’électricité atteint une puce en moins d’une microseconde, puis la chaleur met environ une minute à quitter le bâtiment par le toit. L’animation étire donc la partie rapide et comprime la partie lente. L’horloge indique le temps du modèle, pas une mesure.

Baies dans ce modèle
192, in 16 rows
Puissance des serveurs
23.0 MW
Puissance tirée du réseau
about 35.5 MW at a PUE of 1.54
Tous les centres de données du monde
about 415 TWh in 2024, 1.5% of the world's electricity

02

Un courant qui ne doit pas s’arrêter

L’électricité arrive par la ligne haute tension. La haute tension permet de transporter le courant sur de longues distances avec peu de pertes. Le poste électrique et ses transformateurs abaissent la tension, puis des transformateurs plus petits l’abaissent encore près de la salle. Chacun transmet environ 98 à 99 % de l’énergie qu’il reçoit. Les tensions indiquées ici ne sont qu’un exemple : chaque site choisit les siennes.

Vient ensuite le tableau de distribution, un mur de gros interrupteurs qui aiguillent le courant et isolent toute partie défaillante. Le courant traverse alors l’onduleur, ou ASI (alimentation sans interruption), et ses batteries. Si le réseau tombe en panne, les batteries prennent aussitôt le relais et peuvent alimenter la salle pendant quelques minutes, en général de 5 à 15. De là, la gaine à barres, d’épaisses barres de métal logées dans un long boîtier, amène le courant dans la salle et le long des rangées.

Les batteries ne font que gagner du temps. Le véritable secours, ce sont les groupes électrogènes diesel. Les normes de sécurité exigent qu’ils prennent le relais en 10 secondes au plus. Sur le terrain, il leur faut de 10 à 60 secondes. Un groupe comme le Cat 3516C de Caterpillar fournit environ 1,8 MW. Il pèse quelque 17 tonnes et brûle environ 466 litres de gazole par heure à pleine charge. Les versions plus puissantes de ce modèle atteignent environ 2,5 MW.

Appuyez sur « Couper le courant » pour lancer une simulation de panne. Les batteries alimentent la salle pendant que les groupes démarrent. Les groupes prennent ensuite le relais, et les batteries se rechargent. Dans ce modèle, le réseau revient au bout de 20 secondes, une durée choisie pour la simulation, et les groupes s’arrêtent progressivement. Les sites sont classés selon leur capacité à faire face aux pannes : un site Tier III peut être entretenu sans interruption de service, et un site Tier IV continue de fonctionner malgré une défaillance. Malgré tout, les problèmes d’alimentation ont causé 45 % des pannes graves en 2025.

Exemple de paliers de tension
medium voltage, then 415 V AC, then about 50 V DC
Relais des groupes électrogènes
within 10 s by code, 10 to 60 s at real sites
Autonomie des batteries
typically 5 to 15 minutes
Un groupe électrogène
about 1.8 MW, about 17 t
Gazole à pleine charge
about 466 litres an hour
Pannes graves d’origine électrique
45% in 2025

03

Au cœur d’une baie de 120 kW

Le courant aboutit à une baie Nvidia GB200 NVL72. Elle contient 72 GPU, les puces qui effectuent les calculs de l’IA, et 36 CPU, les puces qui pilotent tout le reste. Ces puces sont réparties sur 18 tiroirs de calcul, de fins plateaux qui coulissent dans la baie. Intercalés entre eux, 9 tiroirs de commutation relient les 72 GPU les uns aux autres. Ici, l’ordre des tiroirs est propre au modèle.

Le courant entre par le haut et par le bas de la baie, dans six blocs d’alimentation. Ils convertissent le courant alternatif (CA) de la salle en courant continu (CC), sous environ 50 V. Le jeu de barres CC, d’épaisses barres de cuivre qui courent au dos de la baie, alimente chaque tiroir avec un courant pouvant atteindre 1 400 A. Sous environ 50 V, cela représente environ 70 kW, bien moins que les 120 kW de la baie. Dans ce modèle, le jeu de barres comporte donc une moitié haute et une moitié basse, alimentées chacune par trois blocs. La répartition réelle n’est pas publiée.

À pleine charge, la baie consomme environ 120 kW, et HPE annonce 132 kW pour sa propre version. Environ un dixième de la puissance prélevée sur le réseau se perd avant d’atteindre la baie, sous forme de chaleur, dans les transformateurs, l’onduleur et les blocs d’alimentation. La baie pèse environ 1,4 tonne, à peu près autant qu’une voiture électrique de taille moyenne. Beaucoup de salles sont équipées d’un faux plancher : un sol surélevé sous lequel passent les câbles et l’air. Un faux plancher standard n’est pas conçu pour supporter autant de poids sur une si petite surface. Les salles d’IA ont donc besoin d’un sol renforcé.

Dans un GPU, l’électricité allume et éteint de minuscules transistors pour effectuer les calculs. Ce travail ne conserve rien de l’énergie : la quasi-totalité se transforme aussitôt en chaleur, au cœur même de la puce. Le gros plan sur la puce la montre agrandie 10 fois. Ses dimensions sont indicatives, et non mesurées. De petits ventilateurs de tiroir restent nécessaires pour refroidir les cartes réseau et le stockage. Choisissez « Au repos » pour voir la charge baisser. Dans ce modèle, une baie au repos consomme encore 30 % de sa pleine puissance.

Puissance actuelle de la baie
120 kW
Puces
72 GPUs, 36 CPUs
Tiroirs
18 compute, 9 switch
Jeu de barres CC
up to 1,400 A at about 50 V
Poids
about 1.4 t
Pertes avant la puce
roughly a tenth, as heat
Ventilateurs
small tray fans, spinning fast

04

Quelques microsecondes d’écart

Les tâches d’IA les plus lourdes sont réparties sur de nombreux GPU : les puces échangent donc des données en permanence. Dans la baie, elles passent par NVLink, des liaisons en cuivre qui traversent les tiroirs de commutation. Chaque GPU peut envoyer et recevoir 1,8 To/s, et la baie entière 130 To/s. To/s signifie téraoctets par seconde, soit mille milliards d’octets chaque seconde.

Entre les baies, les données passent par des commutateurs réseau. Au bout de chaque rangée se trouve un commutateur leaf, « feuille » en anglais. Chaque leaf est relié à tous les commutateurs spine, placés au milieu : ils forment l’épine dorsale du réseau. Une baie peut ainsi atteindre n’importe quelle autre en trois sauts : leaf, spine, leaf. Le modèle ne représente que deux commutateurs spine et un leaf par rangée. Les salles réelles en comptent bien davantage.

Un commutateur rapide, comme le 7060X6 d’Arista, ajoute environ 700 nanosecondes. Une nanoseconde est un milliardième de seconde. Dans une fibre optique, la lumière met environ 5 microsecondes pour parcourir un kilomètre. Traverser la salle ne prend donc que quelques microsecondes, c’est-à-dire quelques millionièmes de seconde. Suivez les tirets verts, de l’arrivée de la fibre jusqu’à la baie, en passant par les commutateurs.

Le délai le plus long est celui du trajet jusqu’à l’utilisateur. Pour une ville située à 1 000 km, l’aller-retour dans la fibre prend environ 10 millisecondes. Pour une ville à 100 km, il faut environ 1 milliseconde. Ces chiffres ne tiennent compte que de la fibre. Les logiciels ajoutent leur propre temps de traitement. Choisissez une distance pour comparer.

NVLink dans la baie
1.8 TB/s per GPU, 130 TB/s in all
Passage par un commutateur
about 700 ns
Lumière dans la fibre
about 4.9 µs per km
Traversée de la salle
about 2.6 µs, three switches and the fibre
Aller-retour jusqu’à l’utilisateur
about 9.8 ms, fibre alone

05

Évacuer la chaleur

L’énergie s’est désormais changée en chaleur, qu’il faut évacuer. Sur chaque puce repose une plaque froide : un bloc de métal parcouru par de l’eau. Lors d’une conférence, Nvidia a indiqué que l’eau entre dans la baie à environ 25 °C et en ressort à environ 45 °C. Ce modèle règle le débit de sa pompe pour qu’une baie à pleine charge réchauffe l’eau de ces 20 degrés.

Le collecteur est un ensemble de tuyaux fixés sur le côté de la baie. Il envoie l’eau réchauffée le long de la rangée, jusqu’à l’unité de distribution du liquide, la CDU selon son sigle anglais. Là, la chaleur passe dans une deuxième boucle : l’eau du bâtiment, qui dessert tout le site. Les deux circuits d’eau ne se mélangent jamais. L’eau du bâtiment est environ 5 degrés plus froide : elle doit donc arriver à environ 20 °C. Une CDU comme la CHx2000 de CoolIT transfère 2 MW de chaleur et occupe environ 1,2 m² au sol. Ce modèle en place une par rangée.

Les tuyaux du bâtiment acheminent la chaleur jusqu’au toit. Une eau à 20 °C est plus fraîche que l’air de bien des journées d’été : le groupe froid commence donc par en extraire de la chaleur. Les aéroréfrigérants soufflent ensuite l’air extérieur sur des serpentins chauds, et la chaleur quitte le site avec l’air ainsi réchauffé. Ici, toutes les boucles sont fermées : la consommation d’eau est donc très faible. Beaucoup de sites utilisent plutôt des tours de refroidissement, qui évacuent la chaleur en évaporant de l’eau. Aux États-Unis, les centres de données ont consommé sur place environ 66 milliards de litres d’eau en 2023.

Choisissez « Air » pour passer à des baies refroidies par air, la solution traditionnelle. Des ventilateurs aspirent l’air frais à l’avant de chaque baie et le rejettent à l’arrière, dans une allée chaude : l’espace entre deux rangées où l’air chaud s’accumule. Des centrales de traitement d’air transmettent ensuite cette chaleur à la même eau du bâtiment. L’air transporte bien moins de chaleur que l’eau : chaque kW demande environ 272 m³ d’air par heure. Certains sites récupèrent leur chaleur : à Odense et à Stockholm, des centres de données contribuent au chauffage de logements.

Élévation de température dans la baie
the water leaves 20 degrees warmer
Eau du bâtiment
about 20 °C, 5 degrees below the rack loop
Une CDU
2 MW of heat on about 1.2 m²
Eau par unité de calcul, États-Unis
about 0.36 L per kWh
Centres de données américains, 2023
about 66 billion litres used on site

06

Pourquoi l’eau l’emporte

Remplissez maintenant la même salle de baies refroidies par air. Dans ce modèle, chacune absorbe 10 kW : la salle entière consomme donc environ douze fois moins. L’air ne peut guère faire mieux : en pratique, une baie refroidie par air plafonne autour de 20 à 35 kW. Pour évacuer 120 kW avec de l’air, il faudrait en faire passer environ 32 600 m³ par heure dans une seule baie.

À côté de la baie, un ordinateur portable est posé sur un bureau. Son chargeur a une puissance de 40 W : une baie à pleine charge équivaut donc à 3 000 chargeurs. Si elle fonctionne à pleine charge toute l’année, une seule baie consomme autant d’électricité qu’environ 100 logements américains, ou 270 logements européens. L’ENIAC compte parmi les premiers ordinateurs électroniques. En 1945, il consommait 150 kW, un peu plus que cette baie à elle seule. Il pesait environ 27 tonnes et occupait une pièce entière.

On compare aussi les sites grâce à l’indicateur d’efficacité énergétique PUE, pour « power usage effectiveness » en anglais. Il s’agit de la puissance du site divisée par celle des serveurs : un site parfait obtiendrait donc 1. La moyenne du secteur se situe autour de 1,5. Autrement dit, environ 35 % de la puissance n’atteint jamais un serveur. En 2025, les centres de données de Google affichaient en moyenne 1,09. Il ne restait donc que 8 % pour le refroidissement et les pertes.

Le choix entre « Moyenne du secteur » et « Sites de Google » modifie le site de référence, pas le refroidissement de la baie. Aucune étude ne donne de PUE distinct pour le refroidissement par air et par liquide : le modèle ne relie donc pas les deux. Quel que soit votre choix, le parcours de l’énergie s’achève de la même façon, sous forme d’air tiède au-dessus du toit.

Une baie à pleine charge
120 kW
Débit d’air nécessaire
32,640 m³/h
Équivalent en logements, sur une année
about 97 US or 270 EU homes
Chargeurs d’ordinateur portable
3,000 at 40 W each
PUE
1.54, industry average
Ce qui ne sert pas au calcul
35% of site power