Co-Design Optimization for Data Center Cooling System via Digital Twin

Résumé technique : Optimisation par co-conception du système de refroidissement d'un centre de données via jumeau numérique

Énoncé du problème
Les superordinateurs exascale refroidis par liquide, tels que le système Frontier du Laboratoire national d'Oak Ridge, dissipent d'énormes quantités de chaleur (8–30 MW) via des centrales de refroidissement organisées en plusieurs sous-boucles parallèles. Bien que la collecte de données opérationnelles et les stratégies de contrôle aient été étudiées, une approche systématique de la conception de ces installations reste sous-développée. Plus précisément, l'allocation optimale des unités de distribution de liquide de refroidissement (CDU) entre les sous-boucles parallèles et la distribution dynamique du débit de liquide de refroidissement entre elles n'ont pas été optimisées conjointement. La littérature existante traite souvent la topologie de la centrale comme fixe ou se concentre uniquement sur le contrôle opérationnel sans aborder l'espace de conception combinatoire du partitionnement des CDU et de l'allocation des débits. Cet article comble le vide dans l'optimisation par co-conception, visant à déterminer la partition entière optimale des CDU, les fractions de débit continues et les points de consigne opérationnels par pas de temps afin de minimiser la consommation annuelle d'énergie de refroidissement.

Méthodologie
Les auteurs proposent un cadre d'optimisation à trois couches appliqué à un jumeau numérique physique réduit du système de refroidissement Frontier, calibré par rapport au modèle Stage 1 Modelica et validé à l'aide de données opérationnelles de 2023 (49 353 pas de temps).

1. Couche 1 : Conception de la topologie (partition entière) : Cette couche détermine la partition entière de $N=25$ CDU en $K$ sous-boucles parallèles. L'espace de conception inclut toutes les partitions réalisables pour $K \in \{2, 3, 4, 5, 6\}$, soit un total de 611 configurations distinctes. Le cadre évalue à la fois les politiques d'affectation « équilibrées » (CDU triées par charge) et « pires cas » (CDU à forte charge regroupées).
2. Couche 2 : Optimisation des fractions de débit (allocation continue) : Cette couche détermine les fractions de débit continues ($f_k$) allouées à chaque sous-boucle. Ces fractions peuvent être fixes (proportionnelles au nombre de CDU) ou optimisées dynamiquement à chaque pas de temps pour équilibrer l'intensité thermique entre les sous-boucles.
3. Couche 3 : Co-conception opérationnelle (contrôle) : Cette couche optimise le débit massique total ($\dot{m}$) et le point de consigne de température d'arrivée ($T_{sup}$) à chaque pas de temps. L'objectif est de minimiser la puissance totale de la centrale (pompe + ventilateur de tour de refroidissement) sous réserve de contraintes de sécurité thermique par sous-boucle (température de retour $\le 42^\circ$C).

Le cadre résout le problème non linéaire mixte-entier en énumérant exhaustivement les 611 partitions entières (Couche 1) et en résolvant le sous-problème continu (Couches 2 et 3) à l'aide de la programmation séquentielle des moindres carrés (SLSQP) avec des gradients analytiques. Trois stratégies opérationnelles sont comparées :

• Stratégie A : Optimisation du débit uniquement (température fixe, débit proportionnel fixe).
• Stratégie B : Co-conception du débit et de la température avec débit proportionnel fixe.
• Stratégie C : Optimisation complète à trois couches avec fractions de débit ajustées dynamiquement.

Contributions clés

1. Cadre à trois couches : Développement d'une approche de décomposition qui sépare les décisions de topologie entières des décisions opérationnelles continues, fournissant un certificat d'optimalité globale sur l'espace de conception discret via une énumération exhaustive.
2. Évaluation complète : Application du cadre au système Frontier, évaluant les 611 partitions de CDU réalisables sur une année complète de données opérationnelles dans des scénarios d'affectation équilibrés et pires cas.
3. Hiérarchie de décision : Établissement d'une hiérarchie de décision démontrant que le choix de la stratégie opérationnelle domine les décisions de topologie, qui à leur tour dominent l'allocation CDU-vers-sous-boucle.
4. Compensation par fraction de débit : Démonstration que l'optimisation dynamique des fractions de débit peut compenser des affectations de CDU sous-optimales, découplant efficacement le choix de partition de la couche de conception du résultat énergétique final.

Résultats

• Topologie optimale : La conception globalement optimale est une centrale à deux sous-boucles avec une partition CDU de (19, 6), réalisant 35,48 % d'économies d'énergie de refroidissement annuelles. La conception actuelle de Frontier (trois sous-boucles, partition 14-6-5) réalise 35,30 % d'économies sous la même stratégie optimisée, se situant seulement 0,18 % en dessous de l'optimum global.
• Impact de la stratégie : Le passage de l'optimisation du débit uniquement (Stratégie A, ~23,4 % d'économies) à la co-conception complète à trois couches (Stratégie C) produit une amélioration de 12,0 % des économies d'énergie.
• Valeur de l'optimisation du débit : L'optimisation des fractions de débit (Stratégie C par rapport à la Stratégie B) apporte des économies supplémentaires de 0,2 à 0,5 %. Crucialement, l'optimisation du débit réduit la sensibilité des performances énergétiques à l'affectation spécifique CDU-vers-sous-boucle de 93 %. Avec des fractions de débit fixes, la différence entre les partitions meilleures et pires est d'environ 5,3 % ; avec un débit optimisé, cet écart s'effondre à environ 0,4 %.
• Équilibrage de la charge de travail : L'étude constate que la redistribution dynamique du débit agit comme un équivalent fonctionnel à l'équilibrage de la charge de travail. Bien que l'équilibrage passif de la charge de calcul entre les CDU réduise la consommation d'énergie, le contrôle actif du débit atteint la même égalisation de l'intensité thermique sans nécessiter de modifications au planificateur de tâches HPC.

Signification et affirmations
L'article affirme que pour l'installation Frontier, l'amélioration la plus pratique et rentable n'est pas une reconfiguration physique de la topologie de la centrale de refroidissement (par exemple, passer de trois à deux sous-boucles), mais plutôt l'activation d'un contrôle de débit indépendant par sous-boucle via une mise à jour logicielle. Cette modernisation « logicielle uniquement » peut récupérer environ 10 MWh/an d'économies d'énergie supplémentaires par rapport à une base proportionnelle fixe, avec un coût en capital négligeable.

Les auteurs affirment que le cadre proposé est transférable à d'autres centrales de calcul haute performance (HPC) refroidies par liquide. Ils positionnent ce travail comme la troisième étape d'une progression de l'optimisation du refroidissement : passant de la quantification des déchets basée sur les données au contrôle validé basé sur la physique, et enfin à la co-conception conjointe de la conception et de l'opération. La méthodologie offre une alternative computationnellement traitable à la programmation non linéaire mixte-entier générale pour les systèmes où l'espace de conception entier est suffisamment petit pour une énumération exhaustive, fournissant un optimum global prouvable que les méthodes de branchement et de borne ne peuvent garantir pour des modèles thermohydrauliques non convexes.