A Scalable Two-Stage Back-End Architecture for 400GbE Data Acquisition Systems

Au cœur de l'Europe, sous la frontière entre la France et la Suisse, se trouve le Grand Collisionneur de Hadrons, une machine si vaste qu'elle fait le tour de la croûte terrestre pour fracasser des particules les unes contre les autres à une vitesse proche de celle de la lumière. Lorsque ces collisions se produisent, elles génèrent un déluge de données, un torrent d'informations qui doit être capturé, trié et analysé avant de disparaître. Cette tâche incombe au système d'acquisition de données, un réseau complexe d'électronique qui agit comme le système nerveux de l'expérience. Il doit recueillir les signaux de milliers de minuscules capteurs dispersés à travers un détecteur massif, chaque capteur s'exprimant dans un langage spécialisé et durci contre les radiations. Le défi n'est pas seulement d'écouter ces murmures, mais de les recueillir de chaque recoin de la machine et de les combiner en un flux unique et rugissant d'informations pouvant être traitées par des ordinateurs. Alors que la machine se prépare pour sa prochaine phase, plus puissante, le volume de ces données est appelé à exploser, menaçant de submerger les fils et les puces mêmes conçus pour les transporter.

Pendant des décennies, les scientifiques se sont appuyés sur de puissantes et coûteuses puces informatiques appelées circuits logiques programmables (FPGA) pour effectuer ce travail de force. Ces puces sont comme des traducteurs universels, capables de décoder les signaux uniques des capteurs et de les convertir dans un format compréhensible par les ordinateurs standards. Cependant, à mesure que les débits de données grimpent vers des centaines de térabits par seconde, l'approche traditionnelle consistant à utiliser les puces les plus puissantes et les plus chères pour chaque connexion devient trop coûteuse et physiquement difficile à gérer. Les fils à l'intérieur de ces puces massives manquent de place, et l'énergie requise pour les maintenir au frais devient un facteur limitant. Les chercheurs du CERN, et plus précisément l'équipe travaillant sur l'expérience LHCb, ont été confrontés à un avenir où le nombre de liaisons de données triplerait, nécessitant une nouvelle façon de concevoir la circulation des données du détecteur vers la ferme de serveurs.

Pour résoudre ce problème, l'équipe a proposé une architecture en deux étapes qui déplace la charge de travail loin des composants les plus coûteux. Au lieu de forcer une seule puce massive à tout gérer, ils ont conçu un système qui divise le travail en deux étapes distinctes. Dans la première étape, une puce informatique de milieu de gamme, moins coûteuse et plus abondante, reçoit les signaux provenant des capteurs. Cette puce agit comme un collecteur local, rassemblant des dizaines de ces flux individuels et les regroupant en quelques connexions plus rapides. Elle ne cherche pas à tout faire à la fois ; elle organise simplement le trafic et le prépare pour la prochaine étape du voyage.

La seconde étape est celle où l'innovation brille véritablement. Les flux de données regroupés arrivent à un composant réseau spécialisé, un dispositif conçu spécifiquement pour fusionner plusieurs canaux à haute vitesse en une seule autoroute massive. Ce composant, connu sous le nom de dispositif de couche physique Ethernet, prend trois flux de données distincts et les fusionne en une seule connexion incroyablement rapide, capable de transporter 400 gigabits d'information par seconde. Cette approche permet au système d'utiliser la technologie réseau standard, produite en quantités massives pour l'internet mondial et les centres de données, plutôt que de dépendre de solutions personnalisées et sur mesure, rares et coûteuses. En séparant la tâche de décodage de l'agrégation finale, la conception évite les goulots d'étranglement qui affectent les anciens systèmes.

Les chercheurs ont construit un prototype fonctionnel pour tester si cette idée tenait la route dans des conditions réelles. Ils ont mis en place un environnement de test imitant le flux de données du détecteur, générant trois flux d'informations distincts, chacun circulant à 100 gigabits par seconde. Ces flux ont été injectés dans leur nouveau système à deux étapes, qui les a ensuite combinés en un flux unique de 400 gigabits. Les résultats ont été précis et encourageants. Au cours des tests, le système a traité plus de 610 millions de paquets de données, soit un total de cinq téraoctets d'informations. Tout au long de ce transfert massif, le système n'a laissé tomber aucun paquet et n'a pas perdu l'ordre des données. La vitesse est restée constante, atteignant les taux cibles sans signe de congestion ou de retard. Les mesures ont montré que le taux d'erreur était si bas qu'il était effectivement nul pour des fins pratiques, prouvant que le matériel pouvait supporter l'immense pression du flux de données sans faiblir.

Au-delà de la performance technique, la nouvelle conception offrait un avantage financier significatif. Les chercheurs ont calculé le coût de la gestion de chaque liaison de données individuelle et ont constaté que leur approche en deux étapes était nettement moins chère que les méthodes traditionnelles. En remplaçant les puces haut de gamme coûteuses et les commutateurs réseau complexes par leur architecture rationalisée, ils ont réduit le coût par connexion de près de 29 % par rapport à la solution standard. Cette économie provient de l'utilisation de puces de milieu de gamme, moins chères à l'achat, et d'un dispositif réseau spécialisé qui agrège les données plus efficacement, éliminant ainsi le besoin de couches intermédiaires de matériel coûteux. L'étude suggère que cette méthode n'est pas seulement une possibilité théorique, mais une solution pratique et évolutive qui peut être déployée à mesure que les demandes de données de la physique des particules continuent de croître.

Ce travail confirme qu'il est possible de construire un système d'acquisition de données qui soit à la fois puissant et abordable en tirant parti de la production de masse de la technologie réseau moderne. La conception en deux étapes parvient à découpler l'avant-plan sensible et durci contre les radiations de l'arrière-plan à haute vitesse, permettant à chaque partie de fonctionner à son efficacité optimale. Les chercheurs ont démontré que des flux de données standards, sans recours à des protocoles spécialisés à haute latence, peuvent soutenir le débit massif requis pour les expériences de nouvelle génération. Cette découverte offre une voie claire pour l'expérience LHCb et d'autres entreprises scientifiques de grande envergure, garantissant qu'à mesure que les machines deviennent plus grandes et les données plus lourdes, les systèmes conçus pour les capturer puissent suivre le rythme sans se ruiner.