Le coût réel de l'IME dans les infrastructures essentielles

Dans les environnements où le temps de pointe est mesuré en neuf secondes et latence en microsecondes, même de brefs événements EMI peuvent s'accumuler en pertes financières importantes. Une seule transaction corrompue sur un plancher de négociation financier ou une base de données corrompue écrire dans un système de santé peut avoir des conséquences bien au-delà du coût du matériel de remplacement. Comprendre la physique de l'IME et mettre en œuvre des contre-mesures stratifiées est donc une compétence de base pour toute organisation qui maintient l'infrastructure de serveur sur site.

Les centres de données modernes accumulent des densités de puissance croissantes dans des empreintes plus petites. Des alimentations de commutation à haute fréquence, des réseaux de serveurs denses et des connexions série à haute vitesse génèrent tous des champs électromagnétiques qui peuvent s'associer à des câbles et des rétroplans adjacents. En même temps, l'équipement est plus sensible que jamais : les processeurs modernes fonctionnent à des seuils de tension plus faibles, ce qui les rend plus sensibles aux courants induits.

Fondations de l'interférence électromagnétique dans les centres de données

L'IME dans un contexte de data center se réfère à l'énergie électromagnétique non désirée qui se propage par conduction ou rayonnement et perturbe le fonctionnement normal des équipements électroniques. Les sources sont à la fois internes et externes: les sources internes comprennent les alimentations du serveur, les onduleurs UPS, les moteurs de ventilateurs de refroidissement et même la signalisation à grande vitesse sur les avions arrière.

La distinction critique dans un centre de données est entre EMI rayonné, qui voyage dans l'air et se marie en câbles ou en ouvertures de châssis, et EMI , qui voyage le long de lignes électriques, de chemins de terre ou de câbles de signal.

L'IMI se manifeste dans plusieurs symptômes observables : erreurs CRC inexpliquées sur les interfaces réseau, défaillances de lecture/écriture de disque, blocages de système qui ne peuvent être reproduits dans les tests, dégradation progressive de l'efficacité de l'alimentation. Ces symptômes sont souvent mal attribués aux bogues logiciels ou aux défauts matériels, conduisant à des cycles de dépannage coûteux et futile.

L'environnement électromagnétique d'une salle de serveur typique

Une salle de serveur typique contient des dizaines d'alimentations, chacune fonctionnant comme un convertisseur de commutation à des fréquences comprises entre 50 kHz et 1 MHz. Ces convertisseurs génèrent des harmoniques qui s'étendent bien dans la gamme de mégahertz. Les ventilateurs de refroidissement ajoutent du bruit à basse fréquence. Les cartes mères du serveur génèrent elles-mêmes des émissions des signaux d'horloge, des bus à mémoire et des voies PCIe qui fonctionnent à des fréquences multi-gigahertz.

Au-delà de l'équipement lui-même, l'infrastructure de l'installation contribue au profil EMI. Les alimentations non interruptibles, en particulier les unités de double conversion plus anciennes, peuvent injecter un bruit de commutation important sur les conducteurs neutres et au sol.

Stratégie 1: Architecture de base et de liaison

L'intervention la plus efficace pour la gestion de l'IME est une infrastructure de mise à la terre et de liaison bien conçue. L'intervention de mise à la terre sert deux objectifs distincts dans ce contexte : elle fournit un chemin de faible impédance pour les courants de défaillance, et elle établit un plan de référence stable pour les tensions de signal.

Étoile à terre contre Mesh à terre

La mise à la terre traditionnelle des télécommunications utilise une topologie stellaire, où chaque armoire et chaque pièce d'équipement sont reliées à un seul point. Cette approche empêche les boucles de terre, qui sont une source commune d'EMI conduite à basse fréquence. Cependant, à des fréquences plus élevées (au-dessus de 1 MHz), l'induction de conducteurs de sol longs rend la mise à la terre des étoiles inefficace.

Une grille de référence de signal, généralement construite à partir de la sangle de cuivre ou d'une tresse en forme de grille de 2 pieds sur 2 pieds, fournit un plan de référence à faible inductance pour tous les équipements au-dessus. Les cadres de cabinet sont reliés à cette grille avec des conducteurs ne dépassant pas 24 pouces. La grille elle-même est liée au système principal d'électrodes de mise à la terre du bâtiment à plusieurs points.

Liste de contrôle pratique de la justification

  • Vérifier que tous les cadres de l'armoire sont reliés à la grille de référence du signal avec un conducteur de mise à la terre dédié, et non pas à travers les boulons de rack seuls.
  • Veiller à ce que le réseau soit collé à l'acier de construction et au système d'électrodes de mise à la terre principal à un minimum de deux points.
  • Éviter les récipients au sol isolés dans les applications des centres de données, sauf si les instructions du fabricant l'exigent expressément, car ils peuvent créer des différences potentielles entre le châssis de l'équipement et le réseau de référence.
  • Utilisez un testeur d'impédance au sol chaque année pour vérifier que l'impédance de n'importe quel cadre d'armoire au sol principal est inférieure à 0,1 ohm à 60 Hz.

Stratégie 2 : Gestion et séparation des câbles

Lorsque les câbles électriques et les câbles de données sont acheminés dans les mêmes pistes ou plateaux de câbles, le couplage électromagnétique est presque inévitable. Le champ magnétique autour d'un câble d'alimentation transportant des courants pulsés d'une alimentation en courant de commutation induit des courants de mode commun dans les câbles de données adjacents. Ces courants de mode commun dégradent l'intégrité du signal et peuvent causer des erreurs de bits au récepteur.

Distances de séparation

Les normes industrielles telles que TIA-942 et BICSI-002 fournissent des indications spécifiques pour la séparation des câbles. La règle générale est que les câbles de données non blindés doivent maintenir une séparation minimale de 2 pouces des câbles de puissance transportant moins de 20 ampères et de 6 pouces pour les câbles transportant plus de 20 ampères. En pratique, ces distances devraient être augmentées lorsque les câbles de données sont acheminés en parallèle avec les câbles de puissance pour des parcours prolongés.

Les câbles de puissance et les câbles de données à 90 degrés d'angle sont acceptables et ne nécessitent pas de séparation, à condition que le croisement soit propre et que les câbles ne soient pas groupés. L'accouplement du champ magnétique est proportionnel à la longueur de l'exposition parallèle; un croisement perpendiculaire a essentiellement un couplage zéro.

Cabines blindées et connecteurs

Le câblage à paire torsadée blindée (STP) avec connecteurs correctement terminés offre 20-30 dB d'immunité supplémentaire par rapport à la paire torsadée non blindée (UTP), mais seulement si le bouclier est mis à la terre aux deux extrémités et que le connecteur atteint la continuité de l'écran à 360 degrés. De nombreuses installations utilisent le câble STP mais le terminent avec des fiches UTP, ce qui annule efficacement l'avantage de blindage. Lorsqu'il est utilisé, le bouclier doit être collé au sol de l'armoire au panneau de patch et au sol de l'équipement au point de départ.

Pour le câblage à fibre optique, l'IME ne concerne pas la fibre elle-même, mais l'électronique à chaque extrémité reste sensible. Les convertisseurs de fibres à cuivre sont une source fréquente de problèmes d'IME parce qu'ils fonctionnent souvent avec un filtrage inadéquat du côté cuivre. Les convertisseurs de médias doivent être spécifiés avec un filtrage EMI intégral et des boîtiers métalliques qui fournissent au moins 20 dB d'efficacité de blindage à 100 MHz.

Stratégie 3 : Filtre EMI pour les voies de transmission et de signalisation

Les filtres sont la deuxième ligne de défense après mise à la terre et gestion des câbles. Un filtre EMI est un réseau passif de condensateurs et d'inducteurs conçus pour passer la puissance ou l'énergie de signal basse fréquence tout en atténuant le bruit haute fréquence.

Filtres de ligne électrique

Chaque équipement qui se connecte au secteur AC devrait présenter une impédance contrôlée à la source d'alimentation. La plupart des alimentations de qualité comprennent le filtrage interne, mais dans des environnements à haute IME, les filtres externes au niveau du rack peuvent fournir une atténuation supplémentaire. Un filtre EMI type monophasé fournit 40-60 dB d'atténuation à mode commun au-dessus de 150 kHz. Ces filtres doivent être installés le plus près possible de l'équipement qu'ils protègent, idéalement à moins de 12 pouces de l'alimentation électrique.

Pour la distribution de puissance en trois phases dans les grands centres de données, des filtres harmoniques et des conditionneurs actifs[ peuvent atténuer les émissions des systèmes UPS et des grands groupes de serveurs.

Filtres et ferrites de ligne de signal

Pour les câbles de signal qui ne peuvent être déplacés loin des sources sonores, les étranglements ferrites fournissent une solution de filtrage simple et rentable. Les billes de ferrites suppriment les courants à haute fréquence en mode commun en présentant une impédance résistive à la fréquence indésirable. La sélection de matériel ferrite dépend de la gamme de fréquences de l'interférence : les ferrites nikel-zinc sont efficaces au-dessus de 10 MHz, tandis que les ferrites manganèse-zinc sont mieux adaptées aux fréquences entre 100 kHz et 10 MHz.

Pour une efficacité maximale, les ferrites doivent être placées à l'extrémité source du câble (où l'interférence est générée) ou à l'extrémité victime (où l'interférence entre l'équipement sensible). Plusieurs tours du câble à travers le noyau ferrite augmentent l'impédance par le carré du nombre de tours, de sorte qu'un câble passé à travers un noyau ferrite trois fois présente neuf fois l'impédance d'un seul passage.

Pour les câbles de signal installés en permanence, les filtres de signal en ligne avec boîtiers connexés offrent des performances plus prévisibles que les ferrites à clip. Ces filtres intègrent à la fois le filtrage en mode commun et le filtrage en mode différentiel et sont disponibles pour une variété d'interfaces de signal, y compris les entrées de capteur RS-485, Ethernet et analogique.

Stratégie 4 : Mise en place et zonage des équipements

L'arrangement physique des équipements au sein d'un centre de données a un impact direct sur l'environnement EMI. Les équipements qui génèrent des niveaux élevés d'émissions apparentes devraient être physiquement séparés des équipements les plus sensibles. Ce principe, connu sous le nom de zonage électromagnétique[, est bien établi dans les applications militaires et aérospatiales, mais est souvent négligé dans les centres de données commerciaux.

Création de zones EMI

Commencez par classer tous les équipements en trois catégories : sources à haute émission[ (inverters UPS, unités de distribution d'énergie avec convertisseurs de commutation, gros moteurs pour le refroidissement), victimes sensibles (disques de stockage, commutateurs de réseau, cartes mères de serveurs) et appareils neutres[ (panneaux de patchs passifs, cadres de distribution de fibres, gestion des câbles). Les sources à haute émission doivent être placées dans des armoires ou des zones dédiées d'au moins 10 pieds de matériel sensible.

Dans la pratique, cela signifie que l'on doit localiser les systèmes UPS et les transformateurs PDU dans une salle électrique séparée chaque fois que possible, et non dans la même zone ouverte que les armoires de serveurs. Si l'équipement UPS doit être colocalisé avec des serveurs, il doit être placé à la fin d'une ligne avec une barrière métallique entre la zone UPS et la zone serveur. La barrière doit être liée à la grille de référence du signal à plusieurs points afin d'assurer un blindage efficace.

Considérations relatives au placement et à la ventilation du Cabinet

Les armoires contenant du matériel à haute émission devraient être placées au périmètre du plancher du centre de données, et non au centre. Cela permet à l'énergie irradiée de se dissiper vers les murs plutôt que de se raccorder dans des armoires adjacentes. L'espacement entre les rangées d'armoires devrait suivre les recommandations etmdash publiées;typiquement un minimum de 4 pieds entre les rangées faisant face à l'avant et de 3 pieds entre les rangées faisant face à l'arrière—pour permettre à la fois le débit d'air et l'isolement électromagnétique.

Les ouvertures de ventilation dans les portes et panneaux de l'armoire peuvent compromettre l'efficacité du blindage si elles dépassent les limites spécifiées par le fabricant. Toute ouverture de plus de 1/20 de la longueur d'onde de la fréquence interfère peut agir comme une antenne à fente. Pour les fréquences jusqu'à 1 GHz, cela signifie que les ouvertures doivent être inférieures à 0,6 pouces.

Stratégie 5 : Bouclier environnemental et conception de la cage de Faraday

Lorsque les sources EMI sont externes au centre de données, ou lorsque les émissions internes sont si graves que le zonage et le filtrage sont insuffisants, le blindage structurel peut être nécessaire. Une enceinte blindée, communément appelée cage Faraday, crée un volume qui est isolé des champs électromagnétiques externes. Dans les centres de données, cela est généralement obtenu par revêtement des murs, des planchers et des plafonds avec des matériaux conducteurs et assurer la continuité électrique à travers toutes les coutures.

Matériaux et construction

Le matériau de construction le plus courant pour le blindage du centre de données est la tôle d'acier galvanisée en épaisseur de calibre 14-16, installée avec des coutures et des joints conducteurs chevauchants à tous les joints. Le maillage en cuivre incorporé dans le panneau mural est une solution de rechange pour les applications de modernisation où l'acier ne peut pas être utilisé. Le blindage doit s'étendre sur les six côtés de la pièce, y compris le plancher et le plafond, pour être efficace. Les pénétrations pour câbles, conduits et tuyaux sont les points de défaillance de blindage les plus courants et doivent être traités avec des pénétrations de coupe au-delà du guide d'onde ou des joints conducteurs.

Pour les installations existantes où le blindage en salle complète est peu pratique, les armoires de matériel blindé offrent une alternative localisée. Une armoire blindée bien conçue fournit 40-60 dB d'atténuation jusqu'à 1 GHz, suffisante pour protéger un seul rack d'équipement contre les interférences externes.

Efficacité de l'essai de blindage

L'efficacité du blindage devrait être vérifiée après l'installation et périodiquement par la suite. La méthode d'essai standard, IEEE 299-2006, utilise une antenne de transmission à l'extérieur de l'enceinte et une antenne de réception à l'intérieur pour mesurer l'atténuation à plusieurs fréquences. Les fréquences clés pour les essais de centres de données comprennent 100 kHz (harmoniques de ligne d'alimentation), 1 MHz (bruit d'alimentation en commutation), 100 MHz (bandes de radiodiffusion FM et sans fil) et 1 GHz (bandes de radiotélévision cellulaire et Wi-Fi). L'atténution devrait dépasser 40 dB à toutes les fréquences testées pour une salle blindée à usage général et 60 dB pour des applications de haute sécurité.

Des essais annuels ou semestriels sont recommandés parce que l'efficacité du blindage se dégrade avec le temps en raison de la compression des joints de porte, de la corrosion aux joints de joint et des modifications apportées aux pénétrations des installations. Un simple essai qualitatif effectué à l'aide d'une sonde à champ proche et d'un analyseur de spectre peut identifier des points de fuite sans que cela ne coûte pour les essais complets de l'IEEE 299 et doit être effectué après toute modification des installations.

Stratégie 6 : Contrôles et surveillance de l ' environnement

Les facteurs environnementaux tels que l'humidité, la température et la contamination par les particules interagissent avec l'IME de manière souvent sous-estimée. La faible humidité augmente l'accumulation de charge statique, qui peut se décharger comme événements EMI à large bande qui perturbent l'électronique à proximité.

Humidité et décharge statique

Le maintien d'une humidité relative comprise entre 40 % et 60 % est essentiel pour contrôler la décharge électrostatique (EDS). À des niveaux d'humidité inférieurs à 30 %, les charges statiques peuvent s'accumuler à plusieurs kilovolts sur le personnel et l'équipement, et la décharge résultante génère une impulsion électromagnétique à large bande qui peut corrompre les données ou endommager les circuits d'entrée.

Les revêtements de sol à dissipation statique et les bretelles de poignet sont essentiels dans les zones où l'humidité ne peut pas être maintenue dans la plage cible. Le revêtement de sol devrait avoir une résistance au sol entre 1 megohm et 100 megohms, suffisamment élevée pour limiter le courant de décharge mais suffisamment faible pour saigner la charge statique avant qu'elle ne puisse s'accumuler à des niveaux dangereux.

Surveillance des événements de l'IME

Un réseau de sondes à large bande placées à des emplacements stratégiques et à des sources d'alimentation principales, à proximité du périmètre du plancher du serveur et de l'équipement sensible et à proximité de l'équipement et de la mine; peut fournir une visibilité en temps réel dans l'environnement électromagnétique.Ces sondes détectent l'IME à la fois dirigé et irradié et peuvent déclencher des alertes lorsque les seuils sont dépassés.

Les systèmes de surveillance modernes enregistrent les niveaux d'EMI au fil du temps, permettant aux opérateurs de corréler les événements avec les changements d'équipement, les activités de maintenance ou les événements externes tels que les frappes éclair. Ces données historiques sont inestimables pour diagnostiquer des problèmes intermittents qui pourraient être attribués autrement aux problèmes de logiciels ou de configuration.

L'intégration de la surveillance de l'IME au système de gestion des bâtiments (SGB) ou à la plate-forme de gestion de l'infrastructure des centres de données (DCIM) de l'installation fournit une vue unifiée des conditions environnementales.Les opérateurs peuvent fixer des seuils et recevoir des alertes automatisées pour des conditions telles que des niveaux d'IME maintenus supérieurs à 10 V/m à des fréquences supérieures à 1 MHz, ou des événements transitoires dépassant 100 V/m pour toute durée supérieure à 1 microseconde.

Stratégie sept : Sélection et achat d'équipement

De nombreux problèmes d'IMI peuvent être évités au stade de l'approvisionnement en précisant les équipements ayant une performance de compatibilité électromagnétique vérifiée (EMC). Chaque équipement installé dans le centre de données devrait être conforme CE Marquage avec la conformité à la directive EMC ou, pour le marché américain, FCC Partie 15 en tant qu'appareil numérique de classe A. Les limites de classe A sont moins strictes que les limites de classe B (appareil à consommation), mais elles sont appropriées pour les environnements commerciaux et industriels.

Les organismes qui exploitent une infrastructure essentielle devraient envisager d'exiger des laboratoires accrédités des rapports d'essais EMC fournis par les fabricants[, montrant les niveaux d'émissions effectués et irradiés dans toute la gamme de fréquences.

Pour les équipements qui seront installés dans des zones à forte IME ou à proximité de charges sensibles, en précisant filtrage EMI de qualité militaire (MIL-STD-461)[ ou des normes industrielles équivalentes telles que EN 61000-6-2 pour l'immunité fournit une marge de protection supplémentaire.

Spécifications de la qualité de l'énergie

Les alimentations doivent être spécifiées avec distorsion harmonique d'entrée inférieure à 5% THD et correction du facteur de puissance (PFC) qui maintient le facteur de puissance de proximité dans toute la plage de charge. Les conceptions actives de PFC[ sont préférables à des PFC passives parce qu'elles façonnent activement la forme d'onde du courant d'entrée, réduisant de façon significative les harmoniques qui se couplent en équipements adjacents.

Pour les équipements alimentés en courant continu, l'onduleur de tension doit être spécifié comme un pourcentage de tension nominale. Le radeau ne doit pas dépasser 1 % de pointe à pointe à n'importe quelle condition de fonctionnement.

Feuille de route et établissement des priorités

Aucun centre de données ne peut mettre en œuvre toutes ces stratégies simultanément, et peu d'installations ont besoin de chaque intervention décrite ici. La clé est de correspondre au niveau de gestion de l'IME à la criticité de l'équipement et la gravité de l'environnement électromagnétique.

Le cadre de hiérarchisation suivant aide les opérateurs à répartir efficacement les ressources :

  1. Première priorité[: Corriger les lacunes de la mise à la terre et de la liaison. Aucune autre intervention ne peut compenser une mauvaise référence au sol.
  2. Deuxième priorité: S'attaquer à la gestion et à la séparation des câbles.
  3. Troisième priorité[: Installer le filtrage sur les alimentations électriques et les câbles de signal critique lorsque la séparation n'est pas possible.
  4. Quatrième priorité[ : Réorganiser la disposition des équipements pour créer une séparation entre les sources sonores et les équipements sensibles.
  5. Cinquième priorité: Mettre en œuvre un blindage structurel pour des zones ou des armoires spécifiques où les niveaux d'IMI demeurent problématiques après les quatre premières étapes.
  6. Sixième priorité: Déployer une surveillance continue pour suivre les niveaux de l'IME et valider l'efficacité des interventions antérieures.

Conclusion : La gestion de l'IME comme pratique continue

La gestion des interférences électromagnétiques dans les centres de données et les salles de serveurs n'est pas une tâche de conception ponctuelle mais une discipline opérationnelle continue. L'environnement électromagnétique change avec chaque mise à niveau d'équipement, chaque changement de routage de câble, et chaque modification de l'infrastructure électrique ou mécanique de l'installation.

Les centres de données les plus résilients considèrent la gestion de l'IME comme une partie intégrante de leurs opérations d'infrastructure, avec des procédures documentées, du personnel formé et l'accès à des outils de diagnostic tels que les analyseurs de spectre, les sondes à champ proche et les testeurs d'impédance.

En mettant en oeuvre les stratégies décrites ici et en mdash; en établissant des bases et des liens appropriés, en assurant une gestion rigoureuse des câbles, en assurant un filtrage stratégique, en mettant en place un équipement réfléchi, en assurant un blindage environnemental, en surveillant en permanence l'acquisition de matériel et en assurant une gestion éclairée de l'équipement; les organisations peuvent atteindre les niveaux de fiabilité et de performance requis par les opérations numériques modernes.

Pour de plus amples informations sur les normes de gestion de l'IME, consulter IEEE 299-2006 pour les tests d'efficacité de blindage, la norme de conception du centre de données BICSI-002 ou la norme TIA-942 sur les infrastructures de télécommunications. La norme UIT-R SM.2157 fournit également des conseils utiles sur l'évaluation de l'environnement électromagnétique dans les installations sensibles.