NVIDIA Mellanox MCX631432AN-ADAB Solution technique: RDMA / RoCE Transport à faible latence et augmentation du débit du serveur

Ce livre blanc technique est destiné aux architectes de réseau, ingénieurs de prévente et responsables des opérations.NVIDIA Mellanox MCX631432AN-ADAB est une plateforme de téléchargementL'adaptateur serveur permet le transport à faible latence basé sur RDMA/RoCE et améliore considérablement le débit du serveur dans les environnements modernes des centres de données.

Les réseaux TCP/IP conventionnels imposent des frais généraux importants au processeur en raison du traitement du protocole, de la copie des données et de la manipulation des interruptions.Comme les densités de serveurs augmentent et les applications telles que le stockage distribué (Ceph, vSAN), les bases de données en mémoire (Redis, Aerospike) et les cadres de formation de l'IA exigent une latence d'une microseconde à un chiffre, les piles réseau traditionnelles deviennent des goulots d'étranglement insurmontables.Les principales exigences comprennent:: latence d'accès au stockage inférieure à 300 μs, utilisation de la CPU inférieure à 10% pour le traitement du réseau, débit de ligne de 25 GbE par port et intégration transparente avec l'infrastructure de commutation RoCE existante.

L'architecture proposée adopte une topologie spine-leaf non bloquante avec support RoCE v2.迈络思 ((NVIDIA Mellanox) MCX631432AN-ADAB) Je suis désoléLes commutateurs à feuille exécutent le DCQCN (Data Center Quantized Congestion Notification) pour le contrôle de la congestion de bout en bout.Le plan de commande exploite le PFC (Priority Flow Control) uniquement sur les files d'attente à perte prioritaire, tandis que le plan de données RDMA utilise RoCE v2 avec routage IP pour traverser les limites de la couche 3. Cette conception élimine le blocage de tête de ligne et assure une latence déterministe jusqu'à 2000 nœuds.

LeLe système d'exploitation de l'appareil doit être équipé d'une carte de connexion à l'émetteur.Il s'agit d'un outil qui sert de point d'extrémité critique pour les décharges RDMA.Le système de connectivité de l'équipement est équipé d'un système de connectivité à double port de 25 GbE SFP28Si on compare l'adaptateur avec le logiciel iWARP ou le noyau TCP, il réduit la latence de plus de 70%.Pour les architectes faisant référence auLe numéro de série de l'appareil est le numéro de série de l'appareil, les décharges clés comprennent:

• Décharge matérielle RoCE v2:Pas de déplacement de données, une latence de port à port inférieure à 600ns.
• Régulation FlexFlow:Analyseur de paquets programmable pour une distribution de flux granulaire.
• Moteurs cryptographiques intégrés:IPsec/TLS à vitesse de ligne sans intervention du processeur.
• Télémétrie et marquage ECN:Visibilité en temps réel de la congestion par le biais des compteurs SPIFFY.

Lors de l'évaluationLes spécifications du MCX631432AN-ADAB, il convient de noter que la carte prend en charge à la fois les vitesses 25GbE et 10GbE, ce qui permet des migrations par étapes.Compatible avec MCX631432AN-ADABL'écosystème comprend tous les principaux fournisseurs de serveurs, simplifiant la qualification.

Une topologie à deux niveaux typique pour un cluster de 500 nœuds: chaque rack contient 20 serveurs, chacun équipé d'unNVIDIA Mellanox MCX631432AN-ADAB est une plateforme de téléchargement(les deux ports actifs pour la redondance ou l'agrégation de la bande passante). Les commutateurs à feuille se connectent aux serveurs via des câbles DAC SFP28 25GbE (jusqu'à 5 m) ou des optiques AOC pour des distances plus longues.La couche vertébrale utilise les uplinks 100GbE pour maintenir 4Pour le trafic de stockage, dédier un port par adaptateur au trafic de back-end Ceph avec RoCE, en réservant le deuxième port pour les charges de travail orientées vers le calcul.La mise à l'échelle au-delà de 2000 nœuds nécessite une conception super-spine à trois niveaux, avec BGP-EVPN pour la propagation des routes RoCE.Solution de carte d'adaptateur Ethernet MCX631432AN-ADABguide pour les matrices de câblage détaillées et la budgétisation de l'énergie.

Après le déploiement, les équipes d'opérations devraient activer les NVIDIAmlx5ctletéthtoolpour les statistiques des ports en temps réel. Les principales mesures à surveiller: les pauses de transmission RoCEv2 (indiquant les tempêtes PFC), les ratios de paquets marqués par ECN et les lectures thermiques de l'adaptateur.confirmer queParamètres DCQCN(alpha, bêta et facteur de réduction de la vitesse) s'alignent avec les profils de tampons des commutateurs.Le numéro de série de l'appareil est le numéro de série de l'appareilPour interpréter les compteurs avancés comme "out_of_seq" et "retransmissions".Le système d'exploitation de l'appareil doit être équipé d'un système d'exploitation de l'appareil, qui doit être équipé d'un système d'exploitation de l'appareil.Pour la planification des coûts, les équipes d'approvisionnement peuventLe prix MCX631432AN-ADABestimations et vérificationMCX631432AN-ADAB à vendreles annonces par l'intermédiaire de distributeurs agréés; les prix en volume sont disponibles pour les commandes de plus de 100 unités.

LeLe code de l'émetteur est le code de l'émetteur.offre une proposition de valeur convaincante: latence de stockage inférieure à 300 μs, moins de 5% de frais généraux du processeur pour le trafic à vitesse de ligne 25GbE et décharges complètes de RoCE v2 sans changement d'application.En remplaçant les piles TCP héritées par le transport RDMA, les organisations peuvent récupérer jusqu'à 30% de la capacité de base pour les charges de travail critiques pour l'entreprise.l'architecture ConnectX-6 Lx offre des pipelines programmables supérieurs et une profondeur de télémétrieCette solution technique a été validée dans des environnements de production couvrant le stockage en nuage, la simulation HPC et l'analyse en temps réel.NVIDIA Mellanox MCX631432AN-ADAB est une plateforme de téléchargementreprésente une base sûre et rentable pour les réseaux de serveurs à faible latence et à haut débit.