De Wedstrijd om Suprematie in HPC-netwerken en AI-werkbelasting
De race om de suprematie in high-performance computing (HPC) en kunstmatige intelligentie (AI) bevindt zich op een cruciaal moment. Terwijl InfiniBand historisch gezien de voorkeur heeft gekregen in wetenschappelijke en supercomputing-omgevingen, halen de nieuwste innovaties in Ethernet —vooral die door DriveNets Network Cloud worden aangedreven— de prestatiekloof dicht en dagen ze de status quo uit.
Ethernet is decennia lang de universele standaard geweest voor netwerken in bedrijfs- en thuisomgevingen. Oorspronkelijk ontstaan in de jaren ’70 en gestandaardiseerd in 1983, is de technologie geëvolueerd van 10 Mbps tot de huidige snelheden van 800 Gbps, met plannen om 1,6 Tbps te bereiken. Ondertussen heeft InfiniBand zich als specialist in netwerken gepositioneerd: een technologie die vanaf het begin is ontworpen om ultra-lage latentie, verliesvrije transmissie en volledige verkeerscontrole te bieden, essentiële elementen voor de meest veeleisende datacenters.
Wat verandert er?
De ontwikkeling van nieuwe architecturen en technologieën, zoals DriveNets Network Cloud, herdefinieert wat Ethernet kan bieden. Met mogelijkheden zoals RoCEv2 (RDMA over Converged Ethernet) en een verbetering in latentie die dichterbij die van InfiniBand komt, is Ethernet niet langer alleen een ‘goedkopere’ optie, maar een levensvatbaar alternatief, zelfs voor geavanceerde AI-taken.
Volgens onafhankelijke tests op benchmarks zoals MLPerf Training met BERT-Large, overtrof Ethernet InfiniBand met een kleine marge. Bij inferentietaken met modellen zoals LLAMA2-70B waren de verschillen minder dan 2%. In sommige multitenant-scenario’s behaalde DriveNets Network Cloud-AI latenties van slechts 7 microseconden, vergeleken met 5 microseconden van InfiniBand, waardoor een kloof wordt gedicht die voorheen onoverbrugbaar leek.
Historische voordelen van elke technologie
InfiniBand:
- Ultra-lage latentie en determinisme
- Directe geheugentoegang (RDMA) zonder CPU-interventie
- Geoptimaliseerde architectuur voor HPC- en AI-taken
- Lagere overhead in protocollen
Moderne Ethernet:
- Volwassen, economische en breed compatibele ecosystemen
- Grote flexibiliteit in multiclient-omgevingen (VLAN, VXLAN, etc.)
- Gestandaardiseerde interoperabiliteit (IEEE)
- Betere beheertools en zichtbaarheid
- Duidelijke marktfocus op AI: Ultra Ethernet Consortium, RoCEv2, etc.
En in gedeelde omgevingen?
Een van de meest relevante onderscheidende punten is de ondersteuning voor multiclient-omgevingen. Terwijl InfiniBand deze mogelijkheden begint te verkennen (met Quantum-2), heeft Ethernet tientallen jaren de overhand in dit gebied. Met DriveNets behaalt Ethernet een 95% efficiëntie in multitenancy, tegenover 70% voor InfiniBand, waardoor het de beste keuze is voor cloud-omgevingen en bedrijven die meerdere taken of klanten herbergen.
DriveNets: de paradigmaverschuiving in Ethernet-netwerken
DriveNets Network Cloud heeft een architectuur geïntroduceerd die hardware en software scheidt, functies in containers ontkoppelt en het hele netwerk als één gedistribueerd systeem orkestreert. Het resultaat: een netwerk dat schaalbaar is tot 691 Tbps en in staat is om tot 32.000 GPU’s in één cluster te beheren. De specifieke variant voor AI optimaliseert de prestaties verder, met perfect load balancing en directe connectiviteit van 800 Gbps per GPU.
Wat is de beste optie vandaag?
Kiezen tussen Ethernet en InfiniBand is niet langer alleen een kwestie van prestatie. Met de huidige vooruitgangen moet de beslissing gebaseerd zijn op:
- Vereisten voor latentie en bandbreedte
- Toekomstige schaalbaarheid
- Multiclientbehoeften
- Ecosysteem en compatibiliteit
- Kosten (CAPEX en OPEX)
- Leveranciersstrategie (open vs. gesloten)
In veel gevallen biedt Ethernet met DriveNets de beste balans tussen kosten, prestaties en flexibiliteit, vooral voor moderne datacenters gericht op AI en cloud-omgevingen. InfiniBand blijft een solide optie voor zeer veeleisende gespecialiseerde workloads, maar zijn voordeel is niet langer zo beslissend.
Conclusie:
Het tijdperk waarin Ethernet alleen voor ‘algemeen gebruik’ was en InfiniBand voor ‘maximale prestaties’, eindigt. Opkomende technologieën brengen Ethernet naar een nieuw niveau, tot het punt dat de convergentie tussen beide werelden onvermijdelijk lijkt. In deze nieuwe fase is de keuze niet alleen technisch, maar ook strategisch.