QSFP-DD pro AI clustery: Jak si vybrat mezi 400G a 800G bez hádání

Aug 03, 2026

Zanechat vzkaz

QSFP-DD se dobře hodí pro AI cluster, když přepínač nebo koncový bod již používá nativní QSFP-DD klec, když musí zůstat v provozu velká základna kvalifikovaných QSFP-rodinných modulů a optických vláken a když platforma dokáže chladit vybrané moduly s každým obsazeným portem. Je to špatný výchozí bod, když jsou servery a přepínače GPU postaveny kolem nativních OSFP klecí, nebo když optika, kterou skutečně potřebujete, vyžaduje větší tepelný prostor, než jim může hostitel poskytnout.

Tvarový faktor není prvním rozhodnutím. Je zhruba čtvrtý. Návrh sítě, který přežije svůj první produkční trénink, začíná serverovými rozhraními, počtem kolejnic, cílovou topologií, přijatelným poměrem nadměrného odběru a měřenou kabelovou trasou. Teprve pak záleží na tvaru modulu.

Tento průvodce prochází objednávkou od začátku do konce s výpočtem odpracované kapacity, tabulkou{0}}pro výběr odkazů a ověřovací sekvencí, kterou můžete předat týmu laboratoře.

AI cluster network with GPU servers, leaf-spine switches, and QSFP-DD links

Který tvarový faktor byste si měli vybrat?

Koncový stav První volba k hodnocení
Oba konce nativně QSFP-DD / QSFP-DD800 QSFP-DD
Oba konce nativně OSFP OSFP
Migrace z nainstalované základny 400G QSFP QSFP-DD za předpokladu, že hostitel podporuje požadovaný režim portu
Vysoce výkonná optika na platformě, jejíž nativní klec je OSFP OSFP
Jeden konec OSFP, druhý QSFP-DD Kvalifikovaný cross{0}}form{1}}faktor DAC/AEC nebo optické spojení s odpovídajícím PMD, lane rate a FEC režimem na obou koncích

Základní pravidlo je krátké:vyberte klec, která je nativní pro koncový bod, poté ověřte rychlost elektrického jízdního pruhu, optické rozhraní, režim FEC, třídu výkonu a firmware pro toto přesné číslo dílu.Vše níže je práce potřebná k poctivému uplatňování tohoto pravidla.

Pět rozhodnutí v pořadí

Většina špatných sestav AI sítě pochází z těchto rozhodnutí mimo pořadí - nejprve vybrat modul a později zjistit omezení. Každý krok níže dodává další a každý z nich mění, co si můžete koupit v dalším kroku.

  1. Potvrďte koncové body.Nativní typ klece a režim protokolu na obou koncích každého spoje.
  2. Vypočítejte kapacitu.Porty na uzel, na kolejnici, poté opusťte kapacitu downlinku a uplinku ve vašem cílovém poměru přeplatků.
  3. Vyberte fyzický odkaz.Změřená délka trasy, vláknový závod, konektor, požadavek na přerušení.
  4. Ověřte číslo dílu.FEC, lane rate, výkonová třída, firmware, revize CMIS, kvalifikace dodavatele.
  5. Nasazení podle domény selhání.Nejprve laboratoř, pak po jednom stojanu, kolejnici nebo škálovatelné jednotce.

Krok 1: Oddělte tvarový faktor, protokol a optické rozhraní

Tyto tři věci se neustále srážejí do jednoho rozhodnutí a tento kolaps je místem, kde vzniká většina překvapení v oblasti kompatibility. Jsou to samostatné vrstvy se samostatnými řídícími dokumenty.

Faktor tvarudefinuje mechanické rozměry, hostitelský konektor, elektrické pruhy, chování řízení a tepelný design. TheQSFP-Hardwarová specifikace DD MSApokrývá mechanické, elektrické a tepelné požadavky a jeho pozdější revize rozšiřují stejný osmi{0}}proudový hostitelský port na varianty 800G a 1,6T, přičemž zachovává zpětnou kompatibilitu s řadou QSFP. Pokud chcete mechanické a manažerské zázemí, než půjdete dále, našeTechnický přehled QSFP-DDdetailně pokrývá samotný tvarový faktor.

ProtokolO - Ethernetu, RoCEv2 nebo InfiniBand - rozhoduje síťová karta, přepínač ASIC, firmware a konfigurace portu, nikoli tvar klece. Modul QSFP-DD by nikdy neměl být popisován jako „podporující Ethernet i InfiniBand“ jako vlastnost tvarového faktoru. Tato schopnost patří hostiteli a musí být potvrzena na konkrétním portu.

Optické rozhraní- DR8, FR4, SR8, LR - popisuje organizaci jízdních pruhů, dosah a použití. Nepopisuje konektor, počet vláken, mapování přerušení ani rychlost elektrických jízdních pruhů. Dva moduly nesoucí stejný optický štítek se mohou v každém z nich lišit. Samotná signalizace je definována IEEE, nikoli MSA:IEEE Std 802.3df-2024přidány parametry MAC a fyzické vrstvy pro provoz 800 Gb/s a dalších 400 Gb/s PHY.

Chování managementu je čtvrtou, tišší vrstvou. Oba moduly QSFP-DD a OSFP jsou spravovány prostřednictvím CMIS a revize je důležitá pro chování aktualizace firmwaru, výběr aplikací a načasování hostitelského-modulu. Publikované revize jsou uvedeny vDohody o implementaci OIF.

Krok 2: Velikost sítě podle portů serveru, nikoli počtu GPU

Počet GPU vám říká, jak velký je cluster. Neřekne vám, co má síť přenášet, protože síť vždy vidí pouze serverová rozhraní.

O tom svědčí dva příklady. Systém NVIDIA DGX H100/H200 nabízí osm síťových rozhraní ConnectX-7 výpočetních{6}}rozhraní s rychlostí až 400 Gb/s na každé – ale nejde o osm fyzických klecí. Referenční architektura SuperPOD ukazuje výpočetní strukturu prezentovanou prostřednictvímčtyři dvou{0}}portové transceivery, které zasahují do všech osmi GPU. Naproti tomu DGX B300 představujeosm síťových portů na přihrádce GPUobsluhující osm rozhraní ConnectX-8 s rychlostí až 800 Gb/s. Stejný počet GPU, úplně jiný inventář portů, počet kabelů a účet za optiku.

Než se tedy podíváte na jeden datový list přepínače, zdokumentujte pro každý typ uzlu: výpočetní{0}}fabriové porty, rychlost portů, NIC -na-mapování GPU nebo kolejnice, typ nativní klece, podporované režimy protokolů a navíc samostatná rozhraní pro ukládání a správu. Tento inventář, nikoli číslo GPU, je vstupem do každého výpočtu, který následuje.

Výpočet pracovní kapacity

Vezměte škálovatelnou jednotku 32 uzlů, z nichž každý má osm 400G výpočetních-textilních portů, jeden port na kolejnici, v designu optimalizovaném pro kolejnice-. Práce po jedné kolejnici:

  • Kapacita downlinku na list kolejnice= 32 uzlů × 1 port × 400G =12,8 Tb/s
  • V poměru 1:1 (bez-blokování), požadovaná kapacita uplinku=12.8 Tb/s → 12 800 ÷ 800 =16 × 800G uplinks
  • Za stavu 2:1, požadovaná kapacita uplinku=6.4 Tb/s →8 × 800G uplinks

Pak zkontrolujte výsledek proti radixu přepínače: 32 downlinků plus 16 uplinků potřebuje 48 použitelných portů na tomto listu, což okamžitě omezuje váš výběr přepínače. Přidejte odkazy pro redundanci a údržbu a opakujte na kolejnici - osm kolejnic, osm listových skupin, ne jedno souhrnné číslo. Zde si 800G zasluhuje své místo, nebo ne: zde snižuje na polovinu počet uplinkových portů, což je argument radix, nikoli argument šířky pásma.

Tkaniny -optimalizované, vyvážené{1}}stromové materiály jsou vzorem dokumentů NVIDIA pro velké školicí skupiny -Referenční architektura DGX H100 SuperPODpoužívá úplný-strom s osmi výpočetními připojeními na-systém. Zda tento vzor vyhovuje vaší pracovní zátěži, je posouzení návrhu, ale výše uvedená metoda výpočtu platí bez ohledu na topologii.

Krok 3: Naplánujte všechny čtyři látky a poté se vraťte k modulům

Cluster AI není jedna síť. Referenční architektury DGX SuperPOD jsou oddělenévýpočetní technika, úložiště, správa v-pásmu a mimo{1}}správa-pásmatkaniny a každý z nich vyrábí svůj vlastní port a požadavky na optiku.

Thevýpočetní tkaninapřenáší gradientní výměnu, synchronizaci parametrů, kolektivy a operace vzdálené paměti. Má nejpřísnější požadavky na latenci, přetížení a -symetrii cesty a právě zde se řeší argument 800G-proti 400G.

Theskladovací tkaninanese tréninková data, kontrolní body a artefakty modelu. Jeho kapacita závisí na formátu datové sady, četnosti přístupů do mezipaměti, paralelismu-zavaděče dat, frekvenci kontrolních bodů a intenzitě metadat -, a proto není „400G pro úložiště dostačující“ bezpečným výchozím nastavením. Referenční architektury specifikují výkon úložiště na úrovni systému a přesně jej udržují mimo výpočetní prostředí, aby se tyto dvě pracovní zátěže nemohly navzájem poškodit.

Thev -síti pro správu pásmapřenáší zajišťování, provoz plánovače, registry, úložiště a monitorování. Themimo-z{1}}pásmové sítědosáhne BMC, portů pro správu přepínačů a napájení racku a musí zůstat dosažitelné, dokud je produkční struktura narušena. Považujte to za cestu obnovy a zabezpečení s vlastním uplinkem, nikoli jako zbylý provoz s nízkou rychlostí-.

Pro výběr modulu je praktický důsledek tento: každá tkanina přispívá svým vlastním počtem portů, vlastním profilem vzdálenosti a vlastním typem klece, které se často liší. Cluster může být OSFP na počítači a QSFP-DD na úložišti a správě, aniž by bylo něco špatně.

Krok 4: Vyberte 400G nebo 800G z omezení, nikoli z trendu

Port 800G zdvojnásobuje nominální kapacitu. Nesnižuje provoz, který vaše aplikace generuje. Jeho hodnota je téměř vždy strukturální - méně odkazů, lepší účinnost radixu nebo nativní koncový bod 800G.

400G zůstává lepší volboukdyž jsou výpočetní koncové body nativně 400G, současná struktura již splňuje svůj cíl blokování, cluster roste uvnitř dostupného radixu, kvalifikovaný modul 400G a kabeláž již existuje nebo omezení napájení a chlazení činí 800G neatraktivním. Použití 800Guplinksservery nad 400G je stále naprosto rozumné -, ale odůvodněte to pomocí výše uvedené aritmetiky portu, nikoli podle štítku.

800G zlepšuje designkdyž servery vystavují nativní rozhraní 800G, když se mnoho toků 400G musí agregovat do menšího počtu páteřních spojů, když je závazným omezením počet portů přepínače nebo když přechod z 800G na podřízená rozhraní s nižší rychlostí- zjednodušuje migraci. Přesně řečeno: 800G může snížit počet fyzických spojení nebo portů přepínačev návrzích, kde jsou limitujícími omezeními agregace a radix. Nečiní to jako zákon přírody.

Comparison of 400G and 800G AI cluster network architectures

Migrace se smíšenou{0}}rychlostí vyžaduje explicitní dokumentaci

Breakout je místo, kde návrhy smíšených{0}}rychlostí tiše selhávají. Díky moderním síťovým adaptérům je to spíše konfigurovatelné než pevné - NVIDIA ConnectX-8dokumentaci k-rozdělení portůukazuje jednu klec 800G OSFP překonfigurovanou na dva porty 400GbE nebo osm portů 100GbE, z nichž každý vyžaduje změnu konfigurace-na úrovni firmwaru a cyklus napájení. Tato flexibilita existuje pouze tam, kde ji prodejce otestoval a zveřejnil.

Plán migrace by tedy měl u každého portu uvádět: které porty běží jakou rychlostí, zda hostitel podporuje zamýšlený režim přerušení, rychlost elektrického pruhu na obou koncích, zda je přerušení logické, optické nebo kabelové-, režim FEC, který každé podřízené rozhraní potřebuje, zda lze stávající počet vláken a typ konektoru znovu použít a jak monitorování identifikuje každý podřízený port. Vložení modulu s nižší rychlostí-nezpřístupní všechny režimy hostitele.

QSFP-DD vs OSFP

Rozhodovací faktor QSFP-DD OSFP
QSFP-kompatibilita s rodinou Nativní, kde hostitel režim podporuje U některých modulů je to možné prostřednictvím -účelového adaptéru
Velikost modulu Menší Větší
Tepelný design Design chladiče-pro jezdce; ověřit při plné populaci Integrovaný nebo jízdní chladič; MSA definuje vyšší výkonové třídy
Typické použití systému AI- Ethernetové přepínače, platformy se smíšenou{0}}rychlostí Několik vysoce{0}}výkonných GPU a platforem InfiniBand
Rozhodovací pravidlo Preferujte, když jsou koncové body nativní QSFP-DD a záleží na opětovném použití QSFP Preferujte, když jsou koncové body nativní OSFP nebo optika potřebuje svůj energetický obal

Dva nároky vyžadují omezení. Za prvé, „OSFP nemá zpětnou kompatibilitu“ je příliš široké -OSFP MSAdokumentuje kompatibilitu QSFP prostřednictvím vyhrazeného adaptéru a jeho specifikace modulu definuje vyšší třídy výkonu a integrované -možnosti chladiče, které dodávají OSFP jeho tepelnou pověst. Zadruhé, tato pověst je stropem specifikace, nikoli zárukou. To, zda dané šasi skutečně dokáže provozovat moduly třídy 30 W- v každé kleci, závisí na konstrukci klece, směru proudění vzduchu, vstupní teplotě, zásadách ventilátoru, snížení přilehlých -portů a vlastních limitech dodavatele systému.

To je důvod, proč nelze vyjednávat o úplné{0}}termální validaci populace-: modul, který prochází jedním portem, může překročit svůj teplotní limit-, když svítí všech 32 nebo 64 portů, a znovu, když selže ventilátor nebo zdroj napájení. Otestujte naplněný systém při vaší skutečné vstupní teplotě.

Pokud je server OSFP a přepínač je QSFP-DD, odolejte reflexi standardizace. Adaptéry přidávají mechanickou vůli, proudění vzduchu, napájení, -integritu signálu, inventář a podporu. Kvalifikovaný cross-form-faktorový kabel nebo optické propojení s odpovídajícími PMD a FEC na obou koncích je často čistší než výměna hardwaru, aby se tvary shodovaly.

QSFP-DD and OSFP transceivers compared by size and thermal design

Krok 5: Vyberte odkaz podle naměřené vzdálenosti a existujícího vlákna

Kapacita a koncové body nyní opravily rychlost portu a klec. Vzdálenost a instalovaná vláknina vše ostatní opraví. Technickým vodítkem spíše než pravidlem je, že nejkratší technicky platný spoj je obvykle nejjednodušší na ovládání -, ale flexibilita, průměr kabelu, provozuschopnost a požadavky na přerušení jsou proti tomu.

Trasa Typická možnost Co potvrdit
Intra{0}}rack, velmi krátký Pasivní DAC Přesná délka a typ kabelu podporované na obou koncích; poloměr ohybu; hmotnost
Krátké, ale mimo pasivní měď AEC / ACC Odběr energie, přidaná latence, blokování proudění vzduchu, kvalifikace dodavatele, podpora režimu portu
Krátká optická, pevná délka přijatelná AOC Provozuschopnost - selhání nahradí celou sestavu
Multimode, v-řadě vedle sousední-řádky paralelní optika třídy SR- Limity kvality a dosahu vláken; viz našePrůvodce limitů vzdálenosti OM1–OM5
Jednotlivý-režim, sub-kilometr, požadujeme průlom paralelní optika třídy DR- Velikost MPO, polarita, lesk APC/UPC, mapování zlomů
Jeden-režim, kilometrové měřítko Duplexní nebo paralelní třída FR-, v závislosti na produktu Typ konektoru se liší podle čísla dílu; kvalita vlákna - porovnatJednorežimové vlákno OS1 a OS2-

Implementace konektoru je zde pastí, protože není naznačena optickým štítkem. Prodejci dodávají produkty 800G DR8 buď s duálním připojením MPO-12 nebo s jedním MPO-16, a produkty třídy FR na vzdálenost 2 km s paralelním MPO nebo duplexním LC. Obě varianty jsou legitimní; potřebují úplně jinou kabeláž. Před objednáním kufrů si schválně vyřešte otázku konektoru - našePrůvodce výběrem MTP vs MPOpokrývá mechanické a polaritní rozdíly aVedení vylamovacího kabelu MPOpokrývá vějířové{0}}mapování, na kterém závisí breakout porty.

Do stejné konverzace patří další dvě položky. Ztráta kanálu musí být zahrnuta do rozpočtu podle specifikace modulu se započtením konektorů a spojů, nepředpokládá se - vizjak se kumuluje vložný útlum ve optických sítích. A strukturovaná kabeláž mezi řadami se snáze udržuje, když je postavena na před-ukončeníHlavní kabely MPO/MTPpomocí zdokumentované metody polarity spíše než{0}}pole sestavených běhů. Tam, kde se používají duplexní spoje FR, disky s kvalitou koncového konektoru vracejí ztrátu přímo; aPrůvodce LC konektorempokrývá, co kontrolovat.

Pro každý odkaz zaznamenejte: hostitelskou klec, rychlost hostitelského pruhu, nakonfigurovanou rychlost portu, typ PMD nebo kabelu, konektor, typ a počet vláken, maximální ztrátu kanálu, režim FEC, mapování přerušení, kód aplikace modulu, požadavek CMIS a firmware, maximální výkon a stav kvalifikace. Tento záznam{1}}odkazu má větší cenu než jakékoli obecné pravidlo o tom, která optika a kam.

AI network interconnect options from DAC cables to duplex optics

RoCEv2 nebo InfiniBand: Rozhodněte se nezávisle

Volba protokolu je ortogonální k tvarovému faktoru a měla by být provedena z provozních důvodů.

RoCEv2vyhovuje organizacím, které již používají Ethernet ve velkém měřítku, s ověřenými funkcemi RoCE na přepínací platformě a týmem schopným vlastnit QoS, řízení přetížení, telemetrii a konfiguraci hostitele. Upozornění je, že „povolit PFC a ECN“ není plán nasazení. Dokumentace NVIDIA Cumulus Linux popisujeRoCE jako komplexní konfiguracezahrnující fondy vyrovnávacích pamětí, klasifikaci provozu, mapování priorit, prahové hodnoty PFC a ECN a plánování, s bezztrátovým režimem využívajícím PFC a ECN společně a ztrátovým režimem využívajícím pouze ECN - a poznamenává, že konfigurace vygenerovaná pro jednu generaci ASIC přepínačů se nepřenáší do jiné.

InfiniBandvyhovuje nasazení podle ověřené architektury dodavatele, kde je cenná integrovaná správa struktury a tým již má nástroje a odborné znalosti.

Založte výběr na testovaném chování aplikace, provozních dovednostech, hranicích podpory a celkovém návrhu systému. Procenta marketingového výkonu závisí na topologii, verzi softwaru, velikosti zprávy, stavu zahlcení a konfiguraci síťové karty a zřídka se přenášejí do jiného clusteru.

Validace: Co otestovat před nákupem ve velkém

Reprezentativní laboratorní test pokrývá čtyři oblasti a na pořadí záleží - jako první na stabilitě odkazu, protože údaje o výkonu z nestabilního odkazu jsou nesmyslné.

Vyvolat-:studený start, teplý restart, vložení a odebrání modulu, zakázání/povolení portu, vytvoření a odstranění přerušení a oba konce se restartují v různých sekvencích.Integrita signálu:pre-FEC BER, opravené a neopravitelné počty FEC, chyby{1}}úrovně jízdních pruhů, PRBS nebo BERT, pokud jsou podporovány, optický přenosový a přijímací výkon, teplota pouzdra modulu a počty klapek-odkazů při tepelné zátěži.Výkon:trvalá propustnost, kolektivy a velikosti zpráv, které vaše úlohy skutečně využívají, simultánní více-železniční provoz, incast, úložiště-plus-výpočetní spory a dlouhé trvání.Selhání:single link, list switch, spine link, power{0}}obnovení cyklu, výměna kabelu a modulu, správa-ztráta cesty.

Zaznamenejte prahové hodnoty, ne jen prospěl/neprošel. Neopravitelné chyby FEC by měly být na zdravém spoji nulové; pre-chybovost FEC by měla sedět uvnitř specifikované meze modulu a zůstat tam, i když teplota pouzdra během namáčení vzroste. Spojení, které má vzestupnou tendenci během 48hodinové prodlevy, je spojením, které selže ve výrobě.

Poté zaveďte podle domény selhání - jeden stojan, jednu kolejnici, jeden pár listů nebo jednu škálovatelnou jednotku najednou - a sledujte změny stavu propojení, opravené a neopravitelné počty FEC, teplotu modulu, optický výkon, aktivitu PFC pauzy, označení ECN, obsazenost fronty a dobu komunikace-na úrovni úlohy. Odkaz, který je stále aktivní, může být stále ponižující; rostoucí opravené-chyby a trendy teploty jsou tím prvním varováním, které dostanete.

Tři designové scénáře

Rozšíření stávající 400G Ethernetové sítě.Kvalifikované přepínače QSFP-DD 400G a strukturovaná kabeláž jsou již zavedeny; nové uzly vystavují 400G. Udržujte spojení směřující k serveru-na 400G, spusťte výše uvedený výpočet uplinku, abyste otestovali poměr blokování, a zavádějte 800G pouze tam, kde to kupuje efektivitu páteřního portu. Znovu použijte kvalifikovanou optiku a vlákno všude, kde to rozpočet na ztráty dovolí, a před nákupem ověřte každou konfiguraci se smíšenou{8}}rychlostí. Toto rozhodnutí řídí přepínač Radix, nikoli počet GPU.

Vybudování 800G-nativního clusteru.Servery vystavují nativní 800G. Postupujte podle ověřené topologie dodavatele serveru, vyberte přepínače s odpovídající nativní klecí, ověřte-plnou tepelnou kapacitu populace při vaší vstupní teplotě, vyberte propojení z naměřených délek trasy a před potvrzením ověřte každou kombinaci přerušení a FEC. Zde je 800G odůvodněno samotným koncovým bodem.

Život se dvěma tvarovými faktory.Servery jsou OSFP; součástí ethernetového přepínání je QSFP-DD. Porovnejte kvalifikované cross{2}}form{3}}faktorové sestavy DAC nebo AOC, optickou interoperabilitu s různými klecemi na každém konci, schválené adaptéry, vliv na napájení a teplo, náhradní zásoby a vlastnictví podpory. Výměna jedné strany čistě za účelem standardizace tvaru modulu je často dražší než provoz zdokumentovaného smíšeného prostředí.

Sedm chyb, které způsobují přepracování

  • Počínaje počtem GPU.Nepopisuje počet NIC, mapování železnic, přenosovou rychlost nebo nadměrné předplatné. Počítat z rozhraní serveru.
  • Předpokládejme, že 800G je rychlejší pro každou úlohu.Pomáhá pouze tam, kde jej mohou používat koncové body, topologie a vzor provozu. Porovnejte kolektivy, které skutečně provozujete.
  • Nakládání s QSFP-DD jako s protokolem.Je to klec. Samostatně ověřte klec, protokol, elektrický režim, optiku a FEC.
  • Ignorování struktury úložiště a správy.Rychlá výpočetní struktura nemůže kompenzovat pomalé doručování kontrolních bodů nebo nedosažitelné BMC.
  • Čtení optického štítku jako specifikace kabeláže.DR8 a FR4 neurčují konektor, počet vláken nebo provedení přerušení. Použijte přesná čísla dílů a schéma kabeláže.
  • Testování jednoho portu.Opravdovým testem je plný-průtok vzduchu a vstupní teplota.
  • Uvádění procent výkonu bez metody.Zveřejněte topologii a testovací metodu, nebo číslo zrušte.

Budování modelu TCO, který můžete bránit

Kapitálové náklady pokrývají NIC nebo DPU, listové a páteřní přepínače, transceivery, DAC, AEC a AOC, optické svazky a patchování, racky a správu kabelů, testovací zařízení a náhradní díly. Provozní náklady zahrnují napájení modulů a přepínačů, chlazení, monitorování, kvalifikaci firmwaru, školení, náhradní práci a podporu dodavatele. Rizikové náklady -, které se obvykle vynechávají -, zahrnují selhání kompatibility, zpoždění nasazení, tepelné snížení výkonu, nestabilitu spojení, přepínání{4}}kabeláže, přerušené úlohy školení a prodlouženou dobu obnovy.

Zpětná kompatibilita skutečně snižuje náklady, ale úspora se musí vypočítat z konkrétního zařízení, které lze znovu použít při požadované rychlosti a režimu. Samotná kompatibilita form{1}}faktoru nezaručuje, že stávající ASIC, PCB, klec, chladicí systém, firmware nebo rozpočet na napájení budou fungovat pro příští generaci. Budoucí migraci rychlosti považujte za otázku platformy, nikoli otázku konektoru.

Často kladené otázky

Je QSFP-DD vhodný pro tréninkové clustery AI?

Ano, pokud je nativní pro zvolený přepínač nebo koncový bod, splňuje tepelné požadavky při plném obsazení portů a podporuje požadovaný režim portu a optické rozhraní. Samotný nominální datový tok není důvodem k jeho výběru.

Kolik GPU vyžaduje 800G síť?

Neexistuje žádný práh GPU. Vypočítejte ze síťových portů na server, rychlosti portu, mapování železnic, topologie, cíle nadměrného odběru a provozu aplikace - metodou v kroku 2 výše.

Je QSFP-DD lepší než OSFP?

Ani jedno není univerzálně lepší. QSFP-DD nabízí nativní QSFP-kompatibilitu pro celou rodinu a menší rozměry; Specifikace OSFP definuje vyšší třídy výkonu a integrované -možnosti chladiče a je nativní pro několik-výkonných platforem umělé inteligence. Rozhoduje koncový bod.

Může port OSFP používat modul QSFP?

Některé implementace OSFP podporují moduly QSFP prostřednictvím schváleného adaptéru, ale kompatibilitu, napájení, režim portu a podporu dodavatele vyžadují ověření pro konkrétní platformu.

Lze QSFP-DD použít pro Ethernet i InfiniBand?

Formát neurčuje protokol. Hostitelský port, síťová karta, přepínač, firmware, kabel a transceiver musí podporovat zamýšlený provozní režim.

Který 800G transceiver bych měl použít?

Začněte od naměřené vzdálenosti, koncového bodu, požadovaného přerušení, typu vlákna, konektoru, rychlosti jízdy, režimu FEC, třídy výkonu a kvalifikace dodavatele. Název optického rozhraní sám o sobě nestačí.

Zaručuje zpětná kompatibilita QSFP-DD snadný upgrade 1,6T?

Ne. Hostitelský port může přijmout modul mechanicky, zatímco ASIC, PCB, klec, chlazení nebo rozpočet nemohou podporovat novou rychlost jízdy. Ověřte na úrovni platformy.

Než podepíšete objednávku

Potvrďte klec koncového bodu na obou koncích každého typu propojení; počet a rychlost výpočetních{0}}portů na uzel; mapování železnic a cílový poměr nadměrného odběru; počty listových a páteřních portů včetně redundance; požadavky všech čtyř tkanin; provozní režim a v případě RoCE návrh řízení úplného zahlcení-; měřená kabelová trasa a výsledná volba propojení; konektor, polarita a rozpočet ztrát; FEC a breakout režim; výkon modulu proti plnému-termálnímu limitu populace; kompatibilita firmwaru a CMIS; stav kvalifikace dodavatele; a laboratorní výsledky pro BER, výkonnost, přetížení, selhání a testování promočení.

QSFP-DD dobře podporuje škálovatelné 400G nebo 800G AI. Je to stále jen jedna složka designu. Začněte s koncovými body a dopravním modelem, vypočítejte topologii, vyberte fyzické spojení z naměřené vzdálenosti a ověřte sestavený systém předtím, než provede trénovací úlohu.

Metodologie a rozsah

Tato příručka čerpá ze tří druhů zdrojů a ve výše uvedeném textu jsou záměrně odděleny.Standardy a dokumenty MSA- IEEE 802.3df, hardwarové specifikace QSFP-DD a OSFP MSA a implementační smlouvy OIF CMIS - definují tvarové faktory, signalizaci a chování správy.Dokumentace dodavatele- Systémové příručky NVIDIA DGX, referenční architektury DGX SuperPOD, poznámky ke konfiguraci ConnectX-8 portů a dokumentace Cumulus Linux RoCE - je uvedena jako příklad specifický pro dodavatele, nikoli jako univerzální chování; jiné platformy se liší.Inženýrské směrnice- rady ohledně řazení, preference kratších odkazů, prahové hodnoty ověření - jsou provozní doporučení odvozená z praxe nasazení a jsou jako taková označena, nikoli uváděna jako specifikace.

 

Odeslat dotaz