400G optische modules zijn geschikt voor datacenters

 

Elke keer als ik denk dat de datacenterwereld misschien even tot rust komt, komt er iemand binnen en zegt iets als: "Hé, waarom doen we niet400Goveral al?" alsof het rippen en vervangen van de helft van het netwerk net zo eenvoudig is als het verwisselen van een stekkerdoos. Maar ja - 400G is er, en of we het nu leuk vinden of niet, we hebben er mee te maken.

 

 

Een niet-zo-lineair upgradepad

 

Mensen praten over netwerksnelheden alsof ze voorspelbaar schalen, zoals "10G → 40G → 100G → 400G → 800G."
Dat is absoluut niet hoe het voelt als je daadwerkelijk degene bent die deze dingen om drie uur 's nachts aansluit, in de hoop dat de verbindings-LED's knipperen zoals ze zouden moeten knipperen.

Ik herinner me nog een implementatie in 2019 waarbij deideevan een 400G-backbone deed het halve team naar de grond staren omdat niemand van ons de vroege QSFP-DD-thermiek vertrouwde. De modules werden zo populair dat je je levenskeuzes in twijfel trok. Eén man had wekenlang een thermische camera op zijn bureau staan, alleen maar om ze te bekijken.

Hoe dan ook-ja, 400G is belangrijk. Maar niet omdat een marketingdia dat zegt. Het is belangrijk omdat verkeerspieken niemand meer verrassen. AI-workloads slurpen de bandbreedte op op een manier die ervoor zorgt dat traditionele Oost-West-verkeerspatronen op een warming- oefening lijken.

 

Formaten, of "Welke rechthoek ruïneert uw budget minder?"

 

Als je lang genoeg met fysieke hardware hebt gewerkt, ontwikkel je uiteindelijk een sterke mening over modulevormen. Persoonlijk heb ik CFP8 nooit leuk gevonden. Het is te groot. Het voelt alsof iemand een VHS-band in een zendontvanger heeft gesmolten. We gebruikten er een paar in een upgrade van een backbone-router, en die dingen werden zo warm dat we de rest van de lijnkaarten daadwerkelijk uitstelden totdat de faciliteiten de luchtstroom in dat gangpad verbeterden.

QSFP-DD werd de 'prima, we gaan hiermee akkoord'-optie, vooral omdat leveranciers zich erachter schaarden. OSFP is ook leuk - Ik geef eigenlijk de voorkeur aan de thermiek - maar tenzij je schakelaarleverancier aan boord is, gebruik je deze niet. Datacenterinfrastructuur bestaat voor 40% uit technologie en voor 60% uit politiek; niemand vertelt u dit totdat uw stuklijst voor de derde keer wordt afgewezen.

 

 

Multimode versus single-modus (en de glasvezelkerkhoven waarvan we allemaal beweren dat ze niet bestaan)

 

Ik heb genoeg datacenteraudits gedaan om één universele waarheid te weten:vezelfabrieken zijn nooit zo schoon als de documentatie beweert.
De helft van de tijd komen de labels niet overeen met de werkelijkheid. Soms bevatten de patchpanelen mysteries uit het voorgaande decennium.

Dit heeft absoluut invloed op 400G.

SR8 via multimode? Geweldige - op papier. In de echte wereld blaas je de verkeerde kant op op een MPO-connector en opeens lijkt baan 6 op sterven na dood. Ik heb ooit een hele middag besteed aan het schoonmaken van de connectoren, maar kwam er uiteindelijk achter dat de installateur de kabel had bekneld toen hij probeerde een rackdeur te sluiten. Dat was leuk.

DR4, FR4, LR4 - ja ja, de afstanden staan ​​in de brochures. Maar de prijs is de echte onderscheidende factor. Een van onze klanten schakelde de helft van hun geplande DR4-koppelingen terug naar AOC's, simpelweg omdat het budget voor optica boven de inkooplimieten explodeerde. Praktisch wint het keer op keer van elegantie.

 

Stroom, hitte en andere dingen die je handen verbranden

 

Laat ik eerlijk zijn:400G wordt heet.
Niet 'warm'.
Niet 'een beetje geroosterd'.
Heet genoeg dat de eerste keer dat iemand je een module overhandigt die vers uit een werkende schakelaar is gehaald, je je vriendschappen heroverweegt.

Sommige leveranciers claimen nu optiek van minder dan 8 W. Ik geloof het pas als ik er een kan aanraken zonder geluid te maken.

Koeling wordt een echte architecturale beslissing. Bij één implementatie steeg ons heetste gangpad bijna 4 graden nadat we de laatste 8 poorten op een 1RU-switch met LR4's hadden gevuld. Faciliteiten gaven netwerken de schuld. Netwerken gaven de schuld aan faciliteiten. Uiteindelijk hebben we gewoon twee PDU's verplaatst en een rack geroteerd. Het probleem verdween, niemand sprak er meer over.

 

 

De technologiesprong (PAM4 is geen magie, het is gewoon... prima)

 

Er wordt over de verschuiving van NRZ naar PAM4 gesproken alsof het een grote revolutie was. Dat was het niet. Het was gewoon de minst pijnlijke manier om meer stukjes door dezelfde pijpen te proppen.

PAM4 is luidruchtig.
Het is kieskeurig.
Het vereist betere DSP's, betere PCB's, beter alles.

Maar het werkt, en toen de leveranciers de egalisatieproblemen eenmaal hadden opgelost, verdwenen de praktische problemen grotendeels. Grotendeels. Ik heb nog steeds DR4-modules gezien die weigeren op volledige afstand te vergrendelen totdat de glasvezel opnieuw-wordt afgesloten. Geen idee waarom. Werkte na herbewerking. Zo gaat optiek soms.

 

De modules die u daadwerkelijk in het veld ziet

 

Als u tijd heeft doorgebracht in een echt datacentrum - en niet in een slidedeck -, bent u deze waarschijnlijk tegengekomen, in ongeveer deze volgorde van frequentie:

400G-SR8

Goedkoop(ish), voorspelbaar. MPO-connectoren die stof verzamelen als magneten. Goed voor korte runs, goed voor labs. Slecht als je niet over het juiste schoonmaakgereedschap beschikt.

400G-DR4

Dit zie ik het meest. Past in de typische gebruikssituatie van "een paar honderd meter, maar geen kilometers". We hebben ooit DR4 gebruikt om een ​​verbinding tussen twee gebouwen uit te breiden, omdat het graven van nieuwe leidingen geblokkeerd raakte door stadsvergunningen. Soms is het eenvoudigste antwoord gewoon duurdere optica kopen.

400G-FR4

Beter bereik, CWDM-rijstroken, dubbele LC. Ik vind deze leuk, maar ze zijn duurder. De meeste bedrijven zullen ze niet aanraken, tenzij ze de 2 km absoluut nodig hebben.

400G-LR4

Dit zijn net brandblussers: belangrijk, duur en je hoopt ze nooit nodig te hebben.

Al het andere bestaat op de een of andere manier ergens, maar ik heb nog nooit iemand enthousiast zien worden over PLR4 of ER8 buiten telecom-zware omgevingen.

 

Het geldgedeelte waar niemand graag over praat

 

Inkoopafdelingen worden nerveus als ze '400G' horen.
Als zichtbaar nerveus.

SR8 kan betaalbaar zijn. DR4 nog meer als je een verkoper hebt die je niet lastigvalt. Maar LR-optieken kosten nog steeds zoveel dat u aarzelt voordat u ze in grote hoeveelheden bestelt.

AOC's en DAC's? Zeker - voor de bovenkant-van- het rek of als uw schakelaars elkaar in hetzelfde rek omhelzen. We hadden één implementatie waarbij de hele bladlaag zo dichtbij zat dat de langste kabel 4 meter was, dus DAC's hebben ons duizenden bespaard. Andere keren zijn AOC's pleisters-bij een slechte vezelplanning.

 

 

Implementatierealiteit (niet de schone versie die u op conferenties hoort)

 

Ik zal dit kort houden:
400G legt elke zwakte in uw vezelfabriek bloot.
En je etikettering.
En waarschijnlijk uw documentatie.

ik heb gezien:

cross-verbonden panelen zijn sinds 2015 verkeerd gelabeld

MPO-cassettes achterstevoren geïnstalleerd

schoonmaakmiddelen verkeerd gebruikt (ja, dit gebeurt)

optiek faalt omdat iemand de kabel in de verkeerde straal heeft gebogen

Niets hiervan komt naar voren in webinars van leveranciers. Maar bij echte implementaties verslinden deze kleine onvolkomenheden het hele weekend.

 

En over dat 800G-gesprek ...

 

Het komt eraan. Zeker. Maar het idee dat 800G binnenkort 400G zal "vervangen" is onzin. De meeste bedrijven hebben nog steeds 10G-eilanden die weigeren te sterven. Hyperscalers handelen snel omdat de schaal dit vereist, niet omdat de technologie dat wil.

400G zal nog jaren bij ons blijven. Eerlijk gezegd garandeert de hoeveelheid geld die aan de bestaande infrastructuur is gekoppeld dit vrijwel.

 

Laatste opmerkingen voordat ik terugga naar mijn laboratorium

 

400G is niet elegant. Het is niet pijnloos. Het is niet de schone, glanzende upgrade die mensen zich voorstellen als ze nieuwe hardware-aankondigingen zien.

Maar het werkt. En als je eenmaal je eerste implementatie hebt overleefd - inclusief het zweten over glasvezel, de hitte en af ​​en toe een mysterieuze linkflap -, besef je uiteindelijk hoe ver de industrie is gekomen.

Als je 400G in een nieuwbouw plant, prima. Vergeet alleen de saaie dingen niet: schoonmaaksets, goede luchtstroom, iemand die daadwerkelijk weet hoe je MPO correct moet beëindigen, en ten minste één persoon in je team die kalm kan blijven als een link zonder duidelijke reden weigert te verschijnen.

Dat laatste is moeilijker te vinden dan goede optiek.