
Kako AI GPU klasteri potiču potrebu za optičkim kabelom visoke gustoće
GPU klasteri vođeni umjetnom inteligencijom danas zahtijevaju daleko veću gustoću vlakana u modernim podatkovnim centrima. Budući da je skalabilnim 400G, 800G i 1.6T mrežnim sustavima potreban prostor za rast, kabliranje optičkih vlakana visoke gustoće postalo je temeljni zahtjev. Standardne postavke oblaka koristile su se za pokretanje virtualnih strojeva na poslužiteljima opće namjene, ali radna opterećenja modernog strojnog učenja umjesto toga zahtijevaju masivnu paralelnu obradu. Ovaj temeljni pomak u potpunosti mijenja dizajn fizičke mreže, prisiljavajući arhitekte podatkovnih centara da ugrade neviđen broj jezgri vlakana u iznimno skučene fizičke prostore. U ovom sveobuhvatnom vodiču analizirat ćemo fizička ograničenja naslijeđenog kabliranja, istražiti konstrukcijski inženjering koji stoji iza naprednih optičkih rješenja i pregledati točna pravila instalacije koja upravljaju optičkim kabelom visoke gustoće u objektima umjetne inteligencije sljedeće generacije i modernim arhitekturama međusobnog povezivanja podatkovnih centara poduzeća.
Zašto AI podatkovni centri zahtijevaju eksponencijalno više vlakana
Podatkovni promet unutar modernih objekata potpuno se izokrenuo. Tradicionalna okruženja u oblaku primarno su rukovala prometom sjever-jug, što jednostavno znači da su podaci premješteni od vanjskog korisnika do lokalnog poslužitelja i natrag. Mrežni inženjeri mogli su lako upotrijebiti omjer prekomjerne pretplate 3:1 ili 4:1 na razini preklopnika jer su znali da većina poslužitelja nikada ne bi slala velike tokove podataka u istom trenutku.
Obuka AI modela u potpunosti razbija ovaj stari dizajn. Kada trenirate veliki jezični model, tisuće GPU-a moraju raditi jedan pored drugog dok neprestano međusobno razmjenjuju masivne skupove parametara izračuna. Ovo radno opterećenje generira intenzivan promet istok-zapad koji u potpunosti ostaje unutar zidova pogona, neprekidno jureći od čipa do čipa. Kako bi se osiguralo da skupi računalni hardver nikada ne miruje čekajući mrežni promet, ovi moderni klasteri zahtijevaju strogu topologiju bez blokiranja 1:1. Svaki pojedini računalni čvor mora moći komunicirati sa svakim drugim čvorom punom brzinom žice bez ikakvog kašnjenja.

Ovaj pomak stvara ogroman porast fizičkih optičkih veza u podatkovnoj dvorani. Dok standardni stalak za poslužitelj u oblaku može trebati samo nekoliko desetaka vlakana koje prolaze do kralježnog prekidača, klaster AI visoke gustoće dramatično povećava taj broj. Zapravo, broj vlakana koja se dovode do jednog AI poslužiteljskog stalka (NVIDIA NVL72) doseže 1152 vlakana.
Povezivanje svih ovih regala zajedno zahtijeva optičku mrežu koja se lako širi bez popunjavanja svakog fizičkog puta. Upravo sada, industrija upravlja 330% rastom propusnosti za povezivanje podatkovnog centra (2020. – 2024.). Ovaj veliki skok u količini podataka stvara ozbiljne izazove u snazi i toplini u cijeloj zgradi. Bakreni twinax kabeli ne mogu prenositi visokofrekventne signale jako daleko zbog ozbiljnog gubitka električnog signala i velike potrošnje energije. Kada radi na brzinama od 400G ili 800G, bakar doseže samo nekoliko metara, prisiljavajući objekte da postavljaju optičke primopredajnike tik uz procesore.
Ova ekstremna računalna gustoća izravno utječe na ukupnu komunalnu snagu u cijeloj zemlji. Potrošnja električne energije u podatkovnim centrima u SAD-u dosegla je 176 teravat-sati od 2023. Kako tvrtke grade veće neblokirajuće optičke mreže i dodaju potrebnu opremu za hlađenje, projicirana potrošnja električne energije u podatkovnim centrima u SAD-u je 6,7% do 12% od 2028. Premještanje podataka svjetlom, a ne električnom energijom pomaže objektima da ostanu unutar svojih toplinskih i električnih proračuna, što izravno stvara potrebu za tisućama optičkih žica niz svaki jednoredni red.
Fizička uska grla skaliranja na mreže velike brzine
Nadogradnja modernih prekidača za rad na brzinama od 400G, 800G ili 1,6T uvelike se oslanja na paralelnu optiku. Umjesto slanja jednog signala niz jedan par niti, optički primopredajnici poput 400GBASE-SR8 ili 800GBASE-DR8 dijele taj signal na osam paralelnih optičkih puteva. Ovaj dizajn znači da jedan priključak primopredajnika treba 16 pojedinačnih vlakana (osam za odašiljanje i osam za prijem) umjesto standardne dvije niti koje se koriste u starijim mrežama. Kada jedan mrežni preklopnik sadrži 64 ovakva brza priključka, sama fizička veličina svih tih kabela brzo stvara veliki problem prostora.
Starije linije vlakana oslanjaju se na labavu konstrukciju cijevi. U ovim tradicionalnim kabelima, pojedinačna vlakna presvučena debljinom 250 mikrona labavo leže unutar krutih plastičnih međuspremnih cijevi koje se motaju oko središnje šipke od stakloplastike. Inženjeri popunjavaju prazne praznine gelom za blokiranje vode ili suhom trakom koja bubri, dodaju aramidnu pređu za čvrstoću povlačenja i zabrtviju sve unutar debelog polietilenskog omotača.
Ovi kabeli dobro funkcioniraju na otvorenom, ali njihov glomazni okrugli dizajn gubi ogromnu količinu prostora poprečnog presjeka u zatvorenom prostoru. Kada mrežni inženjeri pokušaju skalirati standardne labave cijevne kabele da drže tisuće optičkih niti, vanjska veličina kabela postaje prevelika. Standardni putovi unutar objekta prolaze kroz cijevi od 2 inča ili 4 inča. Iako volumen cjevovoda raste s kvadratom njegovog radijusa, pakiranje krutih okruglih cijevi unutar okruglih cjevovodnih cijevi ostavlja puno praznog, neupotrebljivog prostora. Pokušaj provlačenja tradicionalnog labavog cijevnog kabela od 1728 vlakana kroz standardni unutarnji vod od 2 inča fizički je nemoguć zbog tijesnih prostora i trenja.
Ovo se zagušenje izlijeva iz podzemnih cijevi i ravno na pod podatkovnog centra. Kada debeli, teški kabeli uđu u prostoriju, radnici ih moraju provući kroz kabelske police iznad glave. Sirova težina tradicionalnih visokožilnih kabela može lako premašiti strukturalna ograničenja opterećenja standardnih stropnih šipki. Nadalje, glomazni snopovi blokiraju protok zraka kroz sustave zadržavanja hladnih prolaza, stvarajući vruće točke koje tjeraju rashladne jedinice da rade jače i smanjuju ukupnu učinkovitost potrošnje energije.
At the patch panels, space limits become even more difficult to manage. Završavanje tisuća pojedinačnih labavih vlakana zahtijeva desetke velikih ladica za spajanje. U neblokirajućoj AI tkanini, patch paneli moraju podržavati nevjerojatne gustoće kako bi se bilo koji GPU mogao povezati izravno s bilo kojim drugim GPU-om. Danas maksimalna gustoća vlakana u jednom stalku doseže 41 472 zakrpana vlakna. Kad bi tehničari pokušali izgraditi ovu postavu koristeći standardne labave cijevne kabele od 250 mikrona, trebali bi višestruke podne police samo za držanje patch traysa, zauzimajući dragocjeni podni prostor koji bi umjesto toga trebao držati računalne poslužitelje.
Kako kabliranje visoke gustoće rješava probleme prostora i težine
Kako bi prešli granice labavih cijevnih kabela, proizvođači optičkih proizvoda razvili su potpuno novi pristup proizvodnji kabela. Industrija je prva uspostavila jasnu osnovu za kabliranje velikog kapaciteta, gdje je definicija kabela s ultra-velikim brojem vlakana (UHFC) > 576 vlakana. Kako bi ovoliki broj niti uklopili u vanjski omotač kojim se može upravljati, inženjeri su morali smanjiti fizičke dimenzije stakla s premazom.
A standard optical fiber uses a 9-micron core surrounded by a 125-micron glass cladding, which keeps light trapped inside through total internal reflection. Because this core glass size is an international standard, engineers cannot shrink it without breaking compatibility with existing network hardware. Međutim, oni mogu lako smanjiti vanjske zaštitne slojeve. Standardna vlakna koriste dvoslojni akrilatni premaz stvrdnuti UV-om koji stvara ukupni promjer niti od 250 mikrona. Korištenjem čvršće, kompaktnije smole, smanjena veličina međuspremnika za kabele visoke gustoće iznosi 200 mikrona.
Brijanje 50 mikrona sa sićušne prevlake od vlakana može zvučati beznačajno, ali ušteda prostora se zbraja vrlo brzo. Budući da se površina kruga povećava s kvadratom njegovog radijusa, smanjenjem promjera niti s 250 na 200 mikrona smanjuje se površina poprečnog presjeka za otprilike 36%. Kada povežete tisuće ovih manjih niti unutar jedne jakne, sveukupna ušteda prostora je dramatična.
Drugo veliko inženjersko otkriće zamjenjuje krute ravne vrpce fleksibilnim vrpcama koje se mogu smotati, a koje se također nazivaju paučinastim vrpcama. Tradicionalne plosnate vrpce povezuju 12 vlakana zajedno u kontinuiranu čvrstu plastičnu traku. Budući da se ove ravne vrpce mogu slagati samo poput drvenih dasaka, tvore čvrste pravokutne blokove koji se loše uklapaju u okrugle jakne. Dizajn vrpce koja se može smotati nanosi sićušne točkice ljepila povremeno duž 12 vlakana. To omogućuje da se vrpca otvori potpuno ravno za masovno spajanje fuzijom, dok joj također dopušta da se kotrlja u kompaktni okrugli snop unutar kabela.
Combining 200-micron fibers with rollable ribbons delivers huge physical advantages. For instance, plant engineers see a 30% outer diameter reduction for 200-fiber cable when compared to older designs. Eliminating extra plastic fillers and heavy gels also delivers a 60% weight reduction for 200-fiber cable. Budući da se ovi tanji kabeli lako savijaju oko uskih kutova u podzemnim kanalima i nadzemnim policama, objekti postižu 30% uštede prostora u kanalima korištenjem optičkog kabela velike gustoće.

| Metrički | Tradicionalni kabel (250µm) | Kabel visoke gustoće (200µm) | Poboljšanje |
|---|---|---|---|
| Promjer međuspremnika | 250 mikrona | 200 mikrona | 20% smanjenje promjera |
| Iskorištenje prostora kanala | Kruta labava cijev | Fleksibilna vrpca koja se može smotati | 30% uštede prostora u kanalu |
| Vanjski promjer (200 vlakana) | Osnovna linija | Zbijeno | 30% smanjenje vanjskog promjera |
| Težina kabela (200 vlakana) | Osnovna linija | Lagan | 60% smanjenje težine |
Spajanje i identificiranje kabela s ultra visokim brojem vlakana
Instaliranje kabela s ultra velikim brojem vlakana pravi je izazov za tehničare na terenu, koji moraju identificirati i prekinuti tisuće sićušnih niti bez pravljenja skupih pogrešaka. Kod standardnih kabela od 144 vlakna, tehničari jednostavno slijede standardnu šifru od 12 boja (plava, narančasta, zelena, smeđa i tako dalje) kako bi pratili pojedinačne cijevi i vlakna. Ako se bilo koja žica pomiješa, tehničar može osvijetliti vidljivi crveni laser s vizualnim lokatorom kvarova u liniju kako bi potvrdio vezu.
Kada jedan kabel drži tisuće niti, korištenje crvenog laserskog lokatora postaje potpuno nepraktično. Svjetlo se lako širi kroz čvrsto zbijena vlakna od 200 mikrona, zbog čega je teško odrediti koja jezgra svijetli. Povrh toga, standardni niz od 12 boja ponavlja se stotine puta unutar UHFC jakne. Kako bi to popravili, proizvođači koriste taktirani raspored uparen s tiskanim oznakama izravno na vrpcama.
U dizajnu s taktom, unutrašnjost kabela je podijeljena na jasne dijelove, koristeći obojenu vezivnu pređu za označavanje početne točke na poziciji "12 sati". Tehničari jednostavno broje u smjeru kazaljke na satu od ove referentne oznake kako bi locirali pravi snop. Unutar svežnja, svaka vrpca koja se može smotati ima ispisani kod s točkama i crticama na svom matričnom vezivu. Čitajući ove ispisane točke i crtice, tehničar može brzo identificirati vrpcu broj 144 od 288 bez potrebe da osvijetli liniju.
Nakon što su prava vlakna izolirana, završetak mora ići brzo. Kad bi tehničar spajao kabel od 3456 vlakana jedan po jedan uz pomoć stroja s jednim vlaknom, završetak tog spoja trajao bi nekoliko tjedana neprekidnog ručnog rada. Poslovi s vlaknima visoke gustoće rješavaju ovaj problem korištenjem masovnog spajanja fuzijom.
Uređaji za masovno spajanje fuzijom zavaruju 12 vlakana u jednom koraku. Najprije tehničar uklanja matrični premaz pomoću termičkog skidača zagrijanog na približno 100 stupnjeva Celzijevih, koji omekšava plastiku bez grebanja osjetljivog silikatnog stakla od 125 mikrona ispod. Zatim, vrpca od 12 vlakana ide u visokoprecizni sjekač za više vlakana kako bi se osiguralo da je svaki stakleni kraj odrezan pod savršenim pravim kutom. Naposljetku, uređaj za spajanje koristi fiksne v-utore i kamere s dvije osi za poravnavanje svih 12 pari vlakana prije ispaljivanja električnog luka kako bi se stakleni krajevi rastalili zajedno.
Ova metoda spajanja vrpcama štedi ogromnu količinu projektnog vremena na gradilištu. Terenski timovi bilježe smanjenje vremena spajanja od 80% korištenjem masovne fuzije od 12 vlakana u usporedbi s pojedinačnim spajanjem. Spajanjem jednostavnog rukovanja kabelom s bržim alatima za spajanje, izvođači postižu 5 puta veću brzinu instalacije optičkog kabela koristeći FREEFORM Ribbon™ tehnologiju.
| Korak | Identifikacija i postupak spajanja | Najbolja praksa |
|---|---|---|
| 1 | Izolacija vrpce | Upotrijebite taktirani dizajn jezgre kako biste locirali referentni povez, a zatim pročitajte kod točka-crtica na matrici vrpce. |
| 2 | Skidanje premaza | Upotrijebite termalni skidač postavljen na 100 stupnjeva Celzijevih kako biste uklonili sloj od 200 mikrona sa svih 12 vlakana istovremeno. |
| 3 | Precizno cijepanje | Postavite vrpcu u sječivo za više vlakana kako biste postigli krajnju površinu od 90 stupnjeva preko cijelog niza. |
| 4 | Masovno spajanje fuzijom | Poravnajte vrpcu u v-utoru i izvedite pražnjenje električnog luka od 12 vlakana, provjeravajući poravnanje putem X/Y kamera. |

Izračun vučne napetosti i radijusa savijanja za staze visoke gustoće
Postavljanje optičkih vodova visoke gustoće zahtijeva strogu pozornost na ograničenja fizičkog povlačenja kako osjetljivo staklo iznutra ne bi pretrpjelo skrivena oštećenja. Optička vlakna prenose podatke potpunom unutarnjom refleksijom. Kada se kabel savije jače od svoje nominalne granice, svjetlost pogađa granicu jezgre i omotača pod prestrmim kutom, dopuštajući optičkim fotonima da izađu kroz omotač. Mrežni inženjeri to nazivaju gubitkom makrosavijanja.
Gubitak mikrosavijanjem još je veći rizik u instalacijama visoke gustoće. Ako ekipa za montažu povuče kabel s prevelikom silom, unutarnja vlakna se zgnječe o vanjski omotač i središnje čvrstoće. Ovaj pritisak stvara mikroskopske zavoje duž duljine stakla. Čak i nakon što napetost prestane, te malene deformacije ostaju u staklu, stvarajući gubitak optičkog signala koji tehničari detektiraju tek kada se mreža uključi.
Kako bi izgradili sigurne putove, inženjeri moraju provjeriti točan vanjski promjer kabela koji planiraju instalirati. Za referencu, promjer RocketRibbon™ kabela od 1728 vlakana je 25 mm (~1 inč). Prijeđite na sljedeću veličinu i promjer RocketRibbon™ kabela od 3456 vlakana je 32 mm (~1,3 inča).
Ove veličine kabela određuju potrebnu širinu zahvata cijevi i kutija za povlačenje duž trase. Kao standardno mehaničko pravilo, minimalni radijus savijanja pod napetosti tijekom povlačenja je 20 puta veći od promjera kabela. Prilikom povlačenja kabela od 32 mm 3456 vlakana kroz kanal, svi zavoji cijevi i kotačići za povlačenje moraju održavati radijus krivulje od najmanje 640 mm kako se vlakna ne bi zgnječila pod opterećenjem. Nakon što je kabel postavljen na svoje mjesto i napetost nestane, minimalni dugotrajni radijus savijanja nakon instalacije je 10 puta veći od promjera kabela, što tehničarima omogućuje čvršće zavoje unutar kućišta zakrpe.
Inženjeri općenito preporučuju održavanje maksimalne vučne napetosti ispod 600 lbs za tipične kampuse i unutarnje podatkovne centre. Povlačenjem preko ove granice riskira se istezanje aramidnih niti preko njihovog elastičnog praga, što baca sav fizički teret ravno na lomljivo silikatno staklo. Kako bi smanjili trenje i održali sigurnu napetost povlačenja, tehničari moraju pažljivo upravljati razinama punjenja cijevi. Kao najbolja praksa, ravne staze ne bi trebale premašiti omjer popunjenosti od 40%, dok složene staze s više zavoja moraju ostati ispod omjera popunjenosti od 25%. Posade bi uvijek trebale koristiti zakretnicu za odvajanje koja odgovara snazi kabela kako bi se vitlo odvojilo prije nego što se staklo ošteti.
| Vrsta kabela | Vanjski promjer | Minimalni radijus savijanja (povlačenje) | Minimalni radijus savijanja (instalirano) |
|---|---|---|---|
| RocketRibbon™ od 1728 vlakana | 25 mm (~1 inč) | 500mm | 250mm |
| RocketRibbon™ od 3456 vlakana | 32 mm (~1,3 inča) | 640mm | 320mm |
DCI cijene u odnosu na DWDM arhitekture
Prilikom povezivanja zasebnih podatkovnih dvorana preko kampusa ili grada, mrežni arhitekti moraju pažljivo dizajnirati rute međusobnog povezivanja podatkovnih centara. Kopanje podzemnih rovova između zgrada nekada je bilo vrlo skupo, pa su operateri podatkovnih centara povijesno koristili kabele s niskim vlaknima i koristili multipleksiranje guste valne duljine kako bi ugurali više podataka u tih nekoliko vlakana. DWDM sustavi koriste specijalizirane lasere i optičke filtre za kombiniranje desetaka različitih boja svjetlosti na jednom paru niti.
Međutim, DWDM primopredajnici i kućišta za multipleksiranje koštaju puno novca, troše značajnu količinu energije i dodaju kašnjenje mrežnoj vezi. Budući da distribuirana AI radna opterećenja zahtijevaju apsolutno najnižu latenciju i veliku paralelnu propusnost, DWDM lako može postati glavno usko grlo u pogledu troškova i performansi.
Moderni hiperskaleri izbjegavaju ovaj problem stavljanjem ultra-visokih vlakana u zemlju kao osiguranje tamnih vlakana. Instaliranjem tisuća neobrađenih optičkih niti prvog dana, podatkovni centri mogu koristiti jednostavnu sivu optiku male snage (kao što je 400G-DR4 ili 800G-DR8) koja radi bez složenog hardvera za multipleksiranje. Prethodni trošak kupnje dodatnog stakla brzo se nadoknađuje velikim uštedama na hardveru primopredajnika i nižim računima za struju.
Trenutna tvornička oprema postavlja fizička ograničenja za ove masivne kabele. Trenutačno je maksimalni broj vlakana za kabele s prorezima s prorezima 6912 vlakana. Odabir najbolje veličine kabela zahtijeva balansiranje troškova materijala po stopi s budućim potrebama propusnosti AI klastera.
Ovdje je pregled uobičajenih veličina postavljanja i njihovih procijenjenih troškova materijala:
-
Implementacije 1728 vlakana: Idealno za interkonekcije kampusa kratkog dometa koje povezuju susjedne podatkovne dvorane u krugu od 2 km. Ovaj broj osigurava dovoljnu gustoću za podršku ranoj fazi širenja kralježničnog lista bez prevelikih standardnih unutarnjih kanala od 2 inča. Većina prodavača izvješćuje o procijenjenoj cijeni za kabel 1728f od 5 do 8 USD/ft, službena dokumentacija ne precizira.
-
Implementacije 3456 vlakana: Dizajnirane za metropolitanske prstenove koji povezuju odvojene zone dostupnosti. Ovaj broj djeluje kao primarna okosnica za distribuirane klastere za obuku AI koji obuhvaćaju više fizičkih nekretnina. Većina prodavača izvješćuje o procijenjenoj cijeni za kabel 3456f na 8–12 USD/ft, službena dokumentacija ne precizira.
-
Implementacije 6912 vlakana: Rezervirano za glavne hiperrazmjerne veze okosnice gdje je prostor za kanale učinkovito iscrpljen, a kopanje novih putova je previsoko. Uvođenje ovog kabela maksimalne gustoće osigurava desetljeća osiguranja tamnih vlakana, omogućujući operateru da odmah osvijetli nove paralelne veze kako se generacije GPU-a razvijaju. Većina prodavača navodi procijenjenu cijenu za 6912f kabel od 15-25 USD/ft, službena dokumentacija ne navodi.




