Znanje

Raščlanjivanje podatkovnog centra razdvaja računanje, memoriju, pohranu i umrežavanje u neovisne, združene resurse umjesto da ih zaključa unutar fiksnih granica poslužitelja. To odvajanje stvara novu arhitektonsku ovisnost: sloj međusobnog povezivanja između tih skupova mora isporučiti dovoljnu propusnost, dovoljno nisku latenciju i dovoljan doseg kako bi se cijeli sustav ponašao kao jedna koordinirana struktura. Optička interkonekcija je tehnologija prijenosa koja sve više ispunjava tu ulogu - posebno tamo gdje bakrene veze pogađaju fizička ograničenja udaljenosti, snage i integriteta signala.

Ovaj članak objašnjava kako optičko međusobno povezivanje podržava raščlanjene arhitekture, gdje je bolje od bakra, kakav je odnos s CXL i ko-zapakiranom optikom i kada ima praktičnog smisla usvojiti ga.

Što je raščlanjivanje podatkovnog centra?

U tradicionalnom-poslužiteljskom modelu, CPU, memorija, pohrana i umrežavanje okupljeni su unutar jednog kućišta. Kupujete poslužitelj i dobivate fiksni omjer sva četiri - bez obzira na to je li vašem radnom opterećenju potreban taj omjer ili ne. Raščlanjivanje podatkovnog centra rastavlja taj skup. Svaka vrsta resursa organizirana je u vlastiti skup, a radna opterećenja crpe samo ono što im je potrebno iz svakog skupa preko zajedničke strukture.

To je važno jer su moderna radna opterećenja rijetko uravnotežena. Veliki posao učenja jezičnog modela može zasititi GPU memoriju i istočno-zapadnu propusnost dok jedva dodiruje lokalnu pohranu. Cjevovod analitike-u stvarnom vremenu može zahtijevati ogroman memorijski kapacitet, ali samo umjereno računanje. U dizajnu koji je-usredotočen na poslužitelj, ta neusklađenost dovodi do nasukavanja resursa: neaktivni CPU ciklusi koji se nalaze uz iscrpljenu memoriju ili kapacitet pohrane koji ne koristi radno opterećenje.

TheOpen Compute Project (OCP)pokreće disagregirane dizajne regala od sredine 2010-ih, a hiperskaleri poput Mete i Microsofta implementirali su rastavljenu pohranu i umrežavanje na velikom broju. NastanakCompute Express Link (CXL)je proširio tu viziju na dezagregaciju memorije, čineći arhitekturu sve praktičnijom za širi raspon okruženja.

Zašto tradicionalni dizajn-centričnog poslužitelja udara u zid

Dvije sile guraju infrastrukturne timove prema razdvajanju: pritisak korištenja i pritisak širine pojasa.

Na strani korištenja, paketi fiksnih poslužitelja stvaraju veliki otpad. Industrijska istraživanja sugeriraju da otprilike 25% DRAM kapaciteta u konvencionalnim poslužiteljima u prosjeku ostaje neiskorišteno, iako memorija čini gotovo polovicu ukupnih troškova poslužitelja. Pomnožen na tisuće čvorova, taj nasukani kapacitet predstavlja značajan kapitalni i energetski teret.

Što se tiče propusnosti, klasteri za obuku AI-a i analitika visokih-performansi generiraju obrasce prometa koji se oštro razlikuju od tradicionalnog opterećenja web-posluživanja sjever-juga-. Ova radna opterećenja stvaraju veliki promet istok-zapad - GPU-na-GPU, akcelerator-na-memoriju i čvor-na-čvor - preko stotina ili tisuća krajnjih točaka. Tradicionalne poslužiteljske-topologije s kratkim bakrenim stazama između fiksnih kutija nisu dizajnirane za taj obrazac. Kako se brzine povezivanja penju s 400G na 800G i dalje, električna ograničenja bakra postaje sve teže zaobići.

Kako radi optičko međusobno povezivanje u raščlanjenom podatkovnom centru?

Nakon što se računalni, memorijski i akceleratorski resursi smjeste u zasebne skupove, tkanina koja povezuje te skupove postaje-kritični sloj za performanse. Optička interkonekcija služi tom sloju pretvarajući električne signale u svjetlost, prenoseći podatke preko njegapojedinačni-načinilivišemodno vlakno, i pretvaranje natrag u električni na prijemnom kraju.

Fizika optičkog transporta daje mu strukturne prednosti za ovaj posao. Svjetlosni signali u vlaknima doživljavaju daleko manje slabljenje po metru od električnih signala u bakru, što znači da optičke veze mogu održavati kvalitetu signala na većim udaljenostima bez kondicioniranja signala gladnog energije (retimeri, DSP-ovi, ekvilajzeri) koje bakar zahtijeva pri većim brzinama. Na 800 Gbps, pasivni bakar je praktičan do otprilike 3-5 metara. Aktivni električni kabeli protežu se do možda 7 metara. Optičke veze rutinski se protežu od 100 metara do 2 kilometra pri istoj brzini prijenosa podataka, a koherentna optika može dosegnuti desetke kilometara.

U raščlanjenoj arhitekturi, ova prednost dosega nije apstraktna. Izravno određuje koliko udaljeni skupovi resursa mogu sjediti dok se i dalje ponašaju kao jedinstveni sustav. Posebno:

• Unutar police:Bakar i dalje dominira za vrlo kratke veze - poslužitelj-na-vrh-preklopnik-stalka, GPU-na-GPU unutar ladice. Na udaljenostima manjim od 2-3 metra, bakar je jednostavniji, jeftiniji i ima manju-latenciju.
• Stalak-na-stalak (2–100 m):Ovdje optička interkonekcija postaje praktična zadana vrijednost na 400G i više. Povezivanje računalnog stalka s memorijskim spremištem u susjednom stalku ili povezivanje GPU ladica preko reda obično zahtijeva gustoću propusnosti i doseg koji pruža vlakno.Sklopovi optičkih kabelaiMPO/MTP povezivostsu standardne za ove staze.
• Soba-do-sobe i zgrada-do-zgrade (100 m–10+ km):Samo je optički transport moguć na ovim udaljenostima i brzinama. Ovaj opseg je bitan za raščlambu-razmjera kampusa, gdje se skupovi za pohranu, rezervno računanje ili resursi-oporavka od katastrofe nalaze u zasebnim zgradama.

Optičko međusobno povezivanje u odnosu na bakar u raščlanjenim podatkovnim centrima

Odabir između optičkog i bakrenog nije binarni - već ovisi o opsegu-. Evo kako se njih dvoje uspoređuju među čimbenicima koji su najvažniji u raščlanjenom dizajnu:

Praktičan zaključak: koristite bakar tamo gdje-jednostavnost kratke udaljenosti još uvijek pobjeđuje. Koristite optički gdje doseg, gustoća propusnosti, energetska učinkovitost ili upravljanje kabelima postaju obvezujuće ograničenje. U raščlanjenom okruženju, optički udio ukupnog međusobnog povezivanja raste jer sama arhitektura stvara dulje, veće-puteve propusnosti između odvojenih skupova resursa. Za dublju usporedbu vrsta medija pogledajteoptički vs bakreni kabeli: koji je pravi za vašu implementaciju.

Ključne prednosti optičkog međusobnog povezivanja za rastavljanje

Veća gustoća propusnosti za odvojene skupove resursa

Dezagregacija povećava količinu prometa koji prolazi kroz sloj međusobnog povezivanja jer resursi koji su nekad bili ko-locirani sada komuniciraju preko mreže. Optičko vlakno podržava taj zahtjev s većom propusnošću po-vlaknu i više vlakana po kabelu. Jednostrukavrpcasti vlaknasti kabelmože nositi stotine vlakana u kompaktnom-presjeku, omogućujući vrstu gustoće priključaka koju zahtijevaju raščlanjeni GPU klasteri i skupovi memorije.

Niža snaga i toplinsko opterećenje u mjerilu

Učinkovitost napajanja važnija je u raščlanjenom dizajnu jer sloj međusobnog povezivanja nosi veći udio ukupnog prometa sustava. Na 800G i više, bakrene veze na umjerenim udaljenostima zahtijevaju-DSP obradu s intenzivnim napajanjem na oba kraja. Optičke veze pri jednakim brzinama i udaljenostima troše manje energije po bitu. NVIDIA-ina tehnička dokumentacija o svojoj ko-zapakiranoj platformi za prebacivanje optike izvješćuje a3,5× smanjenje potrošnje energijeu usporedbi s tradicionalnim priključnim primopredajnicima. Na razini podatkovnog centra ta se razlika izravno pretvara u niže račune za struju i smanjenu infrastrukturu za hlađenje.

Modularno, neovisno skaliranje

Jedno od ključnih obećanja raščlanjivanja jest da se računanje, memorija i pohrana mogu skalirati različitim brzinama. Optičko međusobno povezivanje podržava to obećanje jer dodavanje kapaciteta jednom skupu resursa ne zahtijeva redizajniranje cijele strukture.Priključni optički modulimože se nadograditi ili dodavati postupno - od 400G do 800G do 1.6T - bez mijenjanja temeljnog pogona vlakana.

Fleksibilnost za heterogena radna opterećenja

Kada se resursi udruže i povežu kroz-optičku strukturu visokih performansi, infrastrukturni timovi mogu dinamički dodjeljivati ​​resurse radnim opterećenjima umjesto oblikovanja radnih opterećenja oko fiksnih konfiguracija poslužitelja. Ta je fleksibilnost posebno vrijedna u okruženjima u kojima poslovi obuke AI,-zaključivanje u stvarnom vremenu, analitički cjevovodi i-teške aplikacije koegzistiraju i natječu se za različite vrste resursa.

Kako se optičko međusobno povezivanje odnosi na CXL i Co-pakiranu optiku

CXL: sloj protokola za dijeljenje memorije i resursa

CXL (Compute Express Link) i optičko međusobno povezivanje rješavaju različite dijelove problema rastavljanja. CXL je otvoreni standardni protokol - izgrađen na PCIe fizičkom sloju - koji omogućuje predmemoriju-koherentnu komunikaciju između procesora, memorijskih uređaja i akceleratora. Definira kako se odvojeni resursi mogu skupiti i učinkovito dijeliti na razini softvera i protokola.

Konzorcij CXL, čiji su članovi Intel, AMD, NVIDIA, Samsung, Microsoft, Google i Meta, izdao je CXL 3.1 u studenom 2023. s eksplicitnom podrškom zaprebacivanje na više-razina i raščlanjivanje-na temelju tkanineizvan stalka. CXL 3.0 uveo je podršku za do 4096 čvorova u unificiranoj strukturi, omogućujući skupljanje memorije na rack-na razini i potencijalno klaster-na razini.

Optičko međusobno povezivanje je fizički prijenos koji može prenositi CXL promet (i druge protokole) između tih distribuiranih čvorova. Tim koji procjenjuje skupljanje memorije temeljeno na CXL-i tim koji procjenjuje optičko međusobno povezivanje često rade na istoj inicijativi rastavljanja iz različitih kutova - jedan se bavi protokolom i logikom-dijeljenja resursa, a drugi se bavi fizičkim prijenosom.

Ko-zapakirana optika: približavanje optike čipu

Ko-zapakirana optika (CPO) ide dalje integrirajući optičke motore izravno na isti supstrat paketa kao ASIC ili GPU prekidača, umjesto oslanjanja na odvojene priključne primopredajnike povezane putem električnih priključaka na prednjoj ploči. Ovo eliminira najduže i{2}}električne putove koji traže najviše energije u sustavu.

Na GTC 2025, NVIDIA je najavila svoj prviko-zapakirane platforme za prespajanje fotonike(Quantum-X Photonics i Spectrum-X Photonics), pružajući propusnost do 409,6 Tb/s s 512 priključaka pri 800 Gb/s. Izvršni direktor NVIDIA-e Jensen Huang primijetio je da bi skaliranje na milijun GPU-a korištenjem konvencionalnih priključnih primopredajnika potrošilo otprilike 180 MW samo u primopredajniku - što je neodrživa brojka za koju je CPO dizajniran da se pozabavi.

CPO nije nešto što danas treba primijeniti svaki tim koji procjenjuje raščlanjivanje. Priključni optički moduli za većinu ostaju dominantan faktor oblikasvjetlovodni podatkovni centarimplementacije i nastavit će se barem do kasnih 2020-ih. Ali CPO predstavlja smjer optičke karte, a timovi koji planiraju velike klastere umjetne inteligencije ili sljedeće-generacije raščlanjene strukture trebali bi pažljivo pratiti njegovu zrelost.

Kada optičko međusobno povezivanje ima najviše smisla?

AI i akcelerator-teška okruženja

Klasteri za obuku AI među najjačim su slučajevima upotrebe za optičko međusobno povezivanje u raščlanjenom kontekstu. Ovi sustavi generiraju masivan promet istok-zapad preko staza GPU-na-GPU i GPU-na-memoriju. Kako veličine klastera rastu od stotina do tisuća GPU-a, zahtjevi za dosegom i propusnošću brzo premašuju ono što bakar može podržati. U NVIDIA GB200 NVL72 arhitekturi, na primjer, troškovi umrežavanja (uključujući optičke primopredajnike) predstavljaju 15-18% ukupnih troškova klastera, a optički primopredajnici čine otprilike 60% tog mrežnog troška. Ekonomska i radna opravdanost optimizacije optičkog sloja je značajna.

Skupljanje memorije i infrastruktura koja se može sastaviti

Ako vaš tim procjenjuje udruživanje memorije temeljeno na CXL-u, fizički prijenosni sloj mora podržavati to odvajanje bez dodavanja neprihvatljive latencije ili ograničavanja razmjera. CXL 3.1 izričito cilja na rastavljanje-razmjera tkanine izvan okvira, što znači da će putovi međusobnog povezivanja obuhvaćati veće udaljenosti od tradicionalnih memorijskih sabirnica-poslužitelja. Optičke veze prirodno odgovaraju tim stazama.

Okruženja-velikih razmjera s neujednačenim potrebama za skaliranjem

Optičko međusobno povezivanje također ima više smisla kada se računanje, memorija i pohrana moraju skalirati različitim brzinama. Ako vaš računalni kapacitet raste 3× godišnje, ali pohrana raste 1,5×, raščlanjena arhitektura omogućuje vam da neovisno proširite svaki skup -, a optičko međusobno povezivanje to čini fizički mogućim bez ponovnog projektiranja postrojenja za kabliranje svaki put.

Kad NEMA smisla

Optičko međusobno povezivanje nije pravo polazište za svako okruženje. Ako vaš podatkovni centar primarno izvodi uravnotežena radna opterećenja-opće namjene na konvencionalnim poslužiteljima, a vaš-to-rack promet je skroman i dobro ga-opslužuje postojeća bakrena infrastruktura, trošak i složenost optičke-prve mreže možda neće biti opravdani. Slično tome, ako radite na razini u kojoj nekoliko desetaka poslužitelja zadovoljava vaše potrebe, samo razdvajanje može uvesti više operativne složenosti nego što uštedi. Arhitektura se isplati kada su razmjer, heterogenost i neravnoteža resursa stvarni i mjerljivi - a ne hipotetski.

Što procijeniti prije postavljanja

1. Mapirajte svoje stvarno usko grlo

Počnite s jasnim pitanjem: što je obvezujuće ograničenje? Je li doseg (bakrene staze prekratke za vaš raspored stalka)? Gustoća propusnosti (nedovoljna propusnost po kabelu za napajanje vašeg GPU klastera)? Snaga (električne veze troše previše snage pri 400G+)? Iskorištenost resursa (poslužitelji su prekomjerno raspoređeni na jednoj osi i nestaju na drugoj)? Optička interkonekcija najvrjednija je kada je usko grlo fizičko i mjerljivo, a ne kada se prihvaća kao opća gesta modernizacije.

2. Procijenite ukupne troškove sustava, a ne troškove kabela

Uobičajena pogreška je usporedba cijene bakrenog kabela s cijenom kabelaoptički kabelu izolaciji. Ta je usporedba pogrešna. Značajna usporedba uključuje potrošnju energije, toplinske troškove (i trošak hlađenja koji stvara), gustoću priključaka po jedinici stalka, upotrebljivi doseg, fleksibilnost nadogradnje i cijenu nasuknutih resursa u široj arhitekturi. U mnogim raščlanjenim okruženjima na 400G i više, ukupni trošak vlasništva vlakana niži je od bakra kada uzmete u obzir cijeli sustav.

3. Provjerite kompatibilnost i operativnu spremnost

Ocijeniteispitivanje optičkih kabelazahtjevi, interoperabilnost modula, alati za nadzor i operativno poznavanje optike vašeg tima. Priključni optički moduli (OSFP, QSFP-DD) dobro su-standardizirani i široko podržani, ali vaš bi operativni tim trebao biti upoznat s rukovanjem vlaknima, čišćenjem i rješavanjem problema prije nego što ih implementirate u velikom broju. Razmislite o započinjanju s pilot domenom u kojoj možete potvrditi ove operativne čimbenike.

4. Planirajte dugovječnost biljke vlakana

Jedna značajna prednost optičke infrastrukture jest ta da postrojenje pasivnih vlakana - kabeli, patch paneli i putovi - mogu podržati više generacija tehnologije primopredajnika. Dobro-dizajniranpovezivost podatkovnog centradanas instalirana tvornica vlakana za 400G može podržati 800G i 1.6T nadogradnje zamjenom primopredajnika, bez povlačenja novih kabela. To početno ulaganje u vlakna čini obranjivijim tijekom 10-godišnjeg horizonta planiranja.

Praktičan put usvajanja

Korak 1: Identificirajte jednu ograničenu domenu.Potražite mjesto gdje doseg bakra, snaga, gustoća propusnosti ili nasukavanje resursa već stvaraju mjerljivu bol. To može biti proširenje klastera GPU-a, usko grlo--stalka u analitičkom okruženju ili pilot skupljanje memorije.

Korak 2: Isprobajte i potvrdite.Postavite optičko međusobno povezivanje u toj domeni. Izmjerite ponašanje latencije, potrošnju energije, operativnu složenost i ekonomičnost proširenja u odnosu na svoju postojeću osnovnu vrijednost.

Korak 3: Proširite na temelju dokaza.Upotrijebite pilot podatke za izradu poslovnog i tehničkog slučaja za širu primjenu. Raščlanjivanje i optička migracija rijetko se najbolje rješavaju kao jedan veliki-projekt. Postupno uvođenje omogućuje vam učenje, prilagodbu i izgradnju organizacijskog povjerenja.

Popis za provjeru odluka: Je li optičko međuspojivanje pravo za vašu inicijativu rastavljanja?

• Jesu li udaljenosti vaše veze -na-stalak ili sobe-na-sobu veće od praktičnog dosega bakra pri vašoj ciljnoj brzini?
• Planirate li implementirati 400G ili veće brzine veze u bliskoj budućnosti?
• Postaje li potrošnja energije iz električnog međusobnog povezivanja značajan dio proračuna za energiju vašeg podatkovnog centra?
• Procjenjujete li skupljanje memorije temeljeno na CXL-u, komponibilnu infrastrukturu ili proširenje GPU klastera?
• Je li nasukavanje resursa (neaktivno računanje, memorija ili pohrana zaključana unutar fiksnih poslužitelja) mjerljivi trošak?
• Treba li vaše okruženje skalirati računanje, memoriju i pohranu različitim brzinama?

Ako se primjenjuju tri ili više od navedenog, optičko međusobno povezivanje zaslužuje ozbiljnu procjenu kao dio vašeg plana rastavljanja.

FAQ

Što je optičko međusobno povezivanje u podatkovnom centru?

Optička interkonekcija je prijenosna tehnologija koja koristi svjetlosne signale prekooptički kabeliza prijenos podataka između mrežnih uređaja, poslužitelja, preklopnika, sustava za pohranu i skupova resursa unutar i između podatkovnih centara. Nudi veću propusnost, dulji domet i manju snagu po bitu u usporedbi s bakrom pri jednakim brzinama - što ga čini posebno važnim za raščlanjene i-arhitekture usmjerene na umjetnu inteligenciju.

Kako se optički interkonekt razlikuje od CXL-a?

Djeluju na različitim slojevima. Optička interkonekcija je fizička transportna tehnologija - koja pomiče bitove od točke A do točke B pomoću svjetla. CXL je standard protokola koji definira kako CPU, memorija i akceleratori koherentno komuniciraju. Optička interkonekcija može prenositi CXL promet, ali CXL također radi preko električnih veza za kratko{4}}veze. Timovi često ocjenjuju oboje istovremeno jer raščlanjivanje stvara potražnju za boljim protokolima (CXL) i boljim fizičkim transportom (optika).

Mogu li bakar i optički koegzistirati u raščlanjenom podatkovnom centru?

Da, i obično to rade. Većina raščlanjenih okruženja koristi bakar za vrlo kratke veze unutar -stalka (ispod 3–5 metara) gdje ostaje jednostavnije i jeftinije, i optička vlakna za -na-stalak, red-na-red i dulje putove gdje ograničenja dosega, snage i gustoće bakra postaju obvezujuća. Odluka ovisi-o opsegu, a ne sve-ili-ništa.

Što je ko-zapakirana optika i trebam li je sada?

Co-packaged optics (CPO) integrira optičke motore izravno u isti paket kao i ASIC preklopnika ili procesor, eliminirajući potrebu za odvojenim priključnim primopredajnicima i smanjujući potrošnju energije i kašnjenje. NVIDIA i Broadcom uvode CPO u sljedeće-generacije AI mrežnih platformi. Većina podatkovnih centara danas ne treba CPO -priključni optički moduliostati standard -, ali CPO je na planu za-infrastrukturu umjetne inteligencije velikih razmjera u vremenskom okviru 2026. – 2028.

Kada NE bih trebao provoditi razdvajanje s optičkim interkonekcijom?

Ako su vaša radna opterećenja dobro-uravnotežena između računala, memorije i pohrane; vaša skala je skromna (nekoliko desetaka poslužitelja); a vaša postojeća bakrena infrastruktura bez naprezanja rješava vaše trenutne i-ročne potrebe za propusnošću - dodatna složenost raščlanjivanja i optičke migracije možda neće biti vrijedna ulaganja. Počnite s uskim grlom, a ne s popularnom riječi.

Koje se vrste vlakana koriste u optičkom povezivanju podatkovnog centra?

Jedno{0}}modno vlaknokoristi se za veće-udaljenosti, veće-brzine (obično stalak-na-stalak i šire).Višemodno vlaknouobičajeno je za kraće veze unutar-podatkovnih-centara do nekoliko stotina metara. Izbor ovisi o potrebnom dosegu, brzini i profilu troškova svake veze.