Łączność centrum danych

Sep 18, 2025|

Transformacja systemów obliczeniowych wysokich -

 

Krajobraz wysokich - systemów przetwarzania wydajności ulega dramatycznej transformacji, gdy naciskamy na niespotykane możliwości obliczeniowe. Oczekuje się, że projekcje wydajności wskazują, że wysokie - systemy obliczeniowe będą rosły o trzy rzędy wielkości, przechodząc z Petascale (10^15 klap) do exascale (10^18 flopów) możliwości obliczeniowych.


Ta wykładnicza trajektoria wzrostu stanowi podstawowe wyzwania, których nie można rozwiązać poprzez same tradycyjne skalowanie technologii CMOS, nawet przy dalszym stosowaniu prawa Moore'a. Ostatnie badania sugerują, że osiągnięcie wydajności Exascale może wymagać systemów zawierających około 100 000 węzłów obliczeniowych, w których łączność centrum danych staje się krytycznym wąskim gardłem, które zasadniczo zmienia nasze podejście do strategii architektury systemowej i połączeń. Skala tych systemów wymaga rewolucyjnych postępów w zakresie projektowania i wdrażania infrastruktury komunikacyjnej, która łączy te ogromne zasoby obliczeniowe.

Obliczeniowa projekcja wzrostu

Computational Growth Projection

Prognozowany wzrost od Petascale do exascale Computing Officity

 

Rosnące wyzwanie sieci połączeń

 

Wraz ze wzrostem mocy obliczeniowej sposób komunikacji systemów staje się krytycznym czynnikiem ograniczającym.

Implikacje tego skalowania wykraczają daleko poza zwykłą moc obliczeniową. W miarę eskalacji rozmiarów systemów i wymagań wydajności, sieci połączeń szybko pojawiają się jako krytyczne wąskie gardła zarówno dla zużycia energii, jak i ogólnej wydajności systemu.


Presja na infrastrukturę połączeń wzajemnych nasiliła się do punktu, w którym wydajność sieci bezpośrednio określa wykonalność systemów obliczeniowych następnych -. Ta rzeczywistość wzbudziła intensywne zainteresowanie wysokim - przełączników sieciowych Radix, które oferują przekonujące zalety łączności centralnej danych poprzez zmniejszenie zarówno całkowitej liczby przełączników wymaganych dla danej skali systemu, jak i liczby przeskoków pakietów danych przemieszczających się od źródła do miejsca docelowego.

 

The Growing Challenge of Interconnection Networks

Ewolucja topologii sieci

Nowoczesne obliczenia wydajności High - wymaga wyrafinowanych topologii sieci, aby zminimalizować opóźnienie i zmaksymalizować wykorzystanie przepustowości w tysiącach węzłów.

 

 

High - architektury przełącznika Radix

 

Hierarchical Connections

Połączenia hierarchiczne

Przykładem złożonych sieci Clos, zapewniających ustrukturyzowaną skalowalność z przewidywalnymi charakterystykami wydajności poprzez warstwowe architektury.

Direct Connection Topologies

Bezpośrednie topologie połączenia

Takie jak spłaszczone konfiguracje motyla lub hiperksowe, które minimalizują opóźnienie poprzez zmniejszenie pośrednich etapów przełączania.

Hybrid Approaches

Podejścia hybrydowe

Łączenie elementów obu strategii w celu optymalizacji pod kątem określonych wzorców obciążenia i wymagań systemowych.

 

Fundamentalne zalety wysokich - przełączników Radix

  • Zmniejszona średnica sieci przy jednoczesnym utrzymaniu szerokości pasma Bisection
  • Niższa całkowita liczba przełączników wymaganych dla równoważnej skali systemu
  • Zmniejszona liczba chmielu dla pakietów danych podróżujących z źródła do miejsca docelowego
  • Poprawiła ogólną wydajność systemu poprzez optymalizację architektoniczną

 

Podstawowy urok wysokich - przełączników Radix polega na ich zdolności do zmniejszenia średnicy sieci przy jednoczesnym zachowaniu przepustowości bisekcji, czyniąc je coraz bardziej atrakcyjnymi dla nowoczesnych architektur łączności centrów danych. W praktycznych wdrożeniach przełączniki te muszą zrównoważyć wiele konkurencyjnych ograniczeń. Budżety pasma I/O ChIP i budżety mocy reprezentują dwa najważniejsze czynniki ograniczające skalowanie Radix.


Wyzwanie staje się szczególnie ostre podczas próby utrzymania przepustowości portu -, jednocześnie zwiększając Radix Switch w celu zmniejszenia opóźnień w scenariuszach łączności centrum danych. To wyzwanie wynika przede wszystkim z ograniczeń przepustowości na peryferiach chipowych, w których międzynarodowa mapa technologiczna dla prognoz półprzewodników (ITR) wskazuje jedynie niewielki wzrost zarówno w - pasma pinów i całkowitej liczby pinów w następnej dekadzie.

 

Studium przypadku: przełącznik przędzy Craya

 

 

Przełącznik YARC Craya reprezentuje implementację chipów o wysokiej - -, która ilustruje zarówno możliwości, jak i ograniczenia obecnej technologii przełączania elektronicznego dla łączności centrum danych.

 

Architektura YARC wykorzystuje 768 pinów wspólnych na 64 portach dwukierunkowych, osiągając łączną przepustowość 2,4 TB/s. Każdy port wymaga trzech sygnałów danych wejściowych i trzech wyjściowych, które podwajają 12 pinów podczas wdrażania sygnalizacji różnicowej dla ulepszonej integralności sygnału prędkości - w aplikacjach łączności centrum danych.

YARC switch power distribution breakdown

Awaria rozkładu mocy przełącznika przędzy

 

 

Wyzwania zużycia energii

 

Power Consumption Challenges

Zużycie energii stało się krytycznym ograniczeniem w obliczeniach o wysokiej wydajności -, często ograniczając skalowalność bardziej niż surową zdolność obliczeniową.

 

Wyzwanie skalowania mocy wykracza poza tylko interfejsy we/wy. Na - globalne interkonekty przedstawiają dodatkowe wąskie gardła mocy, do których walczą czysto elektroniczne rozwiązania. Globalna wydajność drutu nadal degraduje się z każdym generowaniem technologii, ponieważ geometrie drutu nie skalują proporcjonalnie z wymiarami tranzystora.


Aby zminimalizować opóźnienie, zaawansowane przełączniki, takie jak YARC, zatrudniają repeater - wyposażone przewody w globalnych ścieżkach danych i ścieżkach sterowania, wymagające wielu pośredniego bufory i zasobów okablowania w celu obsługi wymaganej wewnątrz - przełącznika przepustowości. Ta złożoność architektoniczna nie tylko zwiększa zużycie energii, ale także komplikuje zamykanie czasu i wdrażanie projektowania fizycznego, tworząc kaskadowe wyzwania dla infrastruktury łączności centralnej danych, w której najważniejsze są wydajność energetyki i skalowalność.

Przyjęcie wyższej technologii Serializer/Deserializer (SERDES) technologii wyższej - oferuje jedną potencjalną ścieżkę do zwiększonej gęstości przepustowości, ale takie podejście ma znaczny handel - Offs. Wysokie - obwody prędkości Serdes zużywają znaczne części budżetu energii układu, które w innym przypadku byłyby dostępne do funkcji przełączania.

 

W implementacji YARC wysokie - obwody różnicowe prędkości zużywają około 50% całkowitej mocy układu, trzeźwym przypomnieniem kosztów energii związanych z wysokim - sygnalizacji elektrycznej pasma. Ten wzorzec zużycia energii podkreśla podstawowe ograniczenie: gdy popychamy sygnalizację elektryczną do wyższych prędkości, energia na bit przesyłany znacznie wzrasta, zagrażając żywotności czysto elektronicznych roztworów dla przyszłych wymagań łączności centrum danych.

 

Kluczowe wąskie gardła

High - obwody prędkości50%

Na - globalne interkonnety 25%

Logika przełączania15%

Inne komponenty10%

 

 

 

 

Fotonika krzemowa: zmiana paradygmatu

 

modular-1

Rewolucyjna technologia połączeń

 

Silicon Photonics umożliwia transmisję danych za pomocą światła, przezwyciężając podstawowe ograniczenia sygnalizacji elektrycznej w systemach obliczeniowych o wysokiej wydajności -.

Emerging Silicon Photonics Technologies oferują transformacyjne rozwiązania ograniczeń przepustowości PIN, które ograniczają przełączniki elektroniczne. Umożliwiając bezpośrednie sprzężenie falowodów lub włókien optycznych na - falowodów o chipach, całkowicie połączenia fotoniczne eliminują potrzebę prędkości prędkości wysokiej - prędkości.


Podczas gdy poszczególne szybkości sygnałów optycznych pozostają porównywalne z prędkościami paska elektrycznego, łączna przepustowość na falowód można znacznie zwiększyć dzięki technologii multipleksowania podziału długości fali (DWDM). Współczesne implementacje DWDM mogą obsługiwać do 64 długości fali jako niezależne kanały komunikacji w jednym falowodzie, zapewniając bezprecedensową gęstość przepustowości, która jest szczególnie kluczowa dla następnej łączności centralnej generacji danych generacji, w której ogromne wymagania dotyczące przepustowości nadal się eskalują.

Zalety technologiczne DWDM

64 niezależne kanały

Pojedynczy falowód obsługujący wiele długości fali

Zwiększona gęstość przepustowości

Najwyższa przepustowość danych na jednostkę powierzchni

Efektywność energetyczna

Niższe zużycie energii dla długich - transmisja odległości

Zmniejszone połączenia fizyczne

Mniej kabli potrzebnych do równoważnej przepustowości

 

Porównanie wydajności energetycznej

 

Energy Efficiency Comparison

 

Zaleta energetyczna wzajemnych połączeń optycznych staje się szczególnie wyraźna w środowiskach centrum danych, w których energia transportu bitowego (BTE) dla optycznych łączy pozostaje prawie niezależna od odległości transmisji. Ta odległość - niezmienna charakterystyczna kontrastuje ostro z elektrycznymi połączeniami, w których BTE rośnie liniowo z odległością w powtarzanych warunkach non - jeszcze poważniej, gdy stosuje się repeatery w celu utrzymania integralności sygnału i opóźnienia.

 

 

Architektury hybrydowe

 

Optymalizacja dla odległości - handel zależny - Offs między technologiami elektronicznymi i fotonicznymi

 

Najlepsze z obu światów

 

Podczas gdy optyczne interkonekty oferują przekonujące zalety dla długiej komunikacji odległości -, optymalne rozwiązanie dla następnych systemów przełączania generacji nie jest wyłącznie optyczne, ale raczej starannie zaprojektowane podejście hybrydowe.

 

Ta hybrydowa strategia wykorzystuje transmisję optyczną na duże odległości przy jednoczesnym utrzymaniu transmisji elektrycznej na krótkie odległości, wykorzystując mocne strony każdej dziedziny technologii.

Hybrid Architectures
 

 

Wyzwania optyczne wzajemne
  • Wymagania dotyczące odchylenia statycznego nawet w okresach bezczynnych
  • Optymalna wydajność tylko przy wysokich wskaźnikach wykorzystania
  • Opóźnienie konwersji w elektrycznych - do - interfejsy optyczne
  • Wrażliwość na temperaturę komponentów fotonicznych
 
Zalety wzajemne elektryczne
  • Niższe energia transportu na krótkie odległości
  • Szybsza transmisja dla krótkiej komunikacji zakresu -
  • Brak obciążenia konwersji między domenami sygnalizacyjnymi
  • Dojrzała technologia z ustalonymi metodologii projektowania

 

Punkt przekroczenia wydajności elektrycznej i optycznej zależy od wielu czynników, w tym węzła technologicznego, szybkości sygnału i konkretnych szczegółów implementacji. Ponieważ wymagania łączności centrum danych nadal skalują się wykładniczo, porównanie wydajności staje się coraz bardziej krytyczne. Ponieważ rozmiary funkcji nadal kurczą się w różnych szybkościach technologii elektronicznych i fotonicznych, ten punkt przekroczenia będzie ewoluować, co czyni kluczowe znaczenie dla zachowania elastyczności architektonicznej w projektach systemowych, które mogą dostosować się do zmieniających się wymagań łączności centrum danych.

 

Programy prądowe sugerują, że optymalny punkt przejściowy od sygnalizacji elektrycznej na optyczną będzie nadal zmieniać się w kierunku krótszych odległości w miarę dojrzewania technologii integracji fotonicznej.

 

 

Mapy drogowe technologiczne

 

Ocena rozwiązań elektronicznych i fotonicznych do przyszłych aplikacji przełączających wymaga wyraźnych technologicznych map drogowych, które projektują w odpowiednich ramach czasowych. W przypadku technologii elektronicznych ITRS zapewnia kompleksowe projekcje skalowania urządzeń, wydajności połączeń i zużycia energii, szczególnie, że wskaźniki te stają się coraz bardziej krytyczne dla wymagań łączności centrum danych.

 

Jednak w polu komunikacji optycznej nie ma podobnie ujednoliconej mapy drogowej, co wymaga opracowania niestandardowych modeli projekcyjnych dla znaczących porównań wydajności i mocy między rozwiązaniami elektronicznymi i fotonicznymi.

„Integracja fotoniki krzemowej z technologią CMOS stanowi kluczowy kamień milowy do osiągnięcia kosztów - skutecznej, wysokiej - wzajemnych połączeń przepustowości w centrach danych. Ostatnie demonstracje wykazały, że optyka optyka CO -.

- Miller, DAB, „AttoJoule Optoelectronics for Low - Przetwarzanie informacji o energii i komunikacji”, Journal of Lightwave Technology, 2017

 

Projekcje te podkreślają kluczowe znaczenie ciągłych innowacji zarówno w domenach elektronicznych, jak i fotonicznych. Ścieżka do przodu wymaga nie tylko przyrostowej poprawy poszczególnych elementów, ale fundamentalnych przemyślenia architektur systemowych w celu pełnego wykorzystania możliwości pojawiających się technologii.

Wzrost przepustowości

 

Bandwidth Growth

 

Trendy redukcji mocy

 

Power Reduction Trends

 

 

 

System - implikacje poziomu

Topologia sieci

Hybrydowe architektury umożliwiają płaskie topologie sieciowe o wyższych przełącznikach radix, zmniejszając zarówno średnią liczbę przeskoków, jak i wariancję długości ścieżki.

Wskaźniki wydajności

Nowe wskaźniki oceny muszą uwzględniać dystans -, narzut zależny od energii, moc statyczna i konwersja domeny.

Projektowanie systemu

Strategie układu fizycznego, algorytmy routingu i zasady zarządzania ruchem muszą zostać ponownie wyobrażone dla architektur hybrydowych.

Przejście na hybrydowe elektroniczne - architektury przełączania fotonicznego ma głębokie implikacje dla projektowania i optymalizacji systemu. Architekci sieci muszą teraz wziąć pod uwagę multi - przestrzeń optymalizacji wymiarów, która obejmuje nie tylko tradycyjne wskaźniki, takie jak opóźnienie i przepustowość, ale także dystans -, zależna od efektywności energetycznej, statyczne zużycie energii i dynamiczne zużycie energii oraz koszty ogólne konwersji domeny.

 

 

Praktyczne świadczenia wdrażania

 Bardziej elastyczne układy fizyczne włączone przez wzajemne połączenia optyczne

Zmniejszone wymagania chłodzenia poprzez lepszą wydajność energetyczną

Uproszczona konstrukcja PCB poprzez zmniejszoną liczbę pinów elektrycznych

Ulepszona przewidywalność wydajności aplikacji dla opóźnień - wrażliwe obciążenia

 

 

W miarę eskalacji wymagań łączności w centrum danych, napędzanych aplikacjami, od sztucznej inteligencji po przetwarzanie naukowe, potrzeba wydajnych, skalowalnych rozwiązań międzykonnectowych staje się coraz bardziej paląca.

 

 

Podejścia integracji porównanie

 

Podejście integracji Zalety Wyzwania Dojrzałość
Integracja monolityczna Ścisłe połączenie między domenami
Minimalne efekty pasożytnicze
Najwyższa potencjalna wydajność
Kompromisy w optymalizacji urządzeń
Złożony proces wytwarzania
Niższe plony

60%

Integracja heterogeniczna Niezależna optymalizacja
Wyższa wydajność komponentów
Lepiej daje
Złożoność opakowania
Granica domeny
Wyższy koszt systemu

80%

Co - Optyka pakowana Saldo wydajności i kosztów
Zmniejszone produkcje efektów pasożytniczych
Zarządzanie termicznie
Wyzwania wyrównania
Testowanie złożoności

70%

 

Wymagania dotyczące zarządzania termicznego systemów hybrydowych dodają kolejną warstwę złożoności. Urządzenia fotoniczne często wykazują silną zależność od temperatury, wymagając starannego projektu termicznego w celu utrzymania stabilnego działania. Ta czułość termiczna musi być zrównoważona w stosunku do znacznego wytwarzania ciepła z wysokich - elektronicznych obwodów przełączania, wymagające wyrafinowanych strategii zarządzania termicznego.

 

 

Wskaźniki wydajności i porównanie testów porównawczych

 

Kluczowe wskaźniki oceny

 

Utajenie

W tym opóźnienie konwersji domeny i opóźnienie propagacji

 

Przepustowość łącza

Agregate i Per - możliwości przepustowości portu

 

Efektywność energetyczna

Dynamiczne i statyczne wskaźniki zużycia energii

 

Niezawodność

Wskaźniki błędów bitowych i możliwości tolerancji błędów

Ocena wydajności hybrydowych elektronicznych przełączników fotonicznych - wymaga nowych metryk i metod porównawczych, które wychwytują unikalne cechy tych systemów. Tradycyjne wskaźniki, takie jak łączna przepustowość i port - do - opóźnienie portu pozostają ważne, ale należy je uzupełnić dodatkowymi pomiarami, które odzwierciedlają heterogeniczny charakter architektury hybrydowej.

 

Wskaźniki efektywności energetycznej muszą uwzględniać zarówno dynamiczne przełączanie energii, jak i statyczne zużycie energii, z odpowiednim ważeniem opartym na oczekiwanych wzorcach ruchu i poziomach wykorzystania.

 

Obciążenie - świadomość

Odległość - Zależna charakter wydajności energetycznej w systemach hybrydowych wymaga obciążenia - świadomej oceny wydajności. Zastosowania z głównie lokalnymi wzorcami komunikacji mogą widzieć ograniczone korzyści z optycznych połączeń, podczas gdy te wymagające częstego długiego - transfery danych odległości mogą osiągnąć znaczne oszczędności energii.

 

Wskaźniki niezawodności i dostępności wymagają również ponownego rozważenia w kontekście systemów hybrydowych. Komponenty optyczne wprowadzają nowe tryby awarii i mechanizmy degradacji, które różnią się od tych w systemach czysto elektronicznych. Wskaźniki błędów bitowych, choć ogólnie niższe w przypadku linków optycznych w optymalnych warunkach, mogą być bardziej wrażliwe na czynniki środowiskowe i starzenie się komponentów.

 

Projekty systemowe muszą obejmować odpowiednie mechanizmy redundancji i błędów odzyskiwania błędów przy jednoczesnym zachowaniu zalet wydajności architektur hybrydowych.

Send Inquiry