NVIDIA Mellanox 980-9I45J-00H010 Rozwiązanie techniczne urządzenia sieciowego

Rozwiązanie techniczne urządzenia sieciowego NVIDIA Mellanox 980-9I45J-00H010 | Wysoka niezawodność łączności i optymalizacja operacyjna dla centrów danych i sieci korporacyjnych

1. Analiza tła projektu i wymagań

Korporacyjne centra danych przechodzą krytyczne przejście od sieci „najlepszego wysiłku” do sieci „deterministycznej”. Klastry AI/HPC wymagają spójności opóźnień na poziomie mikrosekund, rozproszona pamięć masowa opiera się na transporcie bez strat pakietów, a połączenia między chmurami wymagają samonaprawy usterek w czasie krótszym niż sekunda. Tradycyjne trójwarstwowe architektury sieciowe osiągnęły swoje granice w zakresie równoważenia obciążenia, szybkości konwergencji błędów i widoczności operacyjnej. Rozwiązanie to skupia się naNVIDIA Mellanox 980-9I45J-00H010jako podstawowy element infrastruktury sieciowej nowej generacji, zaprojektowany tak, aby jednocześnie spełniać trzy podstawowe wymagania:wysoka dostępność(przełączanie awaryjne na poziomie łącza/urządzenia poniżej 100 ms),wysoka przepustowość przy bardzo małych opóźnieniach(przekazywanie z szybkością łącza 400G z opóźnieniem poniżej 600 ns) orazinteligentne operacje(kompleksowa telemetria i proaktywne przewidywanie anomalii).

2. Ogólny projekt architektury sieci

Rozwiązanie wykorzystuje dwupoziomową architekturę Spine-Leaf CLOS, w której każdy przełącznik Leaf jest w pełni połączony z każdym urządzeniem Spine, zapewniając stałą liczbę przeskoków wynoszącą 2 (Leaf → Spine → Leaf) pomiędzy dowolnymi dwoma punktami końcowymi. Warstwa liścia jest podzielona według domeny usług: strefa obliczeniowa (szkolenie GPU/AI), strefa przechowywania (NVMe-oF), strefa zarządzania (iBMC/poza pasmem) i strefa najemcy (izolacja najemcy VXLAN). The980-9I45J-00H010pełni funkcję węzła rdzeniowego Spine, oferując 32 porty 400G QSFP-DD lub 128 portów 100G za pośrednictwem kabli rozdzielających, z wydajnością przełączania 12,8 Tb/s. Urządzenia Leaf można wdrażać za pomocą przełączników serii NVIDIA Spectrum-2, połączonych łączami nadrzędnymi 100G/200G z warstwą Spine, tworząc nieblokującą topologię grubego drzewa.

Na płaszczyźnie kontrolnej rozwiązanie wdraża protokół BGP-EVPN jako ujednolicony protokół płaszczyzny kontrolnej, obsługujący wirtualizację sieci opartą na VXLAN. W warstwie Leaf zaimplementowano technologię MLAG (Multi-Chassis Link Aggregation), aby umożliwić podwójny aktywny dostęp do serwera, zapewniając zerowe zakłócenia ruchu w przypadku awarii łącza. W warstwie Spine dostępna jest sprzętowa funkcja NSR (Non-Stop Routing).980-9I45J-00H010zapewnia przejrzystość płaszczyzny przesyłania podczas przełączania nadzorcy, uzupełnioną przez BFD (wykrywanie przekazywania dwukierunkowego) w celu osiągnięcia zbieżności tras w czasie krótszym niż sekunda.

3. Rola i kluczowe cechyNVIDIA Mellanox 980-9I45J-00H010w rozwiązaniu

Urządzenie to pełni w rozwiązaniu podstawową rolę Spine, a jego zróżnicowana wartość przejawia się w czterech wymiarach:

• Bardzo małe opóźnienia z deterministycznym przekazywaniem:Wykorzystując tryb przekazywania typu „cut-through”, opóźnienia między portami wynoszą poniżej 600 ns, a fluktuacje są ograniczone do ± 50 ns, co zapewnia przewidywalne czasy zakończenia dla ruchu RoCEv2.
• Inteligentne zarządzanie przeciążeniami:Wbudowany silnik kontroli przeciążenia zapewnia akcelerację sprzętową dla DCQCN (kwantyzowane powiadomienie o przeciążeniu centrum danych) i kontroli przepływu priorytetów (PFC), z dynamicznym automatycznym dostrajaniem progów ECN w celu ograniczenia ryzyka zakleszczenia PFC.
• Zaawansowana matryca telemetryczna:Obsługa telemetrii sieci wewnątrzpasmowej (INT) i telemetrii strumieniowej (gRPC) umożliwia eksport w czasie rzeczywistym głębokości kolejki, wykorzystania łącza i współczynników błędów CRC na port, tworząc podstawę danych dla operacji.
• Otwarte programowanie:Zbudowane na sprzęcie zgodnym z SONiC i obsługującym programowalne potoki P4, zespoły operacyjne mogą dostosowywać logikę przetwarzania płaszczyzny danych, aby elastycznie dostosowywać się do przyszłej ewolucji protokołów.

Jako główny element980-9I45J-00H010 Szybka sieć w centrum danychrozwiązania, specyfikacje zasobów sprzętowych podsumowano poniżej:

4. Zalecenia dotyczące wdrożenia i skalowania (w przypadku typowej topologii)

Typowa topologia wdrożenia (na przykładzie 128 przełączników Leaf): każdy Leaf jest przesyłany w górę za pośrednictwem łączy 4 x 100G do 4 węzłów Spine (tj. 4 jednostek980-9I45J-00H010), osiągając współczynnik nadsubskrypcji 4:1 (przepustowość łącza w dół: przepustowość łącza w górę = 4:1), odpowiedni dla obciążeń szkoleniowych AI wrażliwych na przepustowość. Aby zachować elastyczność skalowania, w warstwie Spine zaleca się rezerwę portów na poziomie 20%. Do wyboru kabla rozdzielającego: użyj optyki 400G ZR do połączeń długodystansowych (≥2 km) i aktywnych kabli optycznych 400G SR8 lub AOC do łączy o krótkim zasięgu (<100 m). Aby zapewnić kompatybilność z istniejącymi asortymentami optyki, należy zapoznać się zKompatybilny z 980-9I45J-00H010matrix i nadaj priorytet certyfikowanym modułom QSFP-DD/OSFP od kwalifikowanych dostawców.

Zalecenia dotyczące skalowania opierają się na podejściu trójfazowym:Faza 1 (początkowy ślad): 2 Spines + 16 przełączników Leaf obsługujących około 1000 serwerów;Faza 2 (zwiększanie wydajności): skalowanie do 4 Spines, podwojenie przepustowości łącza zwrotnego Leaf w celu osiągnięcia łącznej przepustowości struktury wynoszącej 50 Tb/s;Faza 3 (połączenie między wieloma lokalizacjami): wykorzystaj porty 400G ZR w węzłach Spine, aby uzyskać bezpośrednią łączność optyczną DCI, umożliwiając bezproblemową pracęRozwiązanie sieciowe 980-9I45J-00H010rozszerzenie na wiele centrów danych.

5. Zalecenia dotyczące monitorowania operacji, rozwiązywania problemów i optymalizacji

Na froncie operacyjnym rozwiązanie tworzy zamkniętą pętlę obejmującą „gromadzenie danych → wykrywanie anomalii → lokalizację pierwotnej przyczyny → automatyczne korygowanie”:

• Ramy monitorowania:Wdróż NVIDIA NetQ lub Prometheus+Grafana, aby zbierać dane telemetryczne w czasie rzeczywistym (w tym głębokość kolejki, współczynnik błędów bitowych łącza, temperatury modułów optycznych) z980-9I45J-00H010za pośrednictwem gRPC, z dynamicznym alertem opartym na progach.
• Proaktywne zapobieganie błędom:Wykorzystaj przepływy danych INT do skonstruowania „mapy cieplnej” obejmującej całą sieć szkieletową, identyfikującej prekursory mikroprzeciążeń i umożliwiającej zapobiegawcze korekty nasion skrótu ECMP lub progów ECN.
• Szybka lokalizacja granicy błędu:W przypadku pogorszenia jakości łącza należy wykorzystać kody błędów i dzienniki zdarzeń określone w plikuKarta katalogowa 980-9I45J-00H010w połączeniu z technikami korelacji znaczników czasu w celu wskazania konkretnego portu fizycznego lub urządzenia nadawczo-odbiorczego.
• Automatyczne korygowanie:Zintegruj się z Ansible lub NVIDIA UFM (Unified Fabric Manager), aby opracować podręczniki, które automatycznie wyłączają i izolują wadliwe porty, wyzwalając przejęcie łącza w trybie gotowości.

Zalecenie dotyczące optymalizacji: w przypadku scenariuszy o ruchu mieszanym (pamięć masowa + moc obliczeniowa + zarządzanie) skonfiguruj zróżnicowane zasady ECN i PFC na980-9I45J-00H010, przypisując kolejki o wyższym priorytecie do ruchu w pamięci masowej, aby zapobiec zużywaniu przepustowości pamięci przez impulsy obliczeniowe.

6. Podsumowanie i ocena wartości

To rozwiązanie techniczne, zbudowane wokółNVIDIA Mellanox 980-9I45J-00H010jako rdzeń Spine zapewnia sieć centrów danych nowej generacji charakteryzującą się opóźnieniami poniżej mikrosekundy, zerową utratą pakietów i operacjami predykcyjnymi. Analiza porównawcza wskazuje, że w porównaniu z tradycyjnymi konstrukcjami sieci 25G/100G architektura ta może zwiększyć przepustowość zadań szkoleniowych AI o około 35%, jednocześnie zmniejszając MTTR podczas rozwiązywania problemów operacyjnych nawet o 70%. Chociaż980-9I45J-00H010 cenaoznacza wyższą inwestycję początkową w porównaniu ze standardowymi przełącznikami, całkowity koszt posiadania okres zwrotu można ograniczyć do 14-18 miesięcy poprzez ponowne wykorzystanie optyki (kompatybilność z istniejącymi modułami 100G/200G), wzrost efektywności energetycznej (40% redukcja watów na Gb/s) i oszczędności w automatyzacji operacji.

Jako kompleksoweProdukt sieciowy 980-9I45J-00H010rozwiązanie, oferta ta jednocześnie spełnia wymagania dotyczące dużej przepustowości980-9I45J-00H010 Szybka sieć w centrum danychoraz standardy niezawodności przyjęte wSpecyfikacje 980-9I45J-00H010. Produkt jest teraz wymieniony jakoSprzedam 980-9I45J-00H010, wraz z towarzyszącymi przewodnikami wdrażania i zestawami narzędzi do automatyzacji opublikowanymi na oficjalnym portalu dokumentacji NVIDIA (patrz plikKarta katalogowa 980-9I45J-00H010). Dla przedsiębiorstw planujących modernizację sieci w centrach danych rozwiązanie to zapewnia równowagę między technicznym wybieganiem w przyszłość a wykonalnością wdrożenia, ustanawiając solidną podstawę sieciową dla ery sztucznej inteligencji.