Adapter serwerowy NVIDIA Mellanox MCX623106AN-CDAT w akcji

Średniej wielkości dostawca usług w chmurze stanął niedawno przed znanym wyzwaniem: ich starsze karty sieciowe 25GbE nie były w stanie nadążać za gwałtownym wzrostem ilości pamięci masowej NVMe-oF i rozproszonych obciążeń szkoleniowych związanych ze sztuczną inteligencją. Wykorzystanie procesora często przekraczało 70% w węzłach magazynowania ze względu na tradycyjne obciążenie stosu protokołu TCP/IP, podczas gdy opóźnienia w godzinach szczytu negatywnie wpływały na wydajność aplikacji. Ten przypadek z życia codziennego pokazuje, jakNVIDIA Mellanox MCX623106AN-CDATprzekształciła swoją infrastrukturę poprzez RDMA i RoCE.

Klaster pamięci masowej dostawcy składał się z 50 węzłów Ceph, z których każdy obsługiwał zarówno operacje we/wy klienta, jak i ruch związany z replikacją wewnętrzną. Mając w zapleczu ponad 3000 dysków NVMe, trzy problemy stały się dotkliwe: wysokie przerwania procesora wynikające z przetwarzania sieci, niespójne opóźnienia przy mieszanych obciążeniach oraz nasycenie przepustowości wschód-zachód. W starszych adapterach brakowało sprzętowego odciążania RoCE, co zmuszało każdy pakiet do przejścia przez stos jądra. Po ocenieSpecyfikacje MCX623106AN-CDATiKarta katalogowa MCX623106AN-CDAT, zespół wybrałMCX623106AN-CDAT Adapter ConnectX Karta sieciowa PCIena wdrożenie pilotażowe.

Nowa architektura zastąpiła starsze adaptery adapteramiNVIDIA Mellanox MCX623106AN-CDATw ośmiu węzłach magazynowania i czterech węzłach obliczeniowych. TheMCX623106AN-CDAT Karta adaptera Ethernetposiada dwa porty 100 Gb/s, PCIe 4.0/5.0 i natywną obsługę RoCE. Kluczowe etapy wdrażania obejmowały:

• Włączanie DCQCN (kwantyzowane powiadomienie o przeciążeniu centrum danych) w celu kontroli przeciążenia RoCE
• Partycjonowanie domen PFC (Priority Flow Control) w celu odizolowania ruchu związanego z pamięcią masową i szkoleniami AI
• Aktualizacja sieci szkieletowej do bezstratnej topologii typu „spine-leaf” Ethernet (próg bufora 25 ms)
• Wdrażanie NVMe-oF z RDMA w celu uzyskania dostępu do pamięci blokowej

Mechanizm odciążający ASAP² adaptera przetwarzał ponad 90 milionów pakietów na sekundę w węzłach magazynowania, całkowicie omijając procesor hosta przy przesyłaniu danych. TheMCX623106AN-CDAT Rozwiązanie w postaci karty adaptera Ethernetwłączyło także szyfrowanie in-line bez pogorszenia wydajności — jest to wymóg dla najemców usług finansowych dostawcy.

Po trzech miesiącach użytkowania produkcyjnego dostawca udokumentował znaczące ulepszenia:

TheMCX623106AN-CDAT Karta adaptera Ethernetrównież w pełni się sprawdziłKompatybilny z MCX623106AN-CDATz istniejącymi przełącznikami Cumulus Linux dostawcy i zapleczem Ceph BlueStore. Podczas wdrażania etapowego nie pojawiły się żadne konflikty sterowników ani oprogramowania sprzętowego.

To wdrożenie potwierdza, żeNVIDIA Mellanox MCX623106AN-CDATto nie tylko zwiększenie przepustowości — zasadniczo zmienia wydajność serwera poprzez RDMA/RoCE. Odciążając przetwarzanie sieciowe i włączając bezstratną sieć Ethernet, adapter zmniejszył opóźnienia w przechowywaniu danych pięciokrotnie, jednocześnie uwalniając rdzenie procesora na potrzeby obciążeń aplikacji. Do oceny menedżerów ITCena MCX623106AN-CDATi ROI, dostawca osiągnął zwrot kosztów zakupu sprzętu w ciągu siedmiu miesięcy dzięki zmniejszeniu liczby serwerów i niższym opłatom licencyjnym.

W miarę jak coraz więcej organizacji wdraża NVMe-oF, bezpośrednie RDMA GPU i mikrousługi,MCX623106AN-CDAT Adapter ConnectX Karta sieciowa PCIeoferuje sprawdzoną ścieżkę do centrów danych o małych opóźnieniach i dużej przepustowości. Ci, którzy szukająSprzedam MCX623106AN-CDATmożesz skontaktować się z autoryzowanymi dystrybutorami NVIDIA Mellanox. PełnySpecyfikacje MCX623106AN-CDATi przewodniki wdrażania są dostępne w oficjalnej wersjiKarta katalogowa MCX623106AN-CDAT.