Supermicro Gold Series GPU-server

Supermicro AS-8126GS-NB3RT met NVIDIA HGX B300 en AMD EPYC

Maximale GPU-rekenkracht voor generatieve AI, large language models,
deep learning, high-performance computing en omvangrijke
data-analyses.

Liever een vergelijkbaar NVIDIA HGX B300-platform met
Intel Xeon-processoren?
Bekijk dan ook de

Supermicro SYS-822GS-NB3RT
.

Een complete AI-infrastructuur op basis van AMD EPYC

De Supermicro AS-8126GS-NB3RT is ontwikkeld voor organisaties
die zeer omvangrijke AI-modellen willen trainen, complexe
simulaties uitvoeren of grote hoeveelheden data analyseren.

Het systeem combineert een NVIDIA HGX B300-platform met acht
SXM-GPU’s en twee krachtige AMD EPYC 9005- of
9004-processoren.

Via NVIDIA NVLink en NVSwitch werken de acht GPU’s samen als
één krachtige rekenomgeving. Hierdoor kunnen omvangrijke
datasets en AI-modellen efficiënt over de GPU’s worden verdeeld.


NCS International configureert het complete systeem op basis
van jouw AI-workload, softwareomgeving, opslagbehoefte,
netwerkarchitectuur en datacenterinfrastructuur.

Supermicro AS-8126GS-NB3RT 8U GPU-server met NVIDIA HGX B300

NVIDIA HGX B300 voor grootschalige AI

De AS-8126GS-NB3RT bevat een NVIDIA HGX B300-platform met acht
NVIDIA B300 SXM-GPU’s. Iedere GPU beschikt over 288 GB
HBM3e-geheugen.

Daarmee heeft het complete systeem ongeveer 2,3 TB snel
GPU-geheugen. Dit maakt het platform geschikt voor omvangrijke
taalmodellen, generatieve AI, deep-learningtraining en complexe
inference-workloads.

De GPU’s zijn onderling verbonden via de vijfde generatie
NVIDIA NVLink en NVSwitch. De GPU-naar-GPU-bandbreedte bedraagt
maximaal 1,8 TB per seconde.

GPU-platform

NVIDIA HGX B300

  • Acht NVIDIA B300 SXM-GPU’s
  • 288 GB HBM3e-geheugen per GPU
  • Ongeveer 2,3 TB GPU-geheugen per systeem
  • Vijfde generatie NVIDIA NVLink
  • NVIDIA NVSwitch-architectuur
  • Geschikt voor AI-training en inference

Processorplatform

Dual AMD EPYC

  • Twee AMD EPYC 9005- of 9004-processoren
  • Tot maximaal 384 cores en 768 threads
  • Ondersteuning voor processors tot 500 watt TDP
  • Grote geheugen- en I/O-bandbreedte
  • Geschikt voor zwaar parallelle workloads
  • Afgestemd op AI-, HPC- en data-analyses

Tot 6 TB DDR5-systeemgeheugen

Het systeem beschikt over 24 DIMM-slots en ondersteunt maximaal
6 TB ECC DDR5 RDIMM-geheugen.

In combinatie met AMD EPYC 9005-processoren kan het geheugen
een snelheid tot 6400 MT/s bereiken. Bij AMD EPYC 9004-processoren
ondersteunt het systeem maximaal 4800 MT/s.

De uiteindelijke geheugenconfiguratie stemmen we af op de omvang
van de datasets, de gebruikte AI-software en de verhouding tussen
CPU- en GPU-verwerking.

AMD EPYC 9005

Tot 6400 MT/s

  • 24 DDR5 DIMM-slots
  • Tot maximaal 6 TB ECC DDR5 RDIMM
  • Geheugensnelheid tot 6400 MT/s
  • Hoge bandbreedte voor AI- en HPC-workloads
  • Configuratie afgestemd op dataset en toepassing

AMD EPYC 9004

Tot 4800 MT/s

  • Ondersteuning voor EPYC 9004-processoren
  • Tot maximaal 6 TB ECC DDR5 RDIMM
  • Geheugensnelheid tot 4800 MT/s
  • Geschikt voor bestaande AMD EPYC-omgevingen
  • Flexibele CPU- en geheugenkeuze

Zeer snelle netwerkverbindingen voor AI-clusters

Bij grootschalige AI is niet alleen GPU-rekenkracht belangrijk.
Ook datasets, modelparameters en rekenresultaten moeten met zeer
hoge snelheid tussen servers en opslagplatforms worden uitgewisseld.

Daarom beschikt de AS-8126GS-NB3RT over acht NVIDIA ConnectX-8
SuperNICs met OSFP-aansluitingen en een snelheid tot 800 Gb/s
per aansluiting.

Daarnaast kunnen maximaal twee dual-port NVIDIA BlueField-3 DPU’s
worden toegepast. Hiermee kunnen netwerk-, beveiligings- en
infrastructuurtaken gedeeltelijk van de hoofdprocessors worden
overgenomen.

High-speed netwerk

NVIDIA ConnectX-8

  • Acht OSFP-netwerkpoorten
  • Tot 800 Gb/s per aansluiting
  • Twee geïntegreerde 10 GbE RJ45-poorten
  • Geschikt voor schaalbare AI-clusters
  • Hoge bandbreedte tussen compute en storage

Data Processing Units

NVIDIA BlueField-3

  • Ondersteuning voor maximaal twee dual-port DPU’s
  • Offloading van netwerkverwerking
  • Ondersteuning voor infrastructuurbeveiliging
  • Vermindert de belasting van de hoofdprocessors
  • Geschikt voor moderne AI-datacenters

Snelle NVMe-opslag voor datasets en modellen

Aan de voorzijde bevinden zich acht hot-swap E1.S
NVMe-drivebays. Hierin kunnen snelle enterprise-NVMe-drives
worden geplaatst voor datasets, modellen, tijdelijke bestanden
en lokale cache.

Voor het besturingssysteem zijn daarnaast twee interne
M.2 NVMe-slots beschikbaar. Zo kunnen de bootomgeving en
de lokale dataopslag fysiek van elkaar worden gescheiden.

Dataopslag

E1.S NVMe

  • Acht hot-swap E1.S NVMe-drivebays
  • Snelle toegang tot omvangrijke datasets
  • Geschikt voor modellen en lokale cache
  • Drives vervangbaar zonder systeemuitschakeling
  • Enterprise-NVMe-configuraties mogelijk

Bootopslag

M.2 NVMe

  • Twee interne M.2 NVMe-slots
  • M-key-aansluiting
  • Geschikt voor het besturingssysteem
  • Boot- en dataopslag fysiek gescheiden
  • Redundante configuratie mogelijk

Uitbreidingsmogelijkheden

Naast het geïntegreerde GPU- en netwerkplatform beschikt de server
over twee PCIe 5.0 x16 FHHL-uitbreidingsslots.

Deze kunnen worden gebruikt voor aanvullende netwerk-, opslag-
of acceleratiekaarten, afhankelijk van de uiteindelijke configuratie
en toepassing.

PCI Express 5.0

  • Twee PCIe 5.0 x16 FHHL-slots
  • Hoge I/O-bandbreedte
  • Geschikt voor aanvullende netwerkkaarten
  • Geschikt voor storage- en acceleratiekaarten
  • Flexibel af te stemmen op de infrastructuur

Aansluitingen

  • Eén USB 3.0 Type-A-poort aan de voorzijde
  • Eén USB 2.0 Type-A-poort aan de voorzijde
  • Eén VGA-aansluiting
  • Eén mini-DisplayPort
  • Twee 10 GbE RJ45-netwerkaansluitingen

Gebouwd voor continu bedrijf in het datacenter

Het 8U-rackmountchassis is uitgerust met maximaal twaalf
heavy-duty ventilatoren met automatische snelheidsregeling.

De voeding bestaat uit zes hot-swap voedingsmodules van maximaal
6.600 watt, uitgevoerd in een redundante 3+3-opstelling.
De Titanium-level voedingen bieden een efficiëntie tot 96 procent.

De daadwerkelijke voedingsredundantie is afhankelijk van de gekozen
configuratie en de belasting van de toepassing.

Koeling

Heavy-duty ventilatoren

  • Maximaal twaalf systeemventilatoren
  • Automatische regeling van de ventilatorsnelheid
  • Monitoring van toerental en temperatuur
  • Ontworpen voor zeer hoge GPU-belasting
  • Geschikt voor continu datacentergebruik

Voeding

Redundante 3+3-opstelling

  • Zes hot-swap voedingsmodules
  • Maximaal 6.600 watt per voeding
  • Redundante 3+3-configuratie
  • Titanium-efficiëntieniveau tot 96%
  • Afstemming op configuratie en applicatiebelasting

Beveiliging en systeembeheer

De AS-8126GS-NB3RT beschikt over moderne beveiligingsfuncties
voor firmware, hardware en beheer.

Silicon Root of Trust, Secure Boot, ondertekende firmware,
automatische firmwareherstelmogelijkheden en TPM 2.0 helpen
het systeem te beschermen tegen ongeautoriseerde wijzigingen.

Hardwarebeveiliging

  • Trusted Platform Module 2.0
  • Silicon Root of Trust
  • NIST 800-193-compliant
  • Secure Boot
  • Cryptografisch ondertekende firmware

Beheer en herstel

  • Secure firmware updates
  • Automatisch firmwareherstel
  • Remote attestation
  • Runtime BMC-beveiliging
  • Supermicro systeembeheersoftware

Toepassingen

AI en data-analyse

  • Generatieve AI
  • Large language models
  • Conversational AI
  • Deep-learningtraining
  • AI-inference
  • Business intelligence en analytics

Onderzoek en industrie

  • High-performance computing
  • Wetenschappelijk onderzoek
  • Medicijnontwikkeling
  • Fraudedetectie
  • Financiële modellering
  • Autonome voertuigtechnologie

Belangrijkste technische specificaties

Model Supermicro AS-8126GS-NB3RT
Productserie Supermicro Gold Series
Formaat 8U rackmount
Moederbord Supermicro H14DSG-OM
GPU-platform NVIDIA HGX B300 met acht SXM-GPU’s
GPU-geheugen 288 GB HBM3e per GPU, ongeveer 2,3 TB totaal
GPU-interconnect NVIDIA NVLink met NVSwitch
Processors Twee AMD EPYC 9005- of 9004-processoren
Maximaal aantal cores Tot 384 cores en 768 threads
Maximale CPU-TDP Tot 500 watt per processor
Werkgeheugen 24 DDR5 DIMM-slots, maximaal 6 TB
Geheugensnelheid EPYC 9005 Tot 6400 MT/s
Geheugensnelheid EPYC 9004 Tot 4800 MT/s
High-speed netwerk Acht OSFP 800 GbE-aansluitingen
Overig netwerk Twee 10 GbE RJ45-aansluitingen
DPU-ondersteuning Maximaal twee dual-port NVIDIA BlueField-3 DPU’s
Datadrives Acht hot-swap E1.S NVMe-drivebays
Bootdrives Twee interne M.2 NVMe-slots
Uitbreiding Twee PCIe 5.0 x16 FHHL-slots
Koeling Maximaal twaalf heavy-duty ventilatoren
Voeding Zes redundante 6.600 watt Titanium-voedingen, 3+3
Afmetingen 356 × 449 × 950 mm
Nettogewicht Circa 119 kg
Kleur Zilver

Waarom deze AMD GPU-server via NCS International?

Een GPU-platform van dit formaat is geen standaardserver.
De prestaties worden bepaald door de combinatie van GPU’s,
processors, systeemgeheugen, NVMe-opslag, netwerkarchitectuur,
voeding, koeling en software.

NCS International helpt bij het ontwerpen en leveren van
een complete configuratie die is afgestemd op de beoogde
AI-, data-analyse- of HPC-workload.

  • Configuratie op basis van jouw workload
  • Advies over AMD EPYC-processoren
  • Afstemming van CPU-, GPU- en geheugenverhoudingen
  • Selectie van enterprise-NVMe-opslag
  • Advies over 400 en 800 GbE-netwerken
  • Ondersteuning bij voeding, koeling en rackintegratie
  • Levering, assemblage en technische controle


Neem contact met ons op voor een configuratievoorstel,
beschikbaarheid of technisch advies.

Vraag een configuratie aan

Supermicro AS-8126GS-NB3RT met AMD EPYC en NVIDIA HGX B300

Veelgestelde vragen

Wat is het verschil met de SYS-822GS-NB3RT?

De AS-8126GS-NB3RT gebruikt twee AMD EPYC 9005- of
9004-processoren. De SYS-822GS-NB3RT is gebaseerd op
Intel Xeon-processoren. Beide systemen gebruiken het
NVIDIA HGX B300 8-GPU-platform.

Hoeveel GPU-geheugen heeft dit systeem?

Iedere NVIDIA B300 GPU beschikt over 288 GB HBM3e-geheugen.
Met acht GPU’s heeft het systeem in totaal ongeveer
2,3 TB GPU-geheugen.

Hoeveel processorkernen ondersteunt het systeem?

Afhankelijk van de gekozen AMD EPYC-processoren ondersteunt
het systeem maximaal 384 cores en 768 threads.

Hoeveel systeemgeheugen kan worden geplaatst?

Het systeem beschikt over 24 DIMM-slots en ondersteunt
maximaal 6 TB ECC DDR5 RDIMM-geheugen.

Kan deze server worden opgenomen in een groter AI-cluster?

Ja. Met acht NVIDIA ConnectX-8 SuperNICs tot 800 Gb/s
kan het systeem worden gekoppeld aan andere GPU-nodes,
snelle opslagplatforms en een high-speed datacenternetwerk.

Ondersteunt het systeem NVIDIA BlueField-DPU’s?

Ja. Het systeem ondersteunt maximaal twee dual-port
NVIDIA BlueField-3 DPU’s voor onder andere netwerkoffloading,
infrastructuurbeheer en beveiliging.

Levert NCS een complete configuratie?

Ja. NCS kan het systeem configureren met AMD EPYC-processoren,
werkgeheugen, NVMe-opslag, netwerkcomponenten en aanvullende
hardware op basis van de gewenste workload.

NCS International

Den Sliem 89
7141 JG Groenlo
The Netherlands
+31 544 470 000
info@ncs.nl