Куда едет ИТ мир? В сторону 400G и NVIDIA H100
Для лиги лени: интерфейсы 400G (четыреста гигабит) и сопутствующие мощности постепенно становятся новой нормой.
На днях вышел интересный документ:
TECHNICAL WHITE PAPER, September 2025, Deploy VMware Private AI on HGX servers with Broadcom Ethernet Networking
или, в русском переводе:
Развертывание VMware Private AI на серверах HGX с использованием Broadcom Ethernet Networking
Интересное в нем для меня:
Сетевые карты: 8x Thor2: P1400GD 57608 400 Gb/s per server
Коммутаторы: UfiSpace S9321-64E F2B. Я про UfiSpace и не слышал никогда в контексте коммутаторов. 5G не моя тема.
Видеокарты: clustered NVIDIA H100 GPUs
Рекомендуют настраивать BIOS на режим производительности
Performance Per Watt (OS) is the recommended system power profile setting (Figure 3). HPE servers have a similar profile setting. Once this is set, choose High Performance for ESXi power management
Результаты тестов откровенно радуют:
we conducted an RDMA performance test using Thor2 adapters between two VMs. The results showed Ethernet throughput of approximately 392 Gb/s, which corresponds to the maximum achievable RoCEv2 line rate with a 4K MTU.
This value accounts for the protocol overhead introduced by Ethernet, IP, UDP, and RoCEv2 headers, so the measured rate represents either the theoretical peak or is within 1–2 Gb/s of it for this configuration.
Дороговато, конечно, особенно VCF 9, но альтернатив пока не видно
@editors, У меня как обычно не добавляются теги - например, Broadcom или VCF