英伟达：H100 GPU 在 MLPerf 基准测试中刷新纪录，3.9 分钟训练完 GPT-3

据 IT 之家 11 月 9 日消息，英伟达今天发布新闻稿，表示旗下的 H100 GPU 在 MLPerf 基准测试中创造了新记录。据悉，英伟达最新的 Eos AI 超级计算机配备了 10752 个 H100 Tensor Core GPU 和 NVIDIA 的 Quantum-2 InfiniBand 网络，训练完 GPT-3 仅仅只需要 3.9 分钟，比 6 月的测试结果整整快了 7 分钟。此外，英伟达在“系统扩展”方面也取得了进步，通过各种软件优化，效率提高到了 93%。