英伟达官方报告:训练一个 1.8 万亿个参数的模型以前需要8000 个 Hopper GPU 和 15 兆瓦的电力。如今,Nvidia 首席执行官表示,2000 个 Blackwell GPU 就能完成这项工作,耗电量仅为4 兆瓦
新GPU包含了3个芯片,从8000降到2000大概提升4倍
耗电从15MW降到4MW,提升不到4倍
发布于 2024-03-19 19:28・IP 属地广东
英伟达官方报告:训练一个 1.8 万亿个参数的模型以前需要8000 个 Hopper GPU 和 15 兆瓦的电力。如今,Nvidia 首席执行官表示,2000 个 Blackwell GPU 就能完成这项工作,耗电量仅为4 兆瓦
新GPU包含了3个芯片,从8000降到2000大概提升4倍
耗电从15MW降到4MW,提升不到4倍