小飞侠 - Megatron-DeepSpeed 的评论
type: channel
link: http://www.kexue.love/index.php/archives/311/
description: nvidia apex是什么APEX是什么 APEX是英伟达开源的，完美支持PyTorch框架，用于改变数据格式来减小模型显存占用的工具。 其中最有价值的是amp（Automatic Mixed...