Microsoft开源了零冗余优化器版本2(ZeRO-2)，这是一种分布式深度学习优化算法，可根据集群大小进行超线性扩展。与以前的分布式学习技术相比

分类：人工智能时间：2020-07-08点击阅读