×
img

腾讯云:低门槛开发AI,全栈AI平台开发新体验

发布者:wx****de
2022-07-04
2 MB 22 页
人工智能(AI) 腾讯
文件列表:
腾讯云:低门槛开发AI,全栈AI平台开发新体验.pdf
下载文档
模型训练加速:通过fp16/XLA计算优化、通信优化、并行训练、显存优化等方法对模型训练进行加速,减少模型迭代周期,降低训练成本 计算优化/通信优化:自适应FP16/XLA混合加速、混合计算图机制、自适应梯度融合技术、 层级Topk通信压缩 并行训练/显存优化:混合并行技术、反向图显存优化技术、超大batchsize训练、自适应LR收敛策略

加载中...

本文档仅能预览20页

继续阅读请下载文档

网友评论>

开通智库会员享超值特权
专享文档
免费下载
免广告
更多特权
立即开通

发布机构

更多>>