标签：模型训练

来源：Datawhale公众号 爱 好奇 1天前 12浏览 0评论

关于作者：赵志民，Datawhale 成员，加拿大皇后大学博士，研究方向为代码智能与世界模型，个人主页：https://zhimin-z.github.io 如果你是第一次听说 RSI，这篇文章可以当作一份入门指南。我们会带大家把 RSI 从 0 理...

来源：鲜枣课堂公众号 爱 好奇 11个月前（12-01） 571浏览 0评论

大家都知道，AI计算（尤其是模型训练和推理），主要以并行计算为主。 AI计算中涉及到的很多具体算法（例如矩阵相乘、卷积、循环层、梯度运算等），都需要基于成千上万的GPU，以并行任务的方式去完成。这样才能有效缩短计算时间。 搭建并行计算框架，一般会用到...