什么是MindSpore?
MindSpore是华为自研的一款支持端边云全场景的深度学习训练推理框架,主要应用于计算机视觉、自然语言处理等人工智能领域! 昇思MindSpore提供了多种高级特性来支撑大模型分布式训练,供用户根据自己的需求进行灵活组合。这节课中,我们会介绍常用的分布式并行训练技术,以及如何将并行技术应用到大模型训练。
MindSpore官网: https://www.mindspore.cn/

相关导航

JAX
JAX深度学习官网,Google开源的一个用于机器学习和科学计算的Python库GitHub is where over 100 million developers shape the future of software, together. Contribute to the open source community, manage your Git repositories, review code like a pro, track bugs and features, power your CI/CD and DevOps workflows, and secure code before you commit it.