ASTRA-sim2.0: 为大型模型的大规模训练建模分层网络和分解系统
ASTRA-sim 是一个分布式 AI 系统模拟器。它模拟了现代 AI 系统的端到端软件和硬件堆栈 - 包括工作负载调度、集群通信算法和硬件架构(计算/内存/网络)。通过一系列 API,它支持外部开放/专有组件的即插即用,用于模拟 AI 系统的不同部分。这为下一代分布式 AI 系统的设计和部署提供了端到端的多层模拟能力。
若要全面了解该工具,并深入了解其功能,请访问我们的 网站。
暂无开放 Issues,或尚未同步最近议题。