ART-Optimized Megatron (AOM)：12倍更高的训练吞吐量

Weights & Biases 团队在其开源 ART 训练库中引入了 ART-Optimized Megatron (AOM)，实现了 12 倍更高的训练吞吐量。该优化基于 Megatron-LM 的分布式训练架构，结合 ART 的自动资源调度功能，显著提升了大规模模型训练效率。AOM 适用于需要高吞吐训练的场景，且 ART 训练库为开源，可直接用于实验和部署。