研究者发布LM-SimBench训练模拟评测基准

Yu Dong 等研究者发布 LM-SimBench，这是一个用于评测大语言模型训练模拟器的统一框架、数据集与基准，结果发表于 arXiv。 该工作在华为昇腾（Ascend）NPU 集群上剖析来自 10 个稠密与 MoE 模型族的 23 种模型配置，生成包含 348 种可行配置的数据集，覆盖五个并行维度与激活重计算。对代表性训练模拟器的评测表明其可支持预测精度比较与误差诊断；GPU 与 NPU 的匹配实验验证了该基准的跨平台适用性。

AI 根据报道生成 · 1 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。