AI圈报
产品发布 / 更新精选

面壁智能发布AI全自动预训练框架ForgeTrain,8小时追平Megatron-LM

信息来源:公众号:面壁智能(MiniCPM)·
原始标题:AI4AI 技术分享:面壁智能 ForgeTrain 如何 8 小时追平、2 天反超英伟达 Megatron-LM?

内容摘要

面壁智能发布全球首个完全由AI编写、无人类干预的生产级大模型预训练框架ForgeTrain。该框架针对特定模型和硬件从零自动"锻造"专用训练代码。基准测试显示,ForgeTrain在8小时内追平Megatron-LM,1.5至2天内实现稳定反超,模型FLOPS利用率提升约8%~10%,且可迁移至不同模型(MiniCPM4-0.5B/8B)和硬件(H100及昇腾NPU)。其采用四阶段Harness优化流程,全程自动判定。面壁智能将其工程思想概括为Forge Engineering。
内容层级精选情报
发布时间(北京时间)
本站收录时间(北京时间)
信息来源公众号:面壁智能(MiniCPM)
站内情报编号intel-5aef8e4764525ccd3bdcd40c