学习率 2 篇文章

聚焦学习率预热、衰减策略、批量缩放等调度技术,结合不同优化器和模型规模讨论调度曲线的设计与适配方法。