计算训练开始和结束时的损失
作者: rasbt创建于 2024年4月1日更新于 2026年5月23日
标签enhancement
我曾与一些用户交谈,他们感到有些困惑/惊讶,因为在运行过程中没有计算验证损失。如果您的训练步骤小于默认的 `eval.interval=100`,这确实是一个合理的问题。我认为解决这个问题的最佳方法是始终在每次训练运行的开始和结束时计算验证损失。这些也可以作为一般的有用参考点。
内容来源: Lightning-AI/litgpt
我曾与一些用户交谈,他们感到有些困惑/惊讶,因为在运行过程中没有计算验证损失。如果您的训练步骤小于默认的 `eval.interval=100`,这确实是一个合理的问题。我认为解决这个问题的最佳方法是始终在每次训练运行的开始和结束时计算验证损失。这些也可以作为一般的有用参考点。
内容来源: Lightning-AI/litgpt