训练,验证同步进行
参数没变，只是选择了训练中验证最好的模型，类似early stop
不同时行不行？不同时可能无法得到最优的step，有可能过拟合
# Related Post
1.内存/显存不够
2.early stop
3.调节学习率
4.权重初始化
5.Gradient Accumulation
6.loss不下降的解决方法
7.调参
8.优化算法
1.内存/显存不够
2.early stop
3.调节学习率
4.权重初始化
5.Gradient Accumulation
6.loss不下降的解决方法
7.调参
8.优化算法
