码迷,mamicode.com
首页 > 其他好文 > 详细

记录训练损失的一些规律

时间:2018-07-18 10:14:40      阅读:646      评论:0      收藏:0      [点我收藏+]

标签:设置   oss   test   参数设置   小学   说明   记录   数据   瓶颈   

train loss 不断下降,test loss不断下降,说明网络仍在学习;

train loss 不断下降,test loss趋于不变,说明网络过拟合;

train loss 趋于不变,test loss不断下降,说明数据集100%有问题;

train loss 趋于不变,test loss趋于不变,说明学习遇到瓶颈,需要减小学习率或批量数目;

train loss 不断上升,test loss不断上升,说明网络结构设计不当,训练超参数设置不当,数据集经过清洗等问题。

记录训练损失的一些规律

标签:设置   oss   test   参数设置   小学   说明   记录   数据   瓶颈   

原文地址:https://www.cnblogs.com/liangzp/p/9327417.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!