在LSTM模型中,训练损失先增加后减少

时间:2019-02-27 23:41:22

标签: matlab parameters lstm training-data loss-function

我正在使用LSTM训练模型,但是如图所示,它在训练开始时显示出越来越多的损失,我认为这在机器学习/深度学习算法中不是很正常(训练损失应该随着时期的增加而减少) 。另外,我的训练参数很低:

options = trainingOptions('adam', ...
    'MaxEpochs',50, ...
    'MiniBatchSize', 1, ...
    'InitialLearnRate', 0.01, ...
    'GradientThreshold', 1, ...
    'plots','training-progress', ...
    'Verbose',false);

enter image description here

0 个答案:

没有答案