• 2024-09-17【mechine learning-十-梯度下降-学习率】
    学习率学习率不同的学习率在梯度下降算法中,学习率的选择很重要,不恰当的选择,甚至可能导致损失发散,而非收敛,下面就看一下学习率的影响。学习率学习率是下图中的红框圈出来的部分,学习率是模型的超参数,输入模型用来更新权重,那么它的大小意味着什么呢?不同的学习率