BatchNorm层【对数据进行归一化】
位置:
全连接层:仿射变换与激活函数之间 卷积层:卷积层后与激活函数之前作用:
①加快收敛速度;
②防止梯度爆炸/梯度消失
③防止过拟合
标签:函数,卷积,梯度,归一化,激活,BatchNorm From: https://www.cnblogs.com/RuChenii/p/17551835.html
BatchNorm层【对数据进行归一化】
位置:
全连接层:仿射变换与激活函数之间 卷积层:卷积层后与激活函数之前作用:
①加快收敛速度;
②防止梯度爆炸/梯度消失
③防止过拟合
标签:函数,卷积,梯度,归一化,激活,BatchNorm From: https://www.cnblogs.com/RuChenii/p/17551835.html