您好,欢迎访问这里是您的网站名称官网!
TAG标签

主页 > TAG标签 > 动量

[优化]几种常用的优化器2024-07-29
首先关于神经网络优化方面有很多优化器,搞得人头晕,而说实话,我本人并不喜欢优化器或复杂的学习率调节这个方向,因为我觉得他们都大同小异都是基于梯度,而所谓的性能不一样都是因为参数空间的形状(基于规则)和初始的选择(这不是摇骰子么),所以很多时...

平台注册入口