mxnet常规优化器用法

11年it研发经验，从一个会计转行为算法工程师，学过C#，c++，java，android，php，go，js，python，CNN神经网络，四千多篇博文，三千多篇原创，只为与你分享，共同成长，一起进步，关注我，给你分享更多干货知识!

adam优化器：

      weight_decay=5e-4
      adam_lr=0.01
      optimizer = mx.optimizer.Adam(learning_rate=adam_lr, wd=weight_decay)
  
 

      wd = 0.0005
         opt = optimizer.SGD(learning_rate=lr,
       momentum=0.9,
       wd=wd,
       rescale_grad=1.0 / len(ctx),
       clip_gradient=None)
  
 

文章来源: blog.csdn.net，作者：网奇，版权归原作者所有，如需转载，请联系作者。

原文链接：blog.csdn.net/jacke121/article/details/116212741