就是求一个函数的最小值问题。并且计算机不适合用解析解。我们可以从一个初始点出发，一步一步走到期望的最优点，这就要求求出每一步往哪里走，走多长，从而把这种优化问题分解成求方向和求步长两个问题，求步长的时...

佚名 2024-04-29 104次浏览

DeepLearning最优化方法之AdaGrad而本文要介绍的RMSProp优化算法是AdaGrad算法的一种改进。首先给出AdaGrad算法：再抛出原始的RMSProp算法:可以看出RMSProp...

佚名 2024-03-04 95次浏览