梯度下降是机器学习 / 深度学习基础优化算法核心逻辑梯度是损失上升方向理解假如损失函数图像是一个抛物线其梯度就是导数导数为正抛物线上升参数沿负梯度移动降低损失依靠学习率控制步长迭代至损失收敛衍生 BGD/SGD/Mini-batch 三类实现Mini-batch 为工程首选Adam 等自适应优化器是梯度下降的改良版本解决固定学习率缺陷。
损失函数的优化-梯度下降法
发布时间：2026/7/2 4:54:50
梯度下降是机器学习 / 深度学习基础优化算法核心逻辑梯度是损失上升方向理解假如损失函数图像是一个抛物线其梯度就是导数导数为正抛物线上升参数沿负梯度移动降低损失依靠学习率控制步长迭代至损失收敛衍生 BGD/SGD/Mini-batch 三类实现Mini-batch 为工程首选Adam 等自适应优化器是梯度下降的改良版本解决固定学习率缺陷。
![华为OD机试2025C卷-字符串变换最小次数[100分]（ Java _ Python3 _ C++ _ C语言 _ JsNode _ Go）实现100%通过率](http://pic.xiahunao.cn/yaotu/华为OD机试2025C卷-字符串变换最小次数[100分]（ Java _ Python3 _ C++ _ C语言 _ JsNode _ Go）实现100%通过率)
![华为OD机试2025C卷-内存资源分配[100分]（ Java _ Python3 _ C++ _ C语言 _ JsNode _ Go）实现100%通过率](http://pic.xiahunao.cn/yaotu/华为OD机试2025C卷-内存资源分配[100分]（ Java _ Python3 _ C++ _ C语言 _ JsNode _ Go）实现100%通过率)
