Advertisement

神经网络中的梯度下降: Gradient Descent.

阅读量:

1 什么是梯度下降

梯度下降算法能够实现对神经网络中成本函数的反向传播过程,通过持续的迭代运算,对权值w与偏置b进行动态调整,从而定位损失函数的最小值点,进而提升模型的整体性能。

成本函数存在多种类型,此处不作具体阐述,仅作简要标记为

J

在此处将输入X作为模型的输入进行处理,

lpha

这是模型完成训练过程之后所产生的结果。

y

作为规范性答案,模型训练的目标在于促使输出结果的生成。

![\alpha](https://ad.itadn.com/c/weblog/blog-img/images/2025-05-31/vnBzHQpoyV0E8uLX6GrI

全部评论 (0)

还没有任何评论哟~