李宏毅机器学习（一补充）

李宏毅机器学习（一补充） 2023-04-02 289

一、课堂笔记

1.Error surface（误差曲面）

所谓的error surface其实就是通过尝试了不同的参数之后，计算出不同的loss，然后生成的等高线图。

2.参数的更新

深度学习和机器学习所做的事情其实都是寻找一组最佳的参数，使之可以很好的进行预测接下来的数据，使其loss最小。我们在寻找这组参数时一般使用-η∂L/∂w和-η∂L/∂b，其中我们为何在两个变化率前加负号呢？是因为我们在进行拟合的时候，我们需要最后的参数是最好的，最好的情况下函数斜率都最倾向于0，以w为例，当斜率为负，我们需要其增大，当期为正，我们需要其减小。