两个要点,梯度下降法(Gradient Descent)和链式法则(Chain Rule)。目标是最小化损失函数,一轮一轮更新参数。通过拆解,更新参数分为2个部分,前向和后向传播过程,后向主要是因为输出层是确认的,一层一层往回计算。
[Read More]
2025年阅读书单
持续阅读
《如何找到想做的事》
[Read More]
《成功,动机与目标》
【美】海蒂·格兰特·霍尔沃森
初看名字还以为又是一碗鸡汤或是东拼西凑的方法论,看完发现很有收获。本书主要从心理学角度梳理了动机和目标的关系,提出了很多操作性很高的方法帮助我们实现自己的目标。我们所采取的每一个行动或者目标都是可以采用多种方式理解的,比如对于较为困难、生疏、复杂的目标,我们可以采用“是什么”的细节式思维模式,把注意力聚焦在细节上,这样更扎实地达到目标。而当我们需要做一些琐碎的小事时,可能会嫌烦拖延,这时可以采用“为什么”的抽象性思维模式,把一件小事跟更大的意义联系起来,以此获取更多动力。
[Read More]