博客 > 人工智能&数据科学 > 通用算法和模型 > 最优化与回归
# 梯度下降法（最速下降法） ![77b56a936b9b612d5d32f0eb80d01fe0.png](/resources/65f3ca2e658b405db6313f4cb88c23d8) ![d3ca2c3d5ce7b299a549def8e39bf510.png](/resources/a53672f32fc8468b9b2943c049b4a159) ![628237dd67361a311f63b68d52d647ef.png](/resources/6ffbef2ee2b1489da7d8430aebf5e329) ## 随机梯度下降（SGD）与批量梯度下降（BGD） ![0fca131ad2d0657953fba48c6954977f.png](/resources/ac703fb83bc74e4db770df9776e655a2) ## 解线性回归问题 ![0d8fe0200959a87fbfe4d512d442e790.png](/resources/1bbc1cd0e2664b45a558188ab476207d) ![b75101e81fe72893e125b700e029f4ea.png](/resources/69dec0536659412fa774c348052a06ae)