目标函数、损失函数、代价函数
生活随笔
收集整理的這篇文章主要介紹了
目标函数、损失函数、代价函数
小編覺得挺不錯的,現在分享給大家,幫大家做個參考.
-
損失函數 (Loss function) ,是單個樣例 iii 的損失/誤差:
∣hθ(xi)?yi∣| h_{θ}(x^i) - y^i |∣hθ?(xi)?yi∣
-
代價函數 (Cost function) ,是對數據集整體的誤差描述,也就是損失函數的總和的平均,有沒有這個平均其實不會影響最后的參數的求解結果:
12m∑i=1m(hθ(x(i))?y(i))2\frac{1}{2m} \sum_{i=1}^{m} (h_{θ}(x^{(i)}) - y^{(i)})^{2}2m1?i=1∑m?(hθ?(x(i))?y(i))2
-
目標函數(Object Function),為了避免過擬合或者進行一些特殊目的約束(Constraint),一般會在代價函數的后面加上正則化項:
12m∑i=1m(hθ(x(i))?y(i))2+正則化項\frac{1}{2m} \sum_{i=1}^{m} (h_{θ}(x^{(i)}) - y^{(i)})^{2} + 正則化項2m1?i=1∑m?(hθ?(x(i))?y(i))2+正則化項
總結
以上是生活随笔為你收集整理的目标函数、损失函数、代价函数的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: Light-Head R-CNN
- 下一篇: 学习速率 learning rate