線性回歸
- 線性回歸只有一個最小值,也就是只有全局最小值,沒有局部值。
- 代價函數(shù)(Cost Function)是預測與實際值之間的關系,如果某組數(shù)據(jù)的代價函數(shù)值為0,那么這個點恰好落在了函數(shù)圖線上。
- 預測函數(shù)(Hypothesis Function): h(θ) = θ1x+θ0
計算公式
1.計算的時候注意矩陣的維度!
2.乘法除法注意標量還是向量!
- h(θ) = θ1x+θ0
** θ0 -= J(θ)Xi
θ1 -= J(θ)*
theta -= alpha*1/m*(theta*X-y)*X
Octave/Matlab 公式
theta -= alpha*(1/m)*sum((X*theta-y).*X)';