即使J(,)=,也不能是完美估计,因为其他数据可能存在误差 取任何颜色并沿着“圆”走,就可以得到相同的成本函数值,右图三个点的J(,)相同 越靠近圆心,J(,)越小 梯度下降算法可以将代价函数J()最小化 . J(,)改变1,2来最小化J(,) 梯度下降算法不一定可以找到全局最小值 事实证明用于线性回归的代价函数,总是下图所示的这样一个弓形的样子. 对于线性回归的代价函数是没有局部最优解的,只有全局最优解 矩阵的维度:行数×列数 矩阵运算 矩阵和标量相加 : 矩阵里的每个 元素都要加上 这个标量…