神經網絡的特徵就是可以從數據中學習。所謂“從數據中學習”，是指可以由數據自動決定權重參數的值。這是非常了不起的事情！因爲如果所有的參數都需要人工決定的話，工作量就太大了。
代價函數
參數選得好不好，那就要看代價函數，我們通過不斷嘗試不同的參數，使得代價函數儘量最小，這個代價函數可以使用任意函數，但一般用均方誤差和交叉熵誤差等
代價函數是表示神經網絡性能的“惡劣程度”的指標，即當前的
神經網絡對監督數據在多大程度上不擬合，在多大程度上不一致。
我們需要求出代價函數的最低點（也就是參數值），或者是局部最低點