深度學習入門-基於Python的理論與實現 神經網絡

神經網絡

感知機和神經網絡

①階躍函數是指一旦輸入超過閾值，就切換輸出的函數。

激活函數

激活函數的作用在於決定如何來激活輸入信號的總和。

階躍函數的實現和顯示

下面的這個更簡單，直接一行代碼：np.array(x>0, dtype=np.int)

 sigmoid函數的實現與顯示

 階躍函數和sigmoid函數的比較

兩者都是非線性函數

神經網絡的激活函數必須使用非線性函數

ReLU函數

 

輸出層的設計

輸出層激活函數的選擇