開始使用免費開始

進行一次反向傳播

在下圖的網路中,我們已經做過前向傳播,前向傳播計算出的節點數值以白色顯示。權重以黑色顯示。帶有問號之後的各層,顯示的是反向傳播計算出的斜率,而不是前向傳播的數值。這些斜率以紫色顯示。

此網路同樣使用 ReLU 啟用函式,因此對於任何輸入為正值的節點,其啟用函式斜率為 1。假設目前檢視的節點輸入為正(因此啟用函式的斜率為 1)。

Ch2Ex14_1

更新帶有問號之權重所需的斜率是多少?

Ch2Ex14_2

本練習屬於課程

Python 深度學習入門

檢視課程

動手互動練習

將理論付諸實踐,立即體驗我們的互動練習

開始練習