1. 程式人生 > >【西瓜書 第5章】用例項理解神經網路前向傳播和反向傳播

【西瓜書 第5章】用例項理解神經網路前向傳播和反向傳播

感覺寫部落格編輯公式什麼的好麻煩~
因此就把學習記錄用筆記圖片的形式展現啦>_<

首先先了解一下梯度下降(emmm 不知道為什麼當時就寫斜了,就當活動脖子了hhh):
在這裡插入圖片描述

然後下面是一個三層的神經網路,每個神經元內部可以看作有兩部分組成,比如對於h1來說,包含neth1和outh1:
在這裡插入圖片描述

接下來,拋開單純的公式推導,我們用一個例項,來看看神經網路前向傳播和反向傳播的具體過程:
在這裡插入圖片描述
在這裡插入圖片描述
在這裡插入圖片描述
在這裡插入圖片描述
在這裡插入圖片描述


好啦,以上就是神經網路例項,把這個計算一遍以後,感覺會對神經網路的步驟更加清晰~ 再看《西瓜書》的推導什麼的,就容易多啦。