手寫數字識别

深度學習:

一、感覺器

S型神經元

sigmoid fuction:1/(1+exp(-z))

![image](https://yqfile.alicdn.com/2e0144aba1df89e4ad5437e51aa21abc052025e5.png)
           

二、神經網路

這是一個三層神經網絡

輸入層 隐藏層 輸出層

三、手寫數字識别神經網絡

一共四層神經網絡，第一層是以28*28灰階 784個神經元組成，第一隐藏層是15個神經元第二隐藏層是10個神經元用來輸出0-9數字，輸出層則是将輸出數字轉化成二進制。

利用cost function（代價函數）來檢驗其效率

利用梯度下降法,求得最優解

随機梯度下降（SGD）