1. 程式人生 > >深度學習5-4-9模型

深度學習5-4-9模型

池化 接口 進行 元素 3.5 結構 ping prop 輸入

引用:https://yq.aliyun.com/articles/603116

5步法:

  • 構造網絡模型
  • 編譯模型
  • 訓練模型
  • 評估模型
  • 使用模型進行預測

4種基本元素:

  • 網絡結構:由9種基本層結構和其他層結構組成
  • 激活函數:如relu, softmax。口訣: 最後輸出用softmax,其余基本都用relu
  • 損失函數:categorical_crossentropy多分類對數損失,binary_crossentropy對數損失mean_squared_error平均方差損失mean_absolute_error平均絕對值損失
  • 優化器:如SGD隨機梯度下降, RMSProp, Adagrad, Adam, Adadelta等

9種基本層網絡結構:

3種主模型:

  • 全連接層Dense,
  • 卷積層conv1d、conv2d,
  • 循環層lstm,gru

3種輔助層:

  • Activation層,
  • Dropout層,
  • 池化層

3種異構網絡互聯層:

  • 嵌入層:用於第一層,輸入數據到其他網絡的轉換
  • Flatten層:用於卷積層到全連接層之間的過渡
  • Permute層:用於RNN與CNN之間的接口

引用:https://yq.aliyun.com/articles/603116

深度學習5-4-9模型