[問題] Loss 大震盪的原因 ?
最近想用看看 Ranger optimizer
就用書上的一個比較簡單的例子來試試看
資料使用的是 Kaggle 的貓狗辨識然後簡單只使用貓狗前面各 2000 筆來做
( 1000筆 training 500筆 validation 500筆 testing )
利用簡單的 CNN 作為 model
詳細 code 如下
http://bit.ly/2PR5nSh
我的問題是，最後做出來的 Loss 震盪超級大，完全沒有收斂的現象
但是在 accuracy 上表現還算正常
我嘗試過調整 LR 到 0.000001 、也改過 optimizer ( adam 或是 rmsprop)
但都會是類似的現象
想請教前輩們，這樣的狀況可以怎麼做改善 ?
--
◤ ◤ ◣
● Ο ο ◤ ◣ ◣
◣ ◤ 。 ο ○ 。 ○ °●
◣ ≡ ◤ ° ο Ο ◣ ◤
◤ ◣ ≡ ◤
--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 220.136.149.147 (臺灣)
※ 文章網址: https://www.ptt.cc/bbs/DataScience/M.1576433393.A.510.html
※ 編輯: sssh (220.136.149.147 臺灣), 12/16/2019 02:10:25
→
12/17 10:31,
5年前
, 1F
12/17 10:31, 1F
推
12/17 11:38,
5年前
, 2F
12/17 11:38, 2F
DataScience 近期熱門文章
PTT數位生活區 即時熱門文章
