PTT數位生活區 / DataScience

[問題] 顯存不足內存來湊

看板DataScience作者 (最佳化)時間6年前 (2018/11/29 21:31), 6年前編輯推噓12(12推 0噓 13→)
留言25則, 10人參與, 5年前最新討論串1/1
作業系統：windows10 使用工具：keras with tensorflow backend 問題內容： 因為gpu是940MX 顯存只有2G 最近train model 瘋狂遇上resourceExhaustederror 之前有聽說TF有顯存不足內存來補 但不知道Keras是否也能如此，爬了一些網上資料後卻好像沒有類似的說法 不知道版上大大們對於keras 使用TF backend調用內存是否有些頭緒 還是這類的補法終究只是都市傳說 小弟不勝感激 ----- Sent from JPTT on my Samsung SM-J710GN. -- 標題 [問卦] 有沒有被告白的八卦？
→
,
我被告白過 她說"請緊握扶手站穩踏階" 讓我好害羞
→ yspen: 上次有個女聲很親切的告訴我 先按解除鎖定 再按熱水 → mausstin: 以為會被報警抓走
→
,
有時候本肥宅會魯到開Google翻譯我喜歡你 叫他唸出來
-- ※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 140.115.142.88 ※ 文章網址: https://www.ptt.cc/bbs/DataScience/M.1543498316.A.C7C.html ※ 編輯: Fordevoted (140.115.142.88), 11/29/2018 21:34:39
→
11/29 21:46, 6年前 , 1F
2G也只能跑入門範例吧，確定要做的話顯卡錢是最不能省的
11/29 21:46, 1F
推
11/29 21:55, 6年前 , 2F
不能 雖然有share memory可用 但是tensorflow不支援
11/29 21:55, 2F
→
11/29 21:55, 6年前 , 3F
11/29 21:55, 3F
推
11/29 22:07, 6年前 , 4F
因為activation和normalization也都會吃vram
11/29 22:07, 4F
推
11/29 22:08, 6年前 , 5F
如果真的vram不足的話 調整batch size或是
11/29 22:08, 5F
→
11/29 22:09, 6年前 , 6F
檢視一下model的效率
11/29 22:09, 6F
推
11/29 22:11, 6年前 , 7F
backend是用來檢視由keras建立的model下
11/29 22:11, 7F
→
11/29 22:12, 6年前 , 8F
用到的記憶體量
11/29 22:12, 8F
推
11/29 22:43, 6年前 , 9F
存錢買顯卡ㄅ
11/29 22:43, 9F
推
11/30 02:02, 6年前 , 10F
2G有點慘...
11/30 02:02, 10F
→
11/30 02:02, 6年前 , 11F
11/30 02:02, 11F
→
11/30 02:02, 6年前 , 12F
11/30 02:02, 12F
→
11/30 02:03, 6年前 , 13F
trade-off一下
11/30 02:03, 13F
→
11/30 13:02, 6年前 , 14F
還真的是都市傳說
11/30 13:02, 14F
→
11/30 20:40, 6年前 , 15F
TF>1.9.0 per_process_gpu_memory_fraction設大於1就行了
11/30 20:40, 15F
→
11/30 20:42, 6年前 , 16F
代價是速度降1/10(1080ti) 940mx不知道會降多少
11/30 20:42, 16F
推
11/30 21:18, 6年前 , 17F
11/30 21:18, 17F
→
11/30 21:18, 6年前 , 18F
cuda-c-programming-guide/index.html#um-requirements
11/30 21:18, 18F
→
12/01 13:12, 6年前 , 19F
還要compute capability>6 940mx無法使用
12/01 13:12, 19F
推
12/02 01:39, 6年前 , 20F
現在顯卡不貴八，1070也才1萬
12/02 01:39, 20F
推
12/03 09:59, 6年前 , 21F
認真覺得如果連顯示卡都不想買還是別做了...工具是必要的
12/03 09:59, 21F
推
12/10 02:08, 6年前 , 22F
真的要跑大架構就買泰坦卡吧
12/10 02:08, 22F
推
12/12 22:53, 6年前 , 23F
調batch size或使用data generation
12/12 22:53, 23F
→
12/13 12:58, 6年前 , 24F
能不能調精度啊 用float16之類
12/13 12:58, 24F
推
12/29 13:38, 5年前 , 25F
其實外接顯卡可以試試 真的不錯用
12/29 13:38, 25F
‣ 更多 Fordevoted 的文章
文章代碼(AID): #1R_-fCny (DataScience)
DataScience 近期熱門文章
更多 近期熱門文章 >>
PTT數位生活區 即時熱門文章
更多 即時熱門文章 >>
‣ 更多 Fordevoted 的文章
文章代碼(AID): #1R_-fCny (DataScience)