作者Fordevoted (最佳化)
看板DataScience
標題[問題] 顯存不足內存來湊
時間Thu Nov 29 21:31:49 2018
作業系統：windows10
使用工具：keras with tensorflow backend
問題內容：
因為gpu是940MX 顯存只有2G
最近train model 瘋狂遇上resourceExhaustederror
之前有聽說TF有顯存不足內存來補
但不知道Keras是否也能如此，爬了一些網上資料後卻好像沒有類似的說法
不知道版上大大們對於keras 使用TF backend調用內存是否有些頭緒
還是這類的補法終究只是都市傳說
小弟不勝感激
-----
Sent from JPTT on my Samsung SM-J710GN.
--
標題 [問卦] 有沒有被告白的八卦？
1F：→ mlien: 我被告白過 她說"請緊握扶手站穩踏階" 讓我好害羞
→ yspen: 上次有個女聲很親切的告訴我 先按解除鎖定 再按熱水
→ mausstin: 以為會被報警抓走
2F：→ nacy204327: 有時候本肥宅會魯到開Google翻譯我喜歡你 叫他唸出來
--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 140.115.142.88
※ 文章網址: https://webptt.com/m.aspx?n=bbs/DataScience/M.1543498316.A.C7C.html
※ 編輯: Fordevoted (140.115.142.88), 11/29/2018 21:34:39
3F：→ Mchord: 2G也只能跑入門範例吧，確定要做的話顯卡錢是最不能省的 11/29 21:46
4F：推 michellehot: 不能 雖然有share memory可用 但是tensorflow不支援 11/29 21:55
6F：推 michellehot: 因為activation和normalization也都會吃vram 11/29 22:07
7F：推 michellehot: 如果真的vram不足的話 調整batch size或是 11/29 22:08
8F：→ michellehot: 檢視一下model的效率 11/29 22:09
9F：推 michellehot: backend是用來檢視由keras建立的model下 11/29 22:11
10F：→ michellehot: 用到的記憶體量 11/29 22:12
11F：推 yoyololicon: 存錢買顯卡ㄅ 11/29 22:43
12F：推 yiefaung: 2G有點慘... 11/30 02:02
15F：→ yiefaung: trade-off一下 11/30 02:03
16F：→ zxp9505007: 還真的是都市傳說 11/30 13:02
17F：→ fo40225: TF>1.9.0 per_process_gpu_memory_fraction設大於1就行了 11/30 20:40
18F：→ fo40225: 代價是速度降1/10(1080ti) 940mx不知道會降多少 11/30 20:42
20F：→ fo40225: cuda-c-programming-guide/index.html#um-requirements 11/30 21:18
21F：→ fo40225: 還要compute capability>6 940mx無法使用 12/01 13:12
22F：推 f496328mm: 現在顯卡不貴八，1070也才1萬 12/02 01:39
23F：推 sma1033: 認真覺得如果連顯示卡都不想買還是別做了...工具是必要的 12/03 09:59
24F：推 chobit199685: 真的要跑大架構就買泰坦卡吧 12/10 02:08
25F：推 bor1286: 調batch size或使用data generation 12/12 22:53
26F：→ yoyololicon: 能不能調精度啊 用float16之類 12/13 12:58
27F：推 zxp9505007: 其實外接顯卡可以試試 真的不錯用 12/29 13:38