PTT數位生活區 / Storage_Zone (儲存裝置)

[問題] 跑程式的大量讀寫適合用SSD嗎?

看板Storage_Zone (儲存裝置)作者 (nex)時間4月前 (2023/12/07 23:47), 4月前編輯推噓22(22推 0噓 50→)
留言72則, 29人參與, 4月前最新討論串1/1
各位大大好， 小弟工作上需要跑商用分析軟體， 剛好有個案子模型比較大，跑一次都要五六個小時，產生的DATA約有10G多， 公司電腦的配置是SSD系統碟+HDD資料碟， 今天無意間發現把模型放在SSD系統碟跑的時候，竟然不到一個小時就跑完了!!! 才發現原來硬碟讀寫速度影響這麼大!!! 所以想以後也都這樣放在SSD碟跑分析了 但是因為是在系統碟，分析的讀寫還是會影響到一般系統操作的速度， 而且又因為是公司的電腦， 所以想問問看這樣頻繁大量的讀寫會不會影響SSD的壽命? 如果有差的話就考慮要跟公司申請個小一點的SSD分析碟來用了， 墾請各位大大幫忙解惑，感恩!! -- ※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 111.249.214.35 (臺灣) ※ 文章網址: https://www.ptt.cc/bbs/Storage_Zone/M.1701964074.A.AA7.html
推
12/07 23:50, 4月前 , 1F
買pchome能報帳的話去跟上面凹那顆P4510來用XDDDD
12/07 23:50, 1F
→
12/08 00:08, 4月前 , 2F
記憶體幾G，裝上64G系統可以快取更多資料
12/08 00:08, 2F
→
12/08 00:09, 4月前 , 3F
更不會系統為了不足的記憶體時常寫讀分頁檔到ssd
12/08 00:09, 3F
→
12/08 00:12, 4月前 , 4F
如果16G那一定不夠，32G勉強，64G比較不會碰分頁檔
12/08 00:12, 4F
有32G 目前速度我覺得OK了 我只是比較怕操爆系統SSD整台死掉XD ※ 編輯: nexsa (111.249.214.35 臺灣), 12/08/2023 00:16:47
推
12/08 00:20, 4月前 , 5F
我想說寫入量是有多大....正常SSD給的TBW就算你每天
12/08 00:20, 5F
→
12/08 00:20, 4月前 , 6F
寫入100G也遠遠用不完啦
12/08 00:20, 6F
→
12/08 00:20, 4月前 , 7F
讀取幾乎不影響壽命
12/08 00:20, 7F
→
12/08 00:22, 4月前 , 8F
不然健康度看crystal，掉到黃燈再來換新的
12/08 00:22, 8F
推
12/08 00:27, 4月前 , 9F
有專門大量讀寫用的ssd
12/08 00:27, 9F
→
12/08 00:27, 4月前 , 10F
壽命有一天可以全硬碟寫入1次以上
12/08 00:27, 10F
→
12/08 00:27, 4月前 , 11F
持續五年
12/08 00:27, 11F
推
12/08 00:32, 4月前 , 12F
介紹一下P5800X，給100DWPD，每天可以給你全碟寫入1
12/08 00:32, 12F
→
12/08 00:32, 4月前 , 13F
00次
12/08 00:32, 13F
推
12/08 00:35, 4月前 , 14F
Autobuy那片Optane 900P 480GB買下去就對了
12/08 00:35, 14F
推
12/08 04:26, 4月前 , 15F
這個外接ssd就搞定了，便宜的謝壞再買就好
12/08 04:26, 15F
推
12/08 05:55, 4月前 , 16F
看寫入量大量少，做ramdisk,速度快，也不用擔心寫
12/08 05:55, 16F
→
12/08 05:55, 4月前 , 17F
壞
12/08 05:55, 17F
→
12/08 05:58, 4月前 , 18F
看到了，10g多的話，做20g的ramdisk出來，讀寫都在
12/08 05:58, 18F
→
12/08 05:58, 4月前 , 19F
ramdisk上，也不用擔心寫壞了
12/08 05:58, 19F
→
12/08 06:50, 4月前 , 20F
產生 data 10G 多，運作中不知道要多少？
12/08 06:50, 20F
推
12/08 07:02, 4月前 , 21F
執行程式到一個段落用別的碟備份，頻繁讀寫工作碟
12/08 07:02, 21F
→
12/08 07:02, 4月前 , 22F
就別想這麽多
12/08 07:02, 22F
→
12/08 07:28, 4月前 , 23F
SSD就是買來用的
12/08 07:28, 23F
推
12/08 08:12, 4月前 , 24F
iops的差異ramdisk又比SSD快上幾百倍
12/08 08:12, 24F
→
12/08 09:17, 4月前 , 25F
好像很多人都不知道作業系統內部的file cache 機制,
12/08 09:17, 25F
→
12/08 09:17, 4月前 , 26F
奇怪ptt不是一堆年薪300工程師
12/08 09:17, 26F
→
12/08 09:35, 4月前 , 27F
若計算過程很多臨時檔，還是會爆快取，仍會讀寫磁碟
12/08 09:35, 27F
→
12/08 09:44, 4月前 , 28F
欸說錯，寫入臨時檔一定是寫到磁碟，爆快取決定在資
12/08 09:44, 28F
→
12/08 09:44, 4月前 , 29F
料有沒有馬上進下一步用到，還是程式先載入其他切塊
12/08 09:44, 29F
→
12/08 09:44, 4月前 , 30F
計算、產生更多臨時檔
12/08 09:44, 30F
推
12/08 10:46, 4月前 , 31F
目前看到處理這問題最好的大概就是VMware了
12/08 10:46, 31F
推
12/08 11:26, 4月前 , 32F
我模型都放ssd跑，都要2024了還在用hdd跑模型，跑
12/08 11:26, 32F
→
12/08 11:26, 4月前 , 33F
完都老了
12/08 11:26, 33F
→
12/08 11:26, 4月前 , 34F
手上的模型資料一百多G,用了3年的ssd還是很健康
12/08 11:26, 34F
→
12/08 11:47, 4月前 , 35F
公司跑模擬的電腦已經暴斃兩顆 A1000 ， 760 倒是
12/08 11:47, 35F
→
12/08 11:48, 4月前 , 36F
沒事還活著，太爛的 SSD 還是很容易葛屁的
12/08 11:48, 36F
推
12/08 12:11, 4月前 , 37F
效率差5、6倍，報給主管他還不讓你買新的？又不貴
12/08 12:11, 37F
推
12/08 12:18, 4月前 , 38F
當然適合
12/08 12:18, 38F
→
12/08 13:16, 4月前 , 39F
適合啊 顯卡買最頂的然後用HDD浪費時間？
12/08 13:16, 39F
→
12/08 15:06, 4月前 , 40F
Optane SSD
12/08 15:06, 40F
→
12/08 15:17, 4月前 , 41F
這個寫入量不用特別挑optane啊
12/08 15:17, 41F
→
12/08 15:18, 4月前 , 42F
速度快容量夠就好了 兩千塊一年換一條很好啊 說不定
12/08 15:18, 42F
→
12/08 15:18, 4月前 , 43F
你還操不壞他咧
12/08 15:18, 43F
推
12/08 15:28, 4月前 , 44F
寫入量可以實測~ 然後系統碟和工作碟最好分開
12/08 15:28, 44F
→
12/08 15:28, 4月前 , 45F
除非你的系統隨便重灌一下很快就能用
12/08 15:28, 45F
推
12/08 21:40, 4月前 , 46F
才10G叫大量讀寫？
12/08 21:40, 46F
感謝各位大大的回覆，小弟不是資訊專業，所以才來請益增進一下知識， 因為小弟工作上一般的模型頂多也才百來MB，這個專案上到10G算很多了， 所以覺得是很大量的讀寫@@ 小弟下周再來去找資訊討論看看是不是能申請個工作碟來用用， 再次感謝各位大大回覆解答! ※ 編輯: nexsa (111.249.214.35 臺灣), 12/08/2023 23:25:38
推
12/09 10:04, 4月前 , 47F
自有顆粒廠的買一買比較穩
12/09 10:04, 47F
→
12/09 21:07, 4月前 , 48F
10GB...我推薦可以的話這樣:
12/09 21:07, 48F
→
12/09 21:07, 4月前 , 49F
12/09 21:07, 49F
推
12/10 07:39, 4月前 , 50F
ram插到128g 放在ramdisk上跑就好了
12/10 07:39, 50F
推
12/10 17:59, 4月前 , 51F
推樓上
12/10 17:59, 51F
→
12/12 02:18, 4月前 , 52F
這種資料量用ramdisk or ramcache就好了
12/12 02:18, 52F
推
12/12 14:13, 4月前 , 53F
買個 1TB PCie4.0就夠讓你操好幾年的了
12/12 14:13, 53F
→
12/12 14:13, 4月前 , 54F
湯姆is瑪麗
12/12 14:13, 54F
→
12/12 18:53, 4月前 , 55F
用RAM disk豈不是飛天？
12/12 18:53, 55F
→
12/13 08:22, 4月前 , 56F
既然是公司電腦先能升級SSD再說吧
12/13 08:22, 56F
→
12/13 09:47, 4月前 , 57F
公司的當然買啊 又不是自己出錢
12/13 09:47, 57F
推
12/13 11:06, 4月前 , 58F
又不是所有公司提PR都會過，摳門的一大堆好嗎
12/13 11:06, 58F
推
12/14 20:36, 4月前 , 59F
DDR5 pc就可以裝256GB
12/14 20:36, 59F
→
12/15 13:29, 4月前 , 60F
樓上,要不要查一下 256GB DDR5 多少錢
12/15 13:29, 60F
→
12/15 13:30, 4月前 , 61F
組的起來的 DDR5 板子跟U又要多少錢
12/15 13:30, 61F
→
12/15 13:30, 4月前 , 62F
大概是一條 1TB PCI-ex4 SSD 貴幾倍???
12/15 13:30, 62F
→
12/15 13:31, 4月前 , 63F
然後能再精省的時間又是多少??? 要算 C/P 啊
12/15 13:31, 63F
→
12/15 13:31, 4月前 , 64F
算模型又不是換上 RAM disk 就好,cpu 呢????
12/15 13:31, 64F
推
12/15 13:46, 4月前 , 65F
結果用單線程算（誤
12/15 13:46, 65F
→
12/15 13:53, 4月前 , 66F
hwinfo有監控dram r/w bandwidth 如果偶爾衝很高 升
12/15 13:53, 66F
→
12/15 13:53, 4月前 , 67F
級高頻ddr5就蠻適合
12/15 13:53, 67F
→
12/15 13:56, 4月前 , 68F
表示算法優化很好 L3不夠用 會去大量讀寫dram
12/15 13:56, 68F
→
12/15 14:01, 4月前 , 69F
如果dram r/w最高才個位數g 升高頻記憶體c/p值就低
12/15 14:01, 69F
→
12/16 11:43, 4月前 , 70F
單線程也沒關係啊,早在二十幾年前就有多開實作了
12/16 11:43, 70F
→
12/16 11:45, 4月前 , 71F
那時學長算投影光,雙塞揚cpu,就同時開兩隻程式算
12/16 11:45, 71F
→
12/16 11:45, 4月前 , 72F
單thread 就是衝核心時脈而已
12/16 11:45, 72F
‣ 更多 nexsa 的文章
文章代碼(AID): #1bSUaggd (Storage_Zone)
Storage_Zone 近期熱門文章
更多 近期熱門文章 >>
PTT數位生活區 即時熱門文章
更多 即時熱門文章 >>
‣ 更多 nexsa 的文章
文章代碼(AID): #1bSUaggd (Storage_Zone)