作者markuschu (Markus_Chu)
看板Storage_Zone
標題[問題] 上萬個小檔移動至新SSD檔案大小暴增
時間Fri Jan 7 23:13:21 2022
各位大大好，
最近購買了新的外接SSD要淘汰舊的外接HDD，
舊的HDD上面有上萬個程式的log檔，檔案大小都只有幾kb，需要完整移動到新的外接SSD上。
但不管是用easeus或是直接copy paste檔案大小都會自己長大10倍以上，
甚至複製到一半會出現空間不足
（舊HDD只有500GB，新SSD有1TB格式皆為 exFAT）
請問各位大大有什麼辦法可以解決或是使用什麼方式能夠完整搬移這些檔案呢？（使用teracopy有幫助嗎？）
感謝大神幫助
https://i.imgur.com/4FJK15j.jpg
--
Sent from nPTT on my iPhone 12 mini
--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 49.158.76.225 (臺灣)
※ 文章網址: https://webptt.com/m.aspx?n=bbs/Storage_Zone/M.1641568403.A.AE0.html
1F：→ kyrc : exFAT 預設叢集 32KB，NTFS 預設叢集 4KB 01/07 23:20
3F：→ kyrc : 預設叢集會依磁碟大小變動，你的狀況會是128KB 01/07 23:23
5F：→ markuschu : 謝謝大大回覆 01/07 23:30
6F：→ markuschu : 所以我如果把SSD格式化成NTFS 單位大小改為4096位 01/07 23:30
7F：→ markuschu : 元組是否就能解決這個問題呢 謝謝！ 01/07 23:30
8F：推 cancelpc : （磁叢）單位變小，每個檔案浪費的就變小，但管理 01/07 23:37
9F：→ cancelpc : 用的table就需要比較大。 01/07 23:37
10F：→ cancelpc : 檔案離散率用重組沒效，不會減少浪費空間 01/07 23:39
11F：→ cancelpc : 類似出租每間4人房的，遇到5人就會需要兩間 01/07 23:39
12F：→ cancelpc : 但會有一間只住1人 01/07 23:40
13F：→ markuschu : 了解了解 感謝大神們的幫助！ 01/07 23:41
14F：推 cancelpc : 假設遇到100個訂房（檔案）的，最大就可能每個間（ 01/07 23:42
15F：→ cancelpc : 檔案）浪費3個床位 01/07 23:42
16F：推 cancelpc : 小檔案太多，浪費就越多。當然單位小，又碎片化， 01/07 23:44
17F：→ cancelpc : 讀取等效率差 01/07 23:44
18F：→ markuschu : 複製過去的檔案越小 差異越大 剛好要複製的檔東歐 01/07 23:46
19F：→ markuschu : 只有幾kb幾kb 完全了解了 感謝大大解惑 01/07 23:46
20F：推 cancelpc : NTFS的管理表格MFT有缺點，一旦表格長大就不會縮小 01/07 23:47
21F：推 cancelpc : FAT=File Alloc Tabel，是採度定大小制，格式時就決 01/07 23:52
22F：→ cancelpc : 定表格大小，也限制了 根(ROOT） 目錄最大檔案數 01/07 23:52
23F：→ cancelpc : 子目錄不受限 01/07 23:52
24F：推 cancelpc : 而一般碎片化用重組，會減少占用空間 01/07 23:54
25F：推 cancelpc : 類似200人的旅遊團，50間訂房散在不同樓層，或不照 01/07 23:56
26F：→ cancelpc : 順序，對傳統HDD（機械馬達）存取會慢 01/07 23:56
27F：→ cancelpc : 上面講的重組，不會省空間（打錯），只是會把檔案 01/07 23:57
28F：→ cancelpc : 的各片段集中一起 01/07 23:57
29F：推 filiaslayers: 如果你是用windows用VHD吧 01/08 00:07
30F：推 Litfal : 壓縮阿 log這種東西封存起來剛剛好 01/08 00:19
31F：→ Litfal : 不常存取就用7z用力壓，常存取就用zip還能虛擬目錄 01/08 00:20
32F：推 sppmg : 沒壓縮就壓一下，外加打包如 tar, iso 等等。 01/08 02:12
33F：→ sppmg : 如果是上萬不到 4K 小檔，打包比較實際。 01/08 02:14
34F：→ maniaque : single cluster size problem 01/08 09:00
35F：→ maniaque : 掛虛擬碟是一種方式 01/08 09:01
36F：推 skywgu : 遇到這種情況…當下沒人解說給我聽的話，我都直接gh 01/08 09:05
37F：→ skywgu : ost就對了…XD 01/08 09:05
38F：推 Deparic : 推c大解說，我還沒想過這麼精闢的譬喻方法XD 01/08 09:38
39F：→ thomaschion : 如果log很重要，放SSD風險比較大吧 01/10 16:48
40F：→ NingK : 看標題就知道一定是格式化磁區太大 01/12 00:26
41F：→ maniaque : FAT32/exFAT的cluster size 基本上偏大 01/12 09:40
42F：推 heroe : C大譬喻淺顯易懂 推一個 01/13 07:57