作者LonyIce (耀西)
看板Free_box
標題[問題] Google 雲端硬碟這樣搬會不會比較快？
時間Sun Mar 27 10:29:40 2022
我 Google 雲端硬碟搬家，教育逃到企業
因為攝影、錄影工作，檔案大又多
大家不推薦內建的搬家是因為容易漏檔案
所以都推薦 rclone
但我的檔案多，每天傳輸流量也有 750 gb 的上限，這樣想想可能要花上 20 天以上。
那如果我用內建的搬家先搬（不用管流量問題），然後再用 rclone 檢查檔案是否遺失，這
樣搬家時間是不是有機會壓縮到 10 天以內呢？
這樣的方法是否可行？還是會有什麼問題呢？謝謝各位。
--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 49.217.64.6 (臺灣)
※ 文章網址: https://webptt.com/m.aspx?n=bbs/Free_box/M.1648348182.A.FEF.html
1F：→ iamdco: 不會比較快，要快就是用 rclone move 沒有流量750gb限制。 03/27 10:57
2F：→ ddir: 內建的搬家很垃圾 03/27 12:11
3F：推 Aaso: 買nas下載下來吧 不然你之後又要逃難 03/27 15:00
4F：→ Aaso: nas有內建可以下載雲端硬碟功能 03/27 15:00
5F：推 l98: 然後 NAS 中標被鎖檔案 XD 用 NAS 真的很需要資安知識。 03/27 15:17
6F：推 Godist: A move to A_TD(以A授權的共用雲端硬碟)，B_TD move to B 03/27 15:37
7F：→ Godist: ，如果TD是企業版的，也可以省略第二步，最多兩個步驟搞定 03/27 15:37
8F：→ Godist: ，也不用管750G的上傳限制，但建議檔案不要超過40萬個 03/27 15:37
9F：推 Banrin: 用vps可以離線抓吧 03/27 18:37
10F：推 Banrin: google傳google也可以用rclone吃google那邊的備份傳，有點 03/27 18:51
11F：→ Banrin: 像加入我的雲端硬碟那樣 那個傳蠻快的 03/27 18:51
12F：→ lonewind220: 只推用團隊盤做權限轉移 03/27 19:41
13F：推 maska: 提供三個方法 03/27 20:00
14F：→ maska: 1.rclone drive server side copy 03/27 20:00
15F：→ maska: 2.用sa+icopy或百寶箱 03/27 20:00
16F：→ maska: 3.google colab掛載，用move/copy/sync指令搬 03/27 20:00
17F：→ LonyIce: Nas有了~雲端是備份~ 目前是用 rclone drive server side 03/27 22:54
18F：→ LonyIce: 但每天都要開半天以上，速度有點慢~ 團隊盤有點看不太懂 03/27 22:54
19F：→ LonyIce: 每個人的介紹... 我再研究一下 03/27 22:55
20F：推 lux2668: rclone drive server side copy，每天只能2T 03/27 23:08
21F：推 rick65134: rclone move 有一定的機率死檔 檔案真的就消失了 哭哭 03/28 09:44
22F：→ rick65134: 其實最佳解是請學校網管幫你把資料夾移動到TD內 03/28 09:46
23F：→ rick65134: 但我裡面太多不能說的東西了 所以只好自己慢慢來... 03/28 09:46
24F：推 Arabella: 樓上方式之外有問過計算中心，申請加入服務管理員即可官 03/28 09:48
25F：→ Arabella: 方內建自行一鍵移動 03/28 09:48
26F：推 rick65134: "申請加入服務管理員" 計中會有這麼好心幫你加嗎?? 03/28 09:49
27F：推 Arabella: 我都加完搬完了，自己的計中自己問，推文能加嗎？ 03/28 11:40
28F：→ tinlans: 提醒一下檔案多的話其實用內建的去搬整個資料夾也會掉檔 03/28 13:42
29F：推 rick65134: 之前就有聽說內建的掉檔嚴重 而且不能暫停... 03/28 14:00
30F：→ Godist: 怎麼還有人搬家推用SA或跑Server Side Copy，那是備份在用 03/28 23:19
31F：→ Godist: 的，搬家跑server side move最快，別再誤導人了 03/28 23:19
32F：→ LonyIce: 這兩個指令主要有什麼差別呢？我看網路都教 copy 03/29 02:47
33F：推 Arabella: 官方內建會掉很多且無紀錄可以查，但我腦補還是有在效 03/29 04:44
34F：→ Arabella: 驗的 因為沒成功過幾天檔案會自己出現原雲端。我失敗大 03/29 04:44
35F：→ Arabella: 多是遊戲光碟整盤裸備份沒壓縮；另一是一資料夾內有上千 03/29 04:44
36F：→ Arabella: 個迷你小檔案這種。這種掉了其實我也不知道。單檔10-100 03/29 04:44
37F：→ Arabella: G以上都沒掉 03/29 04:44
38F：→ kobe8112: server side move有方便的方法確認沒有漏檔案且比對複製 03/30 09:30
39F：→ kobe8112: 後的檔案跟原檔相同嗎? 03/30 09:30
40F：推 rick65134: no 只能用rclone ncdu雙視窗目測總檔案數和檔案總大小 03/30 10:53
41F：→ rick65134: 搬檔前用ncdu檢視來源目錄 + 搬檔後用ncdu檢視目的目錄 03/30 10:54
42F：→ rick65134: 雙視窗 詳細比對上層資料夾的總檔案數量是否吻合 03/30 10:55
43F：→ kobe8112: 如果是這樣，那copy的方式還是無法取代吧，畢竟檔案正確 03/30 11:23
44F：→ kobe8112: 搬移比起快速搬移還重要，當然若時間不夠另當別論 03/30 11:24
45F：推 rick65134: 你用move的話 本來就有這種風險 和能不能比對無關吧? 03/30 11:26
46F：→ rick65134: 根據我自己實測 move正確操作的話 是蠻穩定 且不掉檔的 03/30 11:27
47F：→ kobe8112: 我在討論google drive教育版逃難潮的檔案遷移方式， 03/30 11:29
48F：→ kobe8112: 自然會想比較不同方法的優缺點，因為前面板友的說法是 03/30 11:29
49F：→ kobe8112: move為佳，所以我才詢問這方式的其他細節 03/30 11:30
50F：→ kobe8112: 我當初也是用多sa+server side copy的方式一天2T這樣搬 03/30 11:31
51F：推 rick65134: 沒辦法啊 想當初也是用sa+copy得很高興... 苦到現在了 03/30 12:28
52F：→ rick65134: 真的一天2T的話 我從公告開始到截止日期都不可能搬得完 03/30 12:29
53F：→ rick65134: 不過你就算用複製的 也是需要用ncdu仔細比對喔 03/30 12:30
54F：→ rick65134: 根據我的經驗 sa+copy的掉檔才是最嚴重的... 03/30 12:31
55F：→ rick65134: 以前的做法是copy跑4次 2次全檔 2次僅複製>1KB的檔案 03/30 12:32
56F：→ rick65134: 複製時都是跳過已存在且檔案大小一樣的檔案 03/30 12:33
57F：→ rick65134: 複製完後 再跑3次dedupe 最後用ncdu肉眼比對來源和目的 03/30 12:34