PTT數位生活區 / Free_box (免費空間 免空板)

[問題] Google 雲端硬碟這樣搬會不會比較快？

看板Free_box (免費空間 免空板)作者 (耀西)時間2年前 (2022/03/27 10:29), 編輯推噓16(16推 0噓 41→)
留言57則, 14人參與, 2年前最新討論串1/2 (看更多)
我 Google 雲端硬碟搬家，教育逃到企業 因為攝影、錄影工作，檔案大又多 大家不推薦內建的搬家是因為容易漏檔案 所以都推薦 rclone 但我的檔案多，每天傳輸流量也有 750 gb 的上限，這樣想想可能要花上 20 天以上。 那如果我用內建的搬家先搬（不用管流量問題），然後再用 rclone 檢查檔案是否遺失，這 樣搬家時間是不是有機會壓縮到 10 天以內呢？ 這樣的方法是否可行？還是會有什麼問題呢？謝謝各位。 -- ※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 49.217.64.6 (臺灣) ※ 文章網址: https://www.ptt.cc/bbs/Free_box/M.1648348182.A.FEF.html
→
03/27 10:57, 2年前 , 1F
不會比較快，要快就是用 rclone move 沒有流量750gb限制。
03/27 10:57, 1F
→
03/27 12:11, 2年前 , 2F
內建的搬家很垃圾
03/27 12:11, 2F
推
03/27 15:00, 2年前 , 3F
買nas下載下來吧 不然你之後又要逃難
03/27 15:00, 3F
→
03/27 15:00, 2年前 , 4F
nas有內建可以下載雲端硬碟功能
03/27 15:00, 4F
推
03/27 15:17, 2年前 , 5F
然後 NAS 中標被鎖檔案 XD 用 NAS 真的很需要資安知識。
03/27 15:17, 5F
推
03/27 15:37, 2年前 , 6F
A move to A_TD(以A授權的共用雲端硬碟)，B_TD move to B
03/27 15:37, 6F
→
03/27 15:37, 2年前 , 7F
，如果TD是企業版的，也可以省略第二步，最多兩個步驟搞定
03/27 15:37, 7F
→
03/27 15:37, 2年前 , 8F
，也不用管750G的上傳限制，但建議檔案不要超過40萬個
03/27 15:37, 8F
推
03/27 18:37, 2年前 , 9F
用vps可以離線抓吧
03/27 18:37, 9F
推
03/27 18:51, 2年前 , 10F
google傳google也可以用rclone吃google那邊的備份傳，有點
03/27 18:51, 10F
→
03/27 18:51, 2年前 , 11F
像加入我的雲端硬碟那樣 那個傳蠻快的
03/27 18:51, 11F
→
03/27 19:41, 2年前 , 12F
只推用團隊盤做權限轉移
03/27 19:41, 12F
推
03/27 20:00, 2年前 , 13F
提供三個方法
03/27 20:00, 13F
→
03/27 20:00, 2年前 , 14F
1.rclone drive server side copy
03/27 20:00, 14F
→
03/27 20:00, 2年前 , 15F
2.用sa+icopy或百寶箱
03/27 20:00, 15F
→
03/27 20:00, 2年前 , 16F
3.google colab掛載，用move/copy/sync指令搬
03/27 20:00, 16F
→
03/27 22:54, 2年前 , 17F
Nas有了~雲端是備份~ 目前是用 rclone drive server side
03/27 22:54, 17F
→
03/27 22:54, 2年前 , 18F
但每天都要開半天以上，速度有點慢~ 團隊盤有點看不太懂
03/27 22:54, 18F
→
03/27 22:55, 2年前 , 19F
每個人的介紹... 我再研究一下
03/27 22:55, 19F
推
03/27 23:08, 2年前 , 20F
rclone drive server side copy，每天只能2T
03/27 23:08, 20F
推
03/28 09:44, 2年前 , 21F
rclone move 有一定的機率死檔 檔案真的就消失了 哭哭
03/28 09:44, 21F
→
03/28 09:46, 2年前 , 22F
其實最佳解是請學校網管幫你把資料夾移動到TD內
03/28 09:46, 22F
→
03/28 09:46, 2年前 , 23F
但我裡面太多不能說的東西了 所以只好自己慢慢來...
03/28 09:46, 23F
推
03/28 09:48, 2年前 , 24F
樓上方式之外有問過計算中心，申請加入服務管理員即可官
03/28 09:48, 24F
→
03/28 09:48, 2年前 , 25F
方內建自行一鍵移動
03/28 09:48, 25F
推
03/28 09:49, 2年前 , 26F
"申請加入服務管理員" 計中會有這麼好心幫你加嗎??
03/28 09:49, 26F
推
03/28 11:40, 2年前 , 27F
我都加完搬完了，自己的計中自己問，推文能加嗎？
03/28 11:40, 27F
→
03/28 13:42, 2年前 , 28F
提醒一下檔案多的話其實用內建的去搬整個資料夾也會掉檔
03/28 13:42, 28F
推
03/28 14:00, 2年前 , 29F
之前就有聽說內建的掉檔嚴重 而且不能暫停...
03/28 14:00, 29F
→
03/28 23:19, 2年前 , 30F
怎麼還有人搬家推用SA或跑Server Side Copy，那是備份在用
03/28 23:19, 30F
→
03/28 23:19, 2年前 , 31F
的，搬家跑server side move最快，別再誤導人了
03/28 23:19, 31F
→
03/29 02:47, 2年前 , 32F
這兩個指令主要有什麼差別呢？我看網路都教 copy
03/29 02:47, 32F
推
03/29 04:44, 2年前 , 33F
官方內建會掉很多且無紀錄可以查，但我腦補還是有在效
03/29 04:44, 33F
→
03/29 04:44, 2年前 , 34F
驗的 因為沒成功過幾天檔案會自己出現原雲端。我失敗大
03/29 04:44, 34F
→
03/29 04:44, 2年前 , 35F
多是遊戲光碟整盤裸備份沒壓縮；另一是一資料夾內有上千
03/29 04:44, 35F
→
03/29 04:44, 2年前 , 36F
個迷你小檔案這種。這種掉了其實我也不知道。單檔10-100
03/29 04:44, 36F
→
03/29 04:44, 2年前 , 37F
G以上都沒掉
03/29 04:44, 37F
→
03/30 09:30, 2年前 , 38F
server side move有方便的方法確認沒有漏檔案且比對複製
03/30 09:30, 38F
→
03/30 09:30, 2年前 , 39F
後的檔案跟原檔相同嗎?
03/30 09:30, 39F
推
03/30 10:53, 2年前 , 40F
no 只能用rclone ncdu雙視窗目測總檔案數和檔案總大小
03/30 10:53, 40F
→
03/30 10:54, 2年前 , 41F
搬檔前用ncdu檢視來源目錄 + 搬檔後用ncdu檢視目的目錄
03/30 10:54, 41F
→
03/30 10:55, 2年前 , 42F
雙視窗 詳細比對上層資料夾的總檔案數量是否吻合
03/30 10:55, 42F
→
03/30 11:23, 2年前 , 43F
如果是這樣，那copy的方式還是無法取代吧，畢竟檔案正確
03/30 11:23, 43F
→
03/30 11:24, 2年前 , 44F
搬移比起快速搬移還重要，當然若時間不夠另當別論
03/30 11:24, 44F
推
03/30 11:26, 2年前 , 45F
你用move的話 本來就有這種風險 和能不能比對無關吧?
03/30 11:26, 45F
→
03/30 11:27, 2年前 , 46F
根據我自己實測 move正確操作的話 是蠻穩定 且不掉檔的
03/30 11:27, 46F
→
03/30 11:29, 2年前 , 47F
我在討論google drive教育版逃難潮的檔案遷移方式，
03/30 11:29, 47F
→
03/30 11:29, 2年前 , 48F
自然會想比較不同方法的優缺點，因為前面板友的說法是
03/30 11:29, 48F
→
03/30 11:30, 2年前 , 49F
move為佳，所以我才詢問這方式的其他細節
03/30 11:30, 49F
→
03/30 11:31, 2年前 , 50F
我當初也是用多sa+server side copy的方式一天2T這樣搬
03/30 11:31, 50F
推
03/30 12:28, 2年前 , 51F
沒辦法啊 想當初也是用sa+copy得很高興... 苦到現在了
03/30 12:28, 51F
→
03/30 12:29, 2年前 , 52F
真的一天2T的話 我從公告開始到截止日期都不可能搬得完
03/30 12:29, 52F
→
03/30 12:30, 2年前 , 53F
不過你就算用複製的 也是需要用ncdu仔細比對喔
03/30 12:30, 53F
→
03/30 12:31, 2年前 , 54F
根據我的經驗 sa+copy的掉檔才是最嚴重的...
03/30 12:31, 54F
→
03/30 12:32, 2年前 , 55F
以前的做法是copy跑4次 2次全檔 2次僅複製>1KB的檔案
03/30 12:32, 55F
→
03/30 12:33, 2年前 , 56F
複製時都是跳過已存在且檔案大小一樣的檔案
03/30 12:33, 56F
→
03/30 12:34, 2年前 , 57F
複製完後 再跑3次dedupe 最後用ncdu肉眼比對來源和目的
03/30 12:34, 57F
‣ 更多 LonyIce 的文章
文章代碼(AID): #1YFymM_l (Free_box)
Free_box 近期熱門文章
更多 近期熱門文章 >>
PTT數位生活區 即時熱門文章
更多 即時熱門文章 >>
‣ 更多 LonyIce 的文章
文章代碼(AID): #1YFymM_l (Free_box)