[問題] Google 雲端硬碟這樣搬會不會比較快?

作者: LonyIce (小龍)   2022-03-27 10:29:40
我 Google 雲端硬碟搬家,教育逃到企業
因為攝影、錄影工作,檔案大又多
大家不推薦內建的搬家是因為容易漏檔案
所以都推薦 rclone
但我的檔案多,每天傳輸流量也有 750 gb 的上限,這樣想想可能要花上 20 天以上。
那如果我用內建的搬家先搬(不用管流量問題),然後再用 rclone 檢查檔案是否遺失,這
樣搬家時間是不是有機會壓縮到 10 天以內呢?
這樣的方法是否可行?還是會有什麼問題呢?謝謝各位。
作者: iamdco (DC)   2022-03-27 10:57:00
不會比較快,要快就是用 rclone move 沒有流量750gb限制。
作者: ddir (827=廢文王 )   2022-03-27 12:11:00
內建的搬家很垃圾
作者: Aaso (每度あり)   2022-03-27 15:00:00
買nas下載下來吧 不然你之後又要逃難nas有內建可以下載雲端硬碟功能
作者: l98 (尋找屬於我的星星)   2022-03-27 15:17:00
然後 NAS 中標被鎖檔案 XD 用 NAS 真的很需要資安知識。
作者: Godist (格底斯特)   2022-03-27 15:37:00
A move to A_TD(以A授權的共用雲端硬碟),B_TD move to B,如果TD是企業版的,也可以省略第二步,最多兩個步驟搞定,也不用管750G的上傳限制,但建議檔案不要超過40萬個
作者: Banrin (比古)   2022-03-27 18:37:00
用vps可以離線抓吧google傳google也可以用rclone吃google那邊的備份傳,有點像加入我的雲端硬碟那樣 那個傳蠻快的
作者: lonewind220 (城市飛翔的小蜜蜂)   2022-03-27 19:41:00
只推用團隊盤做權限轉移
作者: maska (風中殘情)   2022-03-27 20:00:00
提供三個方法1.rclone drive server side copy2.用sa+icopy或百寶箱3.google colab掛載,用move/copy/sync指令搬
作者: LonyIce (小龍)   2022-03-27 22:54:00
Nas有了~雲端是備份~ 目前是用 rclone drive server side但每天都要開半天以上,速度有點慢~ 團隊盤有點看不太懂每個人的介紹... 我再研究一下
作者: lux2668 (Jenny)   2022-03-27 23:08:00
rclone drive server side copy,每天只能2T
作者: rick65134   2022-03-28 09:44:00
rclone move 有一定的機率死檔 檔案真的就消失了 哭哭其實最佳解是請學校網管幫你把資料夾移動到TD內但我裡面太多不能說的東西了 所以只好自己慢慢來...
作者: Arabella (16)   2022-03-28 09:48:00
樓上方式之外有問過計算中心,申請加入服務管理員即可官方內建自行一鍵移動
作者: rick65134   2022-03-28 09:49:00
"申請加入服務管理員" 計中會有這麼好心幫你加嗎??
作者: Arabella (16)   2022-03-28 11:40:00
我都加完搬完了,自己的計中自己問,推文能加嗎?
作者: tinlans ( )   2022-03-28 13:42:00
提醒一下檔案多的話其實用內建的去搬整個資料夾也會掉檔
作者: rick65134   2022-03-28 14:00:00
之前就有聽說內建的掉檔嚴重 而且不能暫停...
作者: Godist (格底斯特)   2022-03-28 23:19:00
怎麼還有人搬家推用SA或跑Server Side Copy,那是備份在用的,搬家跑server side move最快,別再誤導人了
作者: LonyIce (小龍)   2022-03-29 02:47:00
這兩個指令主要有什麼差別呢?我看網路都教 copy
作者: Arabella (16)   2022-03-29 04:44:00
官方內建會掉很多且無紀錄可以查,但我腦補還是有在效驗的 因為沒成功過幾天檔案會自己出現原雲端。我失敗大多是遊戲光碟整盤裸備份沒壓縮;另一是一資料夾內有上千個迷你小檔案這種。這種掉了其實我也不知道。單檔10-100G以上都沒掉
作者: kobe8112 (小B)   2022-03-30 09:30:00
server side move有方便的方法確認沒有漏檔案且比對複製後的檔案跟原檔相同嗎?
作者: rick65134   2022-03-30 10:53:00
no 只能用rclone ncdu雙視窗目測總檔案數和檔案總大小搬檔前用ncdu檢視來源目錄 + 搬檔後用ncdu檢視目的目錄雙視窗 詳細比對上層資料夾的總檔案數量是否吻合
作者: kobe8112 (小B)   2022-03-30 11:23:00
如果是這樣,那copy的方式還是無法取代吧,畢竟檔案正確搬移比起快速搬移還重要,當然若時間不夠另當別論
作者: rick65134   2022-03-30 11:26:00
你用move的話 本來就有這種風險 和能不能比對無關吧?根據我自己實測 move正確操作的話 是蠻穩定 且不掉檔的
作者: kobe8112 (小B)   2022-03-30 11:29:00
我在討論google drive教育版逃難潮的檔案遷移方式,自然會想比較不同方法的優缺點,因為前面板友的說法是move為佳,所以我才詢問這方式的其他細節我當初也是用多sa+server side copy的方式一天2T這樣搬
作者: rick65134   2022-03-30 12:28:00
沒辦法啊 想當初也是用sa+copy得很高興... 苦到現在了真的一天2T的話 我從公告開始到截止日期都不可能搬得完不過你就算用複製的 也是需要用ncdu仔細比對喔根據我的經驗 sa+copy的掉檔才是最嚴重的...以前的做法是copy跑4次 2次全檔 2次僅複製>1KB的檔案複製時都是跳過已存在且檔案大小一樣的檔案複製完後 再跑3次dedupe 最後用ncdu肉眼比對來源和目的

Links booklink

Contact Us: admin [ a t ] ucptt.com