作者ak77now (ak77now)
看板Free_box
标题[问题] 两个Google Drive帐号的档案传送
时间Thu Apr 13 13:29:33 2017
我手上有两个Google无限空间的帐号
比如说A、B两个帐号好了
我现在要将A的某个资料夹(大概有3T大)
整个复制一份给B帐号
不是分享喔
是B帐号底下确实也有一份档案
以前我试过档案不大的话用
https://goo.gl/A7LBGm
Chrome的扩充套件Copy, URL to Google Drive
都可以顺利用
可是这次可能是档案比较多比较大
用了一阵子後开始有一堆错误讯息
https://i.imgur.com/bE4kTFF.png
我有稍微查一下
好像是说api的流量限制到了之类的
因为档案太大了
实在不希望下载下来又再传上去一次
请问还有些什麽办法呢?
--
※ 发信站: 批踢踢实业坊(ptt.cc), 来自: 122.254.30.65
※ 文章网址: https://webptt.com/cn.aspx?n=bbs/Free_box/M.1492061375.A.EAE.html
1F：→ Brexit: 求低调 04/13 13:48
2F：→ dooiaua: 分批传 零碎档越多越容易有错误 04/13 13:54
3F：推 mypigbaby: 1.用rclone 04/13 14:21
4F：→ mypigbaby: 2.用multcloud 04/13 14:21
5F：推 leftless: 会遇到API限制的几乎都是影片档 打包再传都没事 04/13 14:56
6F：→ leftless: rclone现在还能解 搞不好哪天也不行了 封装才是正解 04/13 14:58
7F：推 fake30820: 我写script去跑看到的API限制应该是在request目录下的 04/13 17:30
8F：→ fake30820: 档案 1分钟超过几次这样 就会有问题 04/13 17:30
9F：→ fake30820: 应该不是档案太大 我的20几T都可以备份完了 04/13 17:31
我再用Copy, URL to Google Drive测试一次
这次我只搬一个2.6G的mp4档
才单单一个档
就出现Error. User rate limit exceeded了...
我只能研究Error. User rate limit exceeded以外的方法了~~
10F：→ rick65134: 既然有可能是针对影片档 那先试试把副档名改掉吧 04/13 19:39
11F：推 eric525498: 推 04/13 22:17
12F：推 lk86jeff: google有内建建立副本的功能啊，怎麽都没有人使用呢？ 04/14 03:00
13F：推 eric525498: 内建副本不能整个资料夹 04/14 07:45
我目前暂时先用
https://www.multcloud.com 跑了
速度很慢
不晓得付费的话是不是速度会快非常多?
rclone的研究好久还是不会
我手上的影片是放在NAS上
但主要目的还是希望云端上两个Google帐号可以同步这样
也试过了好几个类似
https://goo.gl/Bi07NH 的工具
几乎都是卡在影片上 (Error. User rate limit exceeded)
但影片太多了
不太可能会去做改档名或压缩之类的
好像只能靠multcloud的是吗?
14F：→ fromPtoZ: air explorer也可以GD互传(会耗网路流量) mult以前用过 04/14 10:14
15F：→ fromPtoZ: 速度极差 听说付费後也没多好 建议别跳这个坑 04/14 10:15
谢谢喔
正在试用中
如果是云端A对云端B的话
他这软体看起来还满像是透过PC做一个中介
一边从A下载到电脑的暂存空间後马上又同时上传到B那边去
其实算是可以用的
如果不靠这软体的话
纯手动把整个A下载下来再上传B
除了麻烦外
还怕自己本地端的容量太小
靠这软体好像就可以顺利解决
16F：→ fromPtoZ: 对 rclone也有这功能 只是rclone是cli 04/14 12:28
17F：→ fromPtoZ: air explorer则有图形界面 操作起来比较简单 04/14 12:28
真的是满满的感动!
我再多摸一下
满有可能就买他了~
太谢谢了
18F：推 rick65134: 与其用air explorer 我会推荐smartftp但要付费 04/14 13:39
19F：→ rick65134: 速度稳定许多 之前用air explorer 速度上下起伏超大 04/14 13:40
20F：→ fromPtoZ: 我都能吃满100Mbps频宽... 04/14 16:30
21F：→ fromPtoZ: *稳定吃满 04/14 16:31
air explorer用了一个下午
还不错 起伏的话比较容易发生在零碎的小档(几十KB那种大小)
当开始传几十MB、好几G的那种大小的影片时速度很稳定
我的频宽都有吃满
smartftp的话我找时间研究一下
不晓得是不是跟以往的FTP软体操作模式一样:
先下载下来後，再自行手动上传到另一端
还是跟air explorer一样
可以直接A传B (电脑本身中继暂存档)
22F：推 rick65134: smartftp当然也是直接A传B阿 (电脑本身中继暂存档) 04/14 18:41
23F：→ rick65134: 如果air explorer稳定的话 那就用air吧 至少它有免费版 04/14 18:42
24F：推 leftless: rclone可以不用中继直接复制 04/14 20:07
感谢以上所有推文
让我知道两个Google Drive帐号间档案的传送方式
目前看起来是
MultCloud (
https://www.multcloud.com/ )
cloudHQ (
https://www.cloudhq.net )
rclone
Air Explorer (本机端软体)
GoodSync (本机端软体)
SmartFTP (本机端软体)
我都会再花时间都研究看看
还有其他可用的方法我再继续整理在这篇
不过我很纳闷的是rclone
https://i.imgur.com/7NomBgp.png
不用中继的话
总是会有个平台之类的去处理
毕竟也是要消耗些资源
那这平台是谁提供的?
因为如果有中继到自己电脑的话
电脑可以负责处理这方面桥接的问题
MultCloud也是他们网站的主机负责
是说如果rclone设定好以後
脚本(指令)上传到某个地方就可以电脑关机让他云端离线处理了吗?
当然最佳解就是速度快+可云端处理免一直开着电脑是最好了
对rclone还是不太了解
25F：推 fake30820: rclone应该是吃自己的资源吧 不然他哪来这麽大的server 04/14 21:25
26F：→ fake30820: 让你跑 04/14 21:25
27F：→ fake30820: 除了可以拖拉那种网页搬移的以外 04/14 21:27
28F：→ fake30820: 应该都是吃自己的资源 04/14 21:27
对喔!
这样感觉合理多了
毕竟总要有个平台或资源去处理这方面的动作才是
不可能这麽神奇凭空就这样将云端上A、B两个档案直接传过去
可惜google本身不提供
不然他愿意的话 档案都是在他们上面
这样做对他们没什麽难度才是
29F：推 diac2000: 分享之後再复制一次？ 04/14 23:25
我有找到类似的教学
https://goo.gl/gJ88e1
有操作过了
处理到影片档的部分就会失败
如果是压缩档(好像好几G吧)
用这种复制+分享的操作有成功过~
30F：推 leftless: 因为google有提供直接复制档案的API而rclone是直接call 04/15 06:47
31F：→ leftless: api复制档案 所以不会有下载再上传的动作 04/15 06:47
32F：推 leftless: 需要注意的是只有来源和目标路径是同帐号rclone才会复制 04/15 06:49
33F：→ leftless: 档案 否则它会下载後再上传 04/15 06:49
34F：→ leftless: 你一开始贴的那个网站就是用api复制档案 04/15 06:50
35F：→ leftless: 至於为什麽rclone比较不会遇到api限制就不清楚了 04/15 06:52
36F：推 leftless: 甚至是连在GD网页上直接按建立副本会报错的档案 rclone 04/15 06:53
37F：→ leftless: 都能成功复制 04/15 06:53
38F：→ leftless: 知道方法的就低调用吧 一堆人操下去迟早也会吃apo限制 04/15 06:57
39F：→ sweshi: rclone 可以用自己申请的 Google API 04/15 07:51
40F：→ fromPtoZ: rclone转存的api碰到零碎档案的时候会漏档 04/15 09:44
41F：→ fromPtoZ: 个人不推荐用rclone转存 我跟我朋友都被坑过好几次了 04/15 09:45
42F：→ fromPtoZ: (我是指直接复制档案的转存 如果是中继需要消耗网路流量 04/15 09:46
43F：→ fromPtoZ: 的转存 rclone不会出问题 04/15 09:47
44F：→ leftless: 先用直接复制搞定大体积影片档 再用中继模式补齐零碎档 04/15 11:17
45F：→ leftless: 我还是倾向包起来再传 什麽毛病都没有 就是不方便了点 04/15 11:18
我有试到一个东西
比如说A帐号要丢档案到B帐号时
B开个共享资料夹(有新增权限的)给A
A将档案移动到被共享的资料夹以後
B将整个共享权限收回後
虽然档案一样拥有者挂名是A
但A那边将档案删掉、垃圾桶清空後
B收到的那个档案不会不见
有种情况会不见
就是B如果收到的是个资料夹且里面有装一些档案
你把里面个别档案移出去就会消失掉
等於是档案一定要跟着原本过来的资料夹底下
所以说刚刚的例子的话
如果A能把要丢给人的档案或资料夹先复制一份出来
用刚的方式去搬移就可以了
但问题是纯粹复制一份自己帐号本身的东西
都有时成功、有时失败了
(失败时会有类似User rate limit exceeded讯息)
如果这部分不能解决也没用就是
档案小的话还可以
量大一点的话这招好像行不通
还是要依照推文中的方法
老老实实去处理
46F：推 WindSucker: 或者 花钱买API用量 04/15 17:20
47F：→ leftless: 试了一下连rar也吃API限制了..应该最近有改过规则 04/15 21:05
48F：→ leftless: 大概只能花钱买API或是租大水管当中继来传了 04/15 21:06
49F：推 inocchi1976: GOODSYNC 有30天试用 可以两边比对 也是PC当中继 04/16 00:04
50F：→ inocchi1976: multcloud付费还会掉档 不推 04/16 00:05
感谢
又多了些选择了
51F：推 ferica: 新手太菜 不知道api怎麽收费的 有10T靠网速实在搬不动@@ 04/16 09:56
动辄数T的东西 搬起来很绝望啊!
我上传每秒3.5MB 随时都有种想办至少是100M/100M的冲动..
52F：推 fromPtoZ: 100/100搬了30T的路过 04/16 10:15
53F：→ fromPtoZ: 目前改用VPS搬 早上实测上传速度110MB/S www 04/16 10:15
54F：推 diac2000: 用good sync或nas 04/16 14:01
自从搞了个无限空间後
上传速度变得超重要的啊!
我的NAS是Synology DS716+
可以让NAS端与云端之间做同步
但等之後NAS端硬碟不够
改成单向上传的话
云端档案量远大於NAS端时
接下来势必就是空间够大的云端对云端同步了
NAS目前没看到类似air explorer的套件
之後大概就是要长期把电脑开着挂机了
欸干 30T到底是啥小! 为什麽这麽大
突然才想到这问题
(我的5T都是电影档)
55F：推 Angrierb: 这个东西有script啊，17T成功复制 04/17 10:47
57F：→ Angrierb: 不过复制这麽多当然是要跑好几天就是了 04/17 10:49
58F：→ Angrierb: 使用方式，先共享到B，然後用B帐号打开网站，启动脚本 04/17 10:51
这类脚本类的小工具我用了好几款
都会有类似的错误讯息
https://i.imgur.com/z9HS3cA.png
Error, GoogleJsonResponseException: User rate limit exceeded
我看上面有成功的都是小的档案
影片档都会失败
後来我有写信并附上以上那张图去问作者:
我问:
我的Google帐号是无限空间的
会有这样的错误讯息是因为我的档案太大还是什麽原因呢?
这是他回信给我的答覆:
This isn't related to your account type,
it is just a bug in the app.
Also related to the way Google allows free services to run.
Unfortunately there is no solution at this time.
I works recommend trying again in a few hours.
59F：推 ferica: 推原po用心～以前不知道备份 现在想备份 变得好费工@@ 04/18 07:22
60F：→ fromPtoZ: 刚才重新试了转存 连非影片档都会被限制了 04/18 17:33
61F：→ fromPtoZ: 转了2500个rar後开始出现user rate limit exceeded.... 04/18 17:33
这年头有大档要传的需求的话
网路没用个100M/100M的还真不够用 :(
※ 编辑: ak77now (122.254.30.65), 04/18/2017 20:17:17
62F：→ tinlans: 银弹够的话，欧美那边租一台 100TB 流量、1Gbps 频宽的 04/20 04:32
63F：→ tinlans: 独立主机，拼命传拼命灌好几家云端都随便你。 04/20 04:32
64F：→ tinlans: 或者台湾这边 NAS 开 http server 给外国主机开 IDM 抓， 04/20 04:33
65F：→ tinlans: 保证上传满速外，上了独立主机以後分流各云端就超快。 04/20 04:33