作者kci9kimo (leecat)
看板Free_box
标题[问题] Google Drive下载1~2TB大档案失败
时间Tue Oct 3 09:03:26 2017
大家好,
网路环境是Hinet 100M/40M
Google Drive是教育板
下载电脑是Win10透过远端桌面操作，空间是透过iscsi连线到ubuntu tgt提供的空间
几个月前，硬碟出现坏轨，所以用ddrescue 把硬碟做成映像档
档案有两个，大小分别是1TB跟2TB，通时挂两个硬碟.....囧
一次坏两个真的蛮伤的，那时候硬碟又贵贵的，想说先丢到Google Drive
上传是透过rclone，没啥问题，checksum检查应该也是对的
下载的时候试过几个方法
1 .rlone失败，感觉是流量限制
2. backup and sync，跑得时候硬碟空间有变小，但是两天後空间又回来了
虽然程式还在跑，但是感觉像是之前下载的失败了，又重来
3. Google Drive Stream，昨天晚上丢下去跑，用windows 复制档案方式
早上出现复制档案错误ms-dos功能无效
另外我也很异想天开的，装ftp server，路径指向串流资料夹，结果当然是抓不到...
4. Google Drive原本的同步程式，这个跑一晚，隔天看程式就自己关掉了
AirExplore就没试了感觉会跟rclone差不多，还是应该要试一下?
目前卡的点是档案真的太大，有1TB跟2TB，目前尝试的都没续传功能，一次失败就要重来
请问各位先进，有什麽好的方式可以有续传功能的嘛？
另外我需要把网路限速嘛？避免单日流量太高
还是有其他更好的方法可以下载单一大档案
感谢!!
----题外话----
这次空间怎麽来的，因为最近又坏了一个1T的硬碟，好死不死这个是LVM里面的硬碟
想说把坏轨扫一扫MARK起来，再来用PVMOVE移除硬碟，我错了，扫一扫就葛屁了
後来买了一个2TB的硬碟，改一下UUID，重新加回去，检查档案系统，被带走3TB的资料..
所以现在有很多空间，可以把之前的档案拉回来，只是真的不太顺利，拜托大家了
LVM是一种可以把多个硬碟当作一个硬碟用的好东西，原本总和大小是6TB
----最後结果----
更新一下最後结果，用AirExplorer慢慢拉完了，怕被Ban所以速度弄很慢，远低於8MB
2T+1T的档案，拉超级久
--
※ 发信站: 批踢踢实业坊(ptt.cc), 来自: 114.42.129.170
※ 文章网址: https://webptt.com/cn.aspx?n=bbs/Free_box/M.1506992608.A.0B6.html
2F：→ l98: 成功，但你要抓个两三天就是XD 10/03 09:32
3F：→ victor21813: air explorer支援续传 可以踹踹 10/03 10:01
感谢两位大大的回应，结合两位的意见，从讨论串看来一天有750GB的限制
流量最好是8MB/s比较稳妥，由於前几天有跑，可是不知道跑多少流量去了
现在用AirExplorer设定每秒3MB/s 慢慢跑，等明天再调成8MB/s，希望这次顺利
这样我很好奇，用Google放出来的程式，一样有这限制嘛？
翻到的资料都没提到，确定有流量限制是分享或者用rclone之类的程式有
※ 编辑: kci9kimo (114.42.129.170), 10/03/2017 12:22:35
※ 编辑: kci9kimo (114.42.129.170), 10/03/2017 12:43:51
4F：→ sigurose: 程式会自动关闭的是Backup and Sync、还是原本的Google 10/03 14:36
5F：→ sigurose: Drive桌面版？ 10/03 14:36
会自动关闭的是Google Drive桌面版，大概不到24hr，右下角icon就不见了
Backup and Sync跑快两天都还在，只是真的怪怪的，我其实找不到暂存档案在哪里
只能从硬碟的容量去判断
https://i.imgur.com/MrrGu42.png 判断现在可能进度
我记得最後一眼看到剩余容量不到1TB，然後又全部空回来了
※ 编辑: kci9kimo (114.42.129.170), 10/03/2017 14:49:10
6F：→ l98: 看有没有勇者去试，有一阵子没去追这个话题了! 毕竟一天会下 10/03 14:58
7F：→ l98: 载到750gb的人算少数吧! 10/03 14:59
8F：→ l98: Backup and Sync 我目前遇到是安装完，不确定是安装ms更新档 10/03 15:00
9F：→ l98: 还是被内建ms防毒砍掉，就莫名其妙程式消失，要重新安装，但 10/03 15:00
10F：→ l98: 重新安装完软体後，不需再重新设定就是。目前案例就两个! 10/03 15:01
装Backup and Sync的系统是win 10 pro，完整update，只有装文书软体
是没遇到突然消失的状况
11F：推 r1239386: 一天上传超过750G会断 昨天测试过 下载还没测试 10/03 18:49
请问使用的上传程式是Google放出来的嘛？如果是的话，看来不管用啥24hr就是750G
後来设定下载速度超慢，只有3MB左右，大概还要下载两天多，让他慢慢跑.希望拉的下来
※ 编辑: kci9kimo (114.42.129.170), 10/04/2017 01:03:15
12F：推 r1239386: 我用smartftp传的 10/04 01:06
13F：推 victor21813: 750GB上传限制是确定的 下载我记得不只750GB 10/04 01:10
14F：→ lonewind220: 下载应该可以超过1T，不过我没有单档超过1T的 10/04 09:44
之前用rclone拉过一次档案，只是忘记是拉1TB，还是2TB，比较有可能应该是1TB
出现错误讯息，然後跑一个网页出来
https://support.google.com/a/answer/1071518
那时候看到这网页吓死了，他的Bandwidth limits也太低，然後就一直放着到现在
下次有一样的状况，需要上传的话，应该会把档案切一切在放上去，不然下载真的痛苦
※ 编辑: kci9kimo (114.42.129.170), 10/04/2017 11:57:28
15F：→ ak77now: 这网页好像是mail的流量限制是吗?google drive的没这麽低 10/04 20:05
他网页其实写的不清不楚，第一个表格是透过网页下载/上传，第二个表格是透过POP/IMAP
翻到另外一个说明"Sync limits for accounts"，里面也都是跟mail有关的协定
看来应该真的是限制mail的
※ 编辑: kci9kimo (114.42.129.170), 10/04/2017 22:27:16
16F：→ ak77now: 其实我之前发文也是以为网页的是Google Drive限制 10/05 06:06
17F：→ ak77now: 也是板友推文提醒我说应该是mail的 10/05 06:07
※ 编辑: kci9kimo (114.42.152.71), 10/16/2017 20:59:52