作者alicekey (谁不喜欢美女！)
看板EZsoft
标题Fw: [请问] 请推荐大量档案备份工具(汰旧server用)
时间Wed Feb 5 12:25:41 2014
※ [本文转录自 alicekey 信箱]
作者: sunez (风和日丽的理智) 看板: EZsoft
标题: [请问] 请推荐大量档案备份工具(汰旧server用)
时间: Sat Feb 1 12:44:12 2014
事情是这样的
Lab有一台很老的机器上面挂了很多老师的计画网站
(作业系统是Win server 2003，硬体规格不算差...但
记忆体只有1GB)
今年采购了新的机器想要更换掉原本这台
拿一台全新的NAS来备份上面的所有资料
如果只是一台server就算了
但这台server挂载了三台磁碟阵列(total资料量约
45TB)
上面有一些大家share的东西
As you know......
小档很多目录也很多层
但单一档案>1GB的也颇多
爬文後用了大家推荐的
Allway Sync --> 当机
cobian backup --> 当机
QtdSync --> 当机
甚至用群晖自家的Synology Data Replicator 3 --> 还是当机
後来我想到用另一台Windows Server连结NAS和那台Server跑备份(cobian backup)
就算备份那台当掉了原本计画网站也不会挂掉
无奈的是这样备份会用到本地端的暂存空间
暂存空间根本放不下那麽多档案
也不可能让暂存目录挂载到其他磁碟阵列(这应该会超慢吧...)
最後VM一台Linux Server用Rsync备份
架构大概是这样:
NAS <--iscsi-- backup Server <--samba-- old server
这样的好处是不用暂存空间
也不容易当掉
但一天只能备份100GB左右
这样算下来我起码要
450天才备份的完QQ
想问问版上的大大有没有更适合的软体
可以处理我目前面临到的问题
--
※ 发信站: 批踢踢实业坊(ptt.cc)
◆ From: 118.232.231.209
1F：→ x94fujo6:RichCopy? 02/01 16:51
2F：→ wkwtb:ghost一类的，整个磁碟备份 02/01 17:36
这应该是最後的手段
3F：推 b2rex:当机是怎样当的,有的旧设备只是回应慢了点 02/01 18:59
4F：→ b2rex:我有备份过一直当机,某天火大开着,隔天上班终於跑了 02/01 19:00
5F：→ b2rex:只有1%,估记要数十天才备份的完,果断放弃 02/01 19:01
远端连不进去网站也连不进去只能进去机房重开机
6F：→ eva19452002:fastcopy? 02/01 22:26
7F：→ eva19452002:要不要先硬碟重整再做备份动作啊？速度应该会快很多唷 02/01 22:51
8F：→ eva19452002:先把一些目录做无损压缩，再重整，再备份，速度应该会 02/01 22:53
9F：→ eva19452002:快很多，也不容易当机 02/01 22:53
尝试过TeraCopy、KillCopy还有FastCopy最後都会挂掉
应该是记忆体太小的关系
硬碟重整的话担心资源不够网站会挂掉
有时候会出现档案毁损的错误讯息
是否还要做个chkdsk?
10F：→ changtai:robocopy? 02/02 12:05
11F：→ rick65134:所以是要online的方式备份? 感觉你都是用同步软体跑备份 02/02 16:32
主要是用差异备份的功能才方便知道自己备份到哪...
12F：推 xvid:ftp? 02/02 16:53
我试过把那台当作FTP Server...用filezilla传到某些档案就会中断...
有个好处是FileZilla支援续传
但有次我挂着想说让它慢慢抓
後来好奇传到哪要连远端进去的时候才发现它挂了= =
※ 编辑: sunez 来自: 118.232.231.209 (02/02 17:06)
13F：推 xvid:什麽挂了？bsod？还是ftp server挂了？ 02/02 17:13
FTP Server挂了
14F：→ rick65134:打死我也不用filezilla出的东西 不论是server或client! 02/02 18:59
15F：→ rick65134:比它好用的一堆 何必虐待自己呢 02/02 19:00
16F：→ rick65134:我自己有用过FTP连续传过10TB的东西 一次搞定零中断 02/02 19:01
17F：推 newclicker:同步软体首推 FreeFileSync 02/02 22:13
我尝试看看
18F：推 loking:对server不是很懂 不过你要不要先将新机器虚拟化 02/03 00:06
19F：→ loking:将file server跟web server分开用不同虚拟机 02/03 00:07
20F：→ loking:之後作备份较容易 02/03 00:07
也许之後会考虑这样做...当所有备份方法都失败的时候
※ 编辑: sunez 来自: 118.232.231.209 (02/03 00:37)
22F：推 wkwtb:我都用ghost一类的备份，要使用的时候他有自己的程式可以直 02/03 13:48
23F：→ wkwtb:直接像虚拟光碟一样，把映象档挂载成为一个硬碟 02/03 13:49
24F：→ wkwtb:之前我用的事acroins，不只可以挂载，还可以直接用档案总管 02/03 13:49
25F：→ wkwtb:读写（或可挂载成为唯独） 02/03 13:50
26F：→ wkwtb:至於ghost我记忆中也有类似功能，不过我没用过 02/03 13:50
27F：推 wkwtb:另外，既然跑阵列，为什麽不跑 raid5甚至跑 0+1 02/03 13:53
28F：→ wkwtb:只要记得检查硬碟有没有坏调就好 02/03 13:54
已经有跑raid 6了
现在是打算把资料移到新机器上
旧的机器要汰换掉
※ 编辑: sunez 来自: 118.232.231.209 (02/04 16:45)
※ Deleted by: sunez (118.232.231.209) 02/04/2014 21:48:20
※ 发信站: 批踢踢实业坊(ptt.cc)
※ 转录者: alicekey (219.68.9.207), 时间: 02/05/2014 12:25:41
29F：→ alicekey:版规：不得自删文章，已从资源回收桶回复。 02/05 12:27
30F：推 ACGB:这篇很有意思 希望看到原PO後续解决方法 还好垃圾桶回复了 02/05 14:34
31F：推 chang0206:希望看到解法+1 这麽大量的资料要移动，向来都没有啥好 02/05 15:15
32F：→ chang0206:方法，所以公司换NAS，都只能用同厂牌一直升级上去.. 02/05 15:15
33F：→ chang0206:唯一一次不同厂牌资料要互转，我是用FTP去处理掉 02/05 15:15
34F：→ chang0206:如果网路环境许可，而新机器硬碟够大的话，从新的NAS 02/05 15:18
35F：→ chang0206:做一个iscsi出来，旧机器mount进来後开始备份，就算只有 02/05 15:18
36F：→ chang0206:10MB，应该也只要跑个一个礼拜左右就可以跑完？ 02/05 15:19
37F：推 elic2577:先删avi mkv vob ts 应该可以少个一半 02/07 11:28
38F：推 rick65134:若是要用FTP的话 推荐使用gene6 + ftprush 认识很多做大 02/11 00:16
39F：→ rick65134:事业的人都是用这种组合 02/11 00:16
40F：推 sunez:最後是用robocopy的方式一边挂iscsi一边用samba去传 60MB/s 03/24 22:52
41F：推 sunez:另外robocopy可以搭配net use使用远端传输 但速度极慢 03/24 22:57
42F：推 sunez:同样1000Gbps的环境 传送最高17MB/s 接收2MB/s... 03/24 23:02