作者Cubelia (大胸智乃)
看板Storage_Zone
标题Re: [请益] 100T左右的档案下载并转交(外接盒/Nas)
时间Tue Jan 30 04:28:25 2024
※ 引述《imbeginner (万年初心者)》之铭言：
: 各位版友大家好
: 我有把档案下载下来转交给其他人的需求
: (因为对方不方便使用网路）
: 档案在一个云端上约100TB，打算用桌面版的程式一次全载下来，所以需要一个够大的硬碟
: 原本有考虑外接吐司盒，插满20TB做使用；但爬文发现吐司盒的安全性好像不太好
: 所以把念头动到多插槽的nas上，只是我没有用过nas，不晓得它能否当超大号随身碟来做使用呢？
: 希望版友可以给我解答，非常感谢！
: -----
: Sent from JPTT on my Xiaomi M2007J3SG.
这麽大笔的资料量和需要的硬碟数不太可能仰赖傻瓜式RAID外接盒
想必也对资料完整性要求性很高，WIN平台+NTFS组RAID不太合适
家用还是得 mdadm+档案系统(软体层土炮) 或 整套ZFS
撇开主机自组，除非会玩Linux+会软体层土炮，否则请买品牌NAS
ZFS请指名TrueNAS，这比单纯软体层土炮要简单很多了
(Q也有跑ZFS的品牌NAS)
阵列怎麽组:
1.起码也要使用两颗冗余的RAID6/RAID-Z2
常见NAS硬碟槽最高8个至少要买20T硬碟
此时20*6=120T；换算实际可用约109TiB
2.保险一点要求三颗冗余，只能选ZFS RAID-Z3
8个硬碟槽维持实际可用至少100TiB就要买22T硬碟
不过这已经刚好装满了，ㄍㄧㄥ那麽紧不太实际(影响性能)
搞得到24T硬碟就能维持只用8个硬碟槽，同时保有109TiB的实际可用
3.更保险一点(多个阵列组存储池)、更多可用容量就是预算无上限的范畴了
接着是网速问题，假如牵500M(理论值62.5MB/s)的网速
也假设这些一路畅通可不间断维持这速度
100TiB=100*1024GB
102400*1024MB=104857600MB
104857600/62.5=1677721.6秒=466小时=19.4天
如果牵500M光是将资料拉回来至少要不间断跑19天半
唯一选择硬碟+阵列+整台NAS一起配好
直接在NAS+磁碟阵列上设定把资料拉回来(记得配UPS)，再人力将整套送去目的地
不然硬碟寄过去NAS品牌不合又得想办法整理资料，超级大工程
除了时间就是金钱以外也增加转移时操作失误的可能性
当然你家那台NAS和他家那台NAS品牌有相容那是最好
如果是用ZFS那就输出存储池再寄硬碟於目的地主机输入存储池
TrueNAS有内建这功能，可以简单办到
其它土炮主机怎麽组、续传下载、维护NAS和搞备份又是另外一回事
大概是酱，到时候有成功案例可以请大大分享看看XD
--
姊姊 姊姊 我们好像变成签名档了
雷姆 雷姆 好像真的是这麽一回事呢
--
※ 发信站: 批踢踢实业坊(ptt.cc), 来自: 1.173.160.3 (台湾)
※ 文章网址: https://webptt.com/cn.aspx?n=bbs/Storage_Zone/M.1706560110.A.D9B.html
1F：推 selfhu : 小档会更慢，19天真的只是预估 01/30 04:50
这麽长的时间真的耗一次就好XD
※ 编辑: Cubelia (1.173.160.3 台湾), 01/30/2024 07:20:17
2F：推 fmp1234 : 100TB不分割心脏很大颗XD 01/30 07:55
3F：推 ericpttt : 推荐用TrueNAS 的 replication ，记得ram要给多一点 01/30 11:04
4F：推 hzaxcp386 : 220T那绝对会被判定是滥用，难怪被砍 01/31 12:02
5F：推 maniaque : 云端? 100TB ?? 100TB ?? 02/03 21:39
6F：→ maniaque : 那已经不是一个够大的外接硬碟可以处理了 02/03 21:39
7F：→ maniaque : 假如足 100TB ,至少也要6颗20TB 硬碟 02/03 21:41
8F：→ maniaque : 5颗100TB ,但切档会大於吧 02/03 21:42
9F：→ maniaque : 乖乖用 6Bay or 8Bay NAS 吧,拉完整台交给对方 02/03 21:42
10F：→ maniaque : 不知道有谁会一次开 100TB 档案.....资料库或图库吧 02/03 21:44
11F：→ maniaque : 整个砍下来抓时间也要 1个月(19天太乐观了....) 02/03 21:45
12F：推 smallreader : 有没有一种可能 直接跟谷歌买那100T的复本 02/04 23:12
13F：→ addbear22 : 传说中的磁带机可行吗? 02/05 11:22
14F：推 maniaque : 楼上....磁带机应该不可能直接云端传到磁带机上 02/06 15:15
15F：→ maniaque : 所以还是得有个硬碟组去存 02/06 15:16
16F：→ hangtenboy : 没有另外实体的备份也太大心脏了 02/13 10:17