作者hotdogee (hotdog)
看板PC_Shopping
标题[闲聊] 打造高阶工作站(1)-计画
时间Tue Aug 14 01:58:10 2012
目录: 文章代码(AID)
[闲聊] 打造高阶工作站(1)-计画 本篇
[开箱] 打造高阶工作站(2)-EE-ATX机壳
#1GBL9YOk (PC_Shopping)
[开箱] 打造高阶工作站(3)-CPUx2 DIMMx24 主机板
#1GOrrXS6 (PC_Shopping)
[开箱] 打造高阶工作站(4)-Xeon E5-2650 * 2
#1Hu0zJMG (PC_Shopping)
[开箱] 打造高阶工作站(5)-24x金士顿8GB ECC REG
#1Hv2IjIa (PC_Shopping)
____________________________________________________________________________
Blog网页版:
http://hotdogee.blogspot.tw/2012/08/1.html
这篇是接下一系列非专业开箱文的一些背景介绍,包含为什麽要组这台电脑,
以及每个零件选用的原因。
因为这台电脑所选用的零件是一般人比较少有机会接触到的,这些零件的组
装在网路上可供参考的资料较少,所以决定把这过程记录下来,用系列文的
方式发在PTT本版。
[需求与用途]
1. 跑大量资料分析比对
- 每次实验产生几百GB的基因定序资料要重组、分类、定量,每个步骤都是大
量(CPU)平行化的,整个过程用i7-3930K一般要跑一个礼拜至一个月。每组数
据从开始做到结束会产生5~10TB的资料量。
- 尤其作基因重组这个步骤可以跑的资料大小上限与记忆体大小有直接的关系
,随着实验技术的进步,每次实验产出的资料量越来越大,记忆体不够根本
跑不了。
2. 程式开发与测试
- 以遗传演算法(GA)与平行化演算法(MP)为主。
- 平行化已使用CPU为主,GPU计算目前还在评估与实验中,视实际问题而定。
- 网站介面设计与资料库开发。
- Windows/TK/GTK视窗化工具开发。
3. 跑VM
- 同时需要使用Windows与多种Linux
4. 业余平面设计与影像处理
5. WOW、D3
[粗略规格计画]
第一项规格要求就是记忆体要越大越好,现有单CPU插槽主机板最多就是
Sandy Bridge-E的8条8GB共64GB;要突破就必须采用双CPU插槽的架构(双路)
,在兼顾CPU效能与记忆体容量的情况下,决定采用Intel的Sandy Bridge-EP
也就是Xeon E5系列。
- CPU (中央处理器):
Xeon E5系列目前单颗最多提供8C16T,从Intel的网站上可以看到8C16T最低
阶的是E5-2650,往上就只是频率提高,快取都维持20MB;往下到E5-2640就
变成6C12T且快取只有15MB。因此在价格的考量下,决定选用E5-2650两颗,
以最低的价格取得Intel的16C32T的运算资源。
http://goo.gl/P97Zc
- RAM (记忆体):
- 双路Sandy Bridge-EP的主机板最多可以支援到768GB的记忆体,
因为有2个CPU,每个CPU共4通道,每通道可以插3条记忆体,共2*4*3=24个DIMM,
要达到768GB必须用单条32GB的记忆体模组。
- 目前一般买到的8GB记忆体模组是所谓的UDIMM,用UDIMM的话每通道只能插2条,
也就是只有最高128GB。
- 每通道要插到3条的话,必需要用RDIMM(Registered)。而RDIMM又分为
SR(Single Rank), DR(Dual Rank), QR(Quad Rank),这三种只有SR,
DR可以插到3条,如果买到QR的RDIMM就只能插2条。除非是更贵的LRDIMM,
则QR也可以插满3条。
- 来看看目前RDIMM的价格:
┌───────┬─────┬────┬────────┐
│DDR3 ECC RDIMM│DELL[注四]│HP[注五]│ 自组 │
├───────┼─────┼────┼────────┤
│ 32GB │ 60000元 │ 70521元│ 60000元[注一] │
├───────┼─────┼────┼────────┤
│ 16GB │ 12000元 │ 28879元│ 10000元[注二] │
├───────┼─────┼────┼────────┤
│ 8GB │ 4920元 │ 11008元│ 2500元[注三] │
└───────┴─────┴────┴────────┘
注一:RamStar 鈤星科技 32GB:
http://shopping.pchome.com.tw/AGAD3M-A64270568
注二:RamStar 鈤星科技 16GB:
http://shopping.pchome.com.tw/AGAD3M-A57850427
注三:金士顿 KVR1600D3D4R11S/8G:
http://goods.ruten.com.tw/item/show?21204289566263
注四:HP报价:
http://sce-public.houston.hp.com/ngc/PublicSCE
注五:DELL报价:
http://goo.gl/FcDNP
- 从上表可以看到,以自组栏来说,从8GB升级到16GB是用4倍的价钱买2倍的容
量,从16GB升级到32GB是用6倍的价格买2倍的容量。这种C/P值的差距我目前
还无法接受,所以最後决定选用C/P值最高的8GB模组,24条共192GB。
- 选用192GB这样的容量还有另一个原因,192GB是目前Win7 64bit最高可以支
援的记忆体容量:
http://goo.gl/FkHjL
[交给专业的品牌电脑公司?]
一般会觉得品牌电脑一定比较贵,可是到底贵多少?为了看自组工作站到底可以
省多少钱,值不值得,我还是去跟HP还有DELL要了一份报价,内容都是一样
选Intel E5-2650两颗,8GB DDR3 DR ECC RDIMM共24条,最便宜可用的主机板、
机壳与电源。硬碟、光碟机等储存系统先都不选。
HP ProLiant ML350p Gen8:
488615元
http://goo.gl/8ClgN
Dell PowerEdge T620:USD$7390(约
221700元)
http://goo.gl/NnUrY
[完整规格菜单]
主系统:
CPU (中央处理器):Intel Xeon E5-2650 * 2 $36000*2=$72000 原X屋
CPU风扇 :INTEL BXRTS 2011AC * 2 $690*2=$1380 原X屋
MB (主机板) :Supermicro X9DRi-LN4F+ $18300 巴X
RAM (记忆体) :金士顿 KVR1333D3D4R9S/8G * 24 $2300*24=$55200 原X屋
CHASSIS (机壳) :SuperChassis 745TQ-R920B $19700 巴X
PSU (电源供应器):热抽换双备援920W 80PLUS白金 包含在机壳内
总价$166580
- 备注:
- 主机板:有在单卖双CPU主机板的公司不多,Tyan有做双CPU的主机板,可是
还没有24DIMM的E5主机板;Intel自己有出一款,可是查价後太贵了;
Supermicro在台湾相对比较好订货,价格也较便宜,相对来说是C/P值最高的
,所以最後选了Supermicro X9DRi-LN4F+这块。Supermicro有另一款有SAS控
制晶片的也比较贵一点,虽然10年前我是15000转SCSI硬碟的爱用者,不过今
日SAS硬碟C/P太低,我评估後不需要。
- 机壳:
这块主机板是EE-ATX的规格(13.68" x 13"),一般的常见的机壳厂牌所生产
的机壳都装不下,所以最後只好用Supermicro自己出的机壳,内建热抽换双
920W电源与8个SAS/SATA热抽换硬碟槽。
硬碟子系统:
Intel 330 180GB * 2 $4650*2=$9300
Seagate 3TB * 8 $4690*8=$37520
Dell H700 NV 1GB $11200
H700 SATA线 * 2 $650*2=$1300
总价$59320
- SSD当系统碟,传统硬碟当资料碟。这边也是单存在可用的情况下,
采取价格优先考量,我希望以最少的钱获得最大的空间。
- RAID卡
- RAID卡我是从小用到大了,从IDE RAID卡到上一张是3ware的PCI-X
SATA RAID卡,以前用DRAM当快取的加速RAID卡最怕遇到断电,因此都要加个
电池跟UPS来防护,但是电池都有寿命问题,更换与维护都是麻烦。这次选用
这张是拿Flash来当快取的8 port SATA RAID卡里面,算是C/P值最高最便宜
的一张卡。
萤幕、喇叭、键盘、滑鼠:
这是我目前的工作环境:
http://goo.gl/qvD3Z
考虑再加一个DELL U3011放在中间,现有的两个24寸就放两边,用三萤幕。
- 目前现役:
- 萤幕:HP1940 (S-IPS),HP LP2475w (H-IPS),DELL 2405 (PVA)
- 喇叭:JungleRex AF-21S
- 键盘:Ducky 9008茶轴黑同,已预定KBtalKing Pro英文红轴蓝芽1对10键盘
- 滑鼠:罗技M705,2颗AA电池3年不用换
显卡:
虽然主机板有内显,不过要用三萤幕还是要再加一张显卡,可能会考虑4GB版
的NVIDIA GTX 680。
[下定]
总共跟七家厂商要了报价後,每个零件分别选择最便宜的厂商下定,从下订
到拿到货的时间,每个零件有快有慢,主机板跟机壳大约是两周,CPU说要一
个月,记忆体大概一周。
目前已到货的零件:
http://goo.gl/y6usJ
--
※ 发信站: 批踢踢实业坊(ptt.cc)
◆ From: 140.112.28.73
※ 编辑: hotdogee 来自: 140.112.28.73 (08/14 01:59)
1F:推 pirrysal :好文,请问你硬碟为何要买海门的阿? 08/14 02:09
2F:→ hotdogee :单存价格考量 因为在可用的情况下是最便宜的 08/14 02:13
3F:→ Nafusica :我论CPU delay 2周以上的可能性 08/14 02:16
4F:推 pirrysal :这到货零件排起来真赏心悦目~ 08/14 02:18
5F:→ pirrysal :全到齐的时候记得再多拍几张不同的角度! 08/14 02:19
6F:推 turtleknight:你要平行运算该用GPU吧,然後不该用680,该用7970 08/14 03:15
7F:→ turtleknight:跑openCL hd4000都比xeon还快了... 08/14 03:16
等我用的程式里面至少有一个改写成可以用GPU跑再加就好了。
680 4GB做为开发测试卡是最佳的,一来记忆体够大,二来同时支援CUDA跟OpenCL,
相容性最好。
8F:→ a40136 :台湾记忆体价格好贵阿 Samsung M393B2G70AH0-YH9Q4 08/14 05:17
9F:→ a40136 :大概单支250美,看过最低160美 08/14 05:17
10F:推 a40136 :另外推Supermicro X9DRi-LN4F+ 有10+台运作中 好物! 08/14 05:20
11F:推 rick65134 :没意外的话 那种power一定超级吵吧 目测是4CM风扇 08/14 06:25
12F:→ rick65134 :有打算加个UPS吗? 08/14 06:29
13F:→ eva19452002 :这拿来跑xp一定超快的 08/14 08:13
14F:→ a60100 :不一定,这里面一堆东西XP可能都不支援... 08/14 09:24
15F:推 jadepond :没考虑用 amazon ec2 吗? 08/14 09:59
16F:→ jadepond :速度又快,而且还比较便宜 08/14 10:00
当然是有考虑 但是我的程式需求是高记忆体 高硬碟容量
EC2目前最贵的vm 记忆体也只有68.4GB 第一个记忆需求EC2就没办法提供了
再说价格 光是68.4GB记忆体的vm 一个月就要49248元
硬碟空间需求 24TB的EBS空间 一个月可是要72000元
别人说比较便宜是把管理人事费都算进去了 但是我是可以通通自己来的
所以对我来说 不只需求不符 也贵很多
17F:推 yichenglee :热狗大推 08/14 11:20
18F:推 cka :真羡慕啊 不过这样玩ptt会比较快吗? 08/14 13:33
19F:推 cka :我组16GB的时候就觉得很大了 没想到有人装192GB 08/14 13:36
20F:推 GW40112 :板主《目前动态》:列入无上限菜单中 08/14 14:07
21F:→ GW40112 :满满的$$$阿...等我哪天中了乐透也帮我组一套www 08/14 14:07
22F:推 scsa3 :17万应该还没有到无上限那麽夸张 08/14 14:19
23F:→ GW40112 :170K这对我来说已经算天价了 而且原PO也有说有些地 08/14 14:21
24F:→ GW40112 :方是折衷选择...不然总价会更高XD 08/14 14:21
25F:推 scsa3 :你可以去APPLE点点MAC PRO选项玩玩看 08/14 14:28
26F:推 eric424 :不是都说了用途了吗 为什麽要问PTT跟XP... 08/14 14:34
27F:→ GW40112 :好吧...我每个都点到顶 445K 天价中的天价XD 08/14 15:03
28F:推 bigbo :个人觉得不如直接请厂商报Supermicro的2U Server 08/14 15:09
29F:→ bigbo :保固也有人处理 08/14 15:09
谢谢关心 不过我的保固都是我自己处理
同样的规格下 价格最佳化 是本篇的重点 任何更贵的选项我都不考虑
※ 编辑: hotdogee 来自: 140.112.28.73 (08/14 15:31)
30F:推 mipkhh :认真推~不过建议用在线UPS一台 08/14 16:25
31F:推 cka :对啊 以你的需求 OPNE CL会省很多钱吧 08/14 17:51
32F:→ a40136 :192GB对卖主机的来说不算太大啊,处理过最小的Cloud 08/14 17:55
33F:→ a40136 :都512GB以上,只是一个月大概要5万多吧,其实有钱 08/14 17:55
34F:→ a40136 :你有怎样的需求,都可以搞得出来,只是这台电脑 08/14 17:56
35F:→ a40136 :你会只用短时间,还是长时间使用,要买断还是租 08/14 17:56
36F:→ a40136 :就是看个人需求了 08/14 17:56
37F:推 s25g5d4 :讲的好像改写程式很简单的样子~"~ 08/14 18:49
38F:推 Terrykho :记忆体堆起来的高度真是让人赏心悦目 08/14 20:24
39F:推 michealking :功能基因体? 112真的神人倍出 08/14 21:58
40F:推 nogard :推!也推你的AddOns XD 08/14 22:03
41F:推 cation234 :照片中的机械键盘推推 08/14 22:35
42F:推 rick65134 :贵实验室真有钱 我们都只有一堆一台一万的主机... 08/15 00:09
43F:推 ganbaday :增长见闻...真好看XD 08/15 01:34
44F:→ ganbaday :若像楼上那样用16台一万元主机,效果不知道如何? 08/15 01:35
45F:→ ganbaday :16台就有32C32T,8G*4*16=512G...不过系统好多个XD 08/15 01:37
46F:推 soem :16台就会卡在网路要用多好的问题上... 08/15 19:35
47F:→ sl5613 :这篇文章一定不会有机壳牌电源不推的问题!! 08/16 02:16
48F:→ viro72 :当然啊..那PSU应该是特规的吧 08/16 12:28
49F:推 wolfspring :好精采 推推~~ 08/17 20:44
※ 编辑: hotdogee 来自: 140.112.28.73 (09/27 03:54)
※ 编辑: hotdogee 来自: 140.112.28.73 (09/27 03:56)
50F:推 sasox03 :增广见闻推 10/24 16:22
※ 编辑: hotdogee 来自: 140.112.29.6 (07/16 00:36)