作者hotdogee (hotdog)
看板PC_Shopping
标题[开箱] 打造高阶工作站(3)-CPUx2 DIMMx24 主机板
时间Thu Sep 27 03:54:07 2012
目录： 文章代码(AID)
[闲聊] 打造高阶工作站(1)-计画
#1GAK0qnE (PC_Shopping)
[开箱] 打造高阶工作站(2)-EE-ATX机壳
#1GBL9YOk (PC_Shopping)
[开箱] 打造高阶工作站(3)-CPUx2 DIMMx24 主机板 本篇
[开箱] 打造高阶工作站(4)-Xeon E5-2650 * 2
#1Hu0zJMG (PC_Shopping)
[开箱] 打造高阶工作站(5)-24x金士顿8GB ECC REG
#1Hv2IjIa (PC_Shopping)
____________________________________________________________________________
Blog网页版：
http://hotdogee.blogspot.tw/2012/09/3-supermicro-x9dri-ln4f.html
本篇的主角是Supermicro X9DRi-LN4F+：
http://www.supermicro.com/products/motherboard/Xeon/C600/X9DRi-LN4F_.cfm
特色介绍与开箱写真
这是目前市面上少数可以安装24条记忆体的双CPU主机板，大量记忆体的需求是选用这款
主机板的主因，对多可以支援到768GB的记忆体容量；另一个原因是Supermicro的产品在
台湾要入手相对比较简单，价格也是最便宜的($18300)。
为了容纳24条记忆体，主机板大小是采用
Enhanced Extended ATX 13.68" x 13" (34.7cm x 33cm)。
一般正常主机板的大小是标准ATX 12" x 9.6" (30.5cm x 24.4cm)，
与较小的micro-ATX 9.6" x 9.6" (24.4cm x 24.4cm)，
还有近年越来越常见的Mini-ITX 6.7" x 6.7" (17cm x 17cm)。
把旧电脑的主机板盒子拿出来叠叠乐，可以看看到底比一般常见的主机板大多少。
最上面是3盒micro-ATX，接着四盒ATX，压在最下面的就是我们的X9DRi-LN4F+
http://goo.gl/myGfr
正面比较看看：
http://goo.gl/MSJeY
完整盒子正面照：
http://goo.gl/gPkJc
盒子背面列了所有主机板的比较表(字想看清楚一点可以点一下图放大)：
http://goo.gl/TlDjD
开箱了！有一张Check
List上面有检察人员的签名，一本说明书，一张驱动光碟，最左边放一些线材跟後档板：
http://goo.gl/GcQLW
两条标准SATA线与上篇机壳付的是完全一样，都是Amphenol的Spectra-Strip双直头线：
http://goo.gl/9WjFm
来看看上图下方比较少见的一条线。下面比较大的头是SSF-8087，另一端是4个SATA/SAS
接头(标P0, P1, P2, P3)与一个SSF-8485 SGPIO 8-pin接头(标P4)用来连接到上篇机壳
开箱文有看到的SES2背板，有这条线才能让每个硬碟的独立灯号正确显示：
http://goo.gl/oLy1s
主机板的背档板正反面，VGA旁有一个小洞是给UID指示灯与关闭开关用的：
http://goo.gl/P7ETZ
Supermicro X9DRi-LN4F+本体出场：
http://goo.gl/x3yCi
主机板後面：
http://goo.gl/l5JyB
後方接头有RS232、四个USB 2.0、四个Gigabit RJ45、一个VGA，以及IPMI专属网路孔，
之後会再写一篇专门介绍IPMI这个一般消费型主机板不会见到的功能：
http://goo.gl/Eks8f
主机板上的贴纸印有4个网路孔的卡号(Start MAC到End MAC)，IPMI专属网路孔的
卡号独立印在右边的贴纸上，下方的插槽是CPU1、上方是CPU2：
http://goo.gl/Vdjtl
FOXCONN的LGA 2011插槽(Socket R)，跟i7-3930K是同脚位：
http://goo.gl/ntKog
打开来可以看到2011支接脚：
http://goo.gl/WQDxb
LGA 2011接脚：
http://goo.gl/r3k2v
LGA 2011中央的电容：
http://goo.gl/Rjn72
有两个CPU所以要有两个8-pin主机板电源供电，买POWER的时候要注意电源有没有
两个8-pin接头，大部分是要高瓦数的电源才有，例如CORSAIR AX-750W：
http://goo.gl/YsTwv
CPU供电线路，每个CPU都有一组六相降稳压线路(6-Phase Buck Converter)，
目的是把电源供应器的12V降成CPU用的0.6V-1.35V，这线路可以简单分成三阶段，
下图中最上面的储能电感，中间的MOSFET双开关，与最下面的PWM控制器，利用负
回授(Feedback)调整每相的脉波宽度来达到降压与稳压的功能：
http://goo.gl/aqag5
Intersil ISL6366 CPU用六加一相PWM脉波宽度控制降稳压晶片：
http://goo.gl/UAxRc
TI CSD87350Q5D 高效率双Power MOSFET功率电晶体晶片，输出电流可达40A，
在25A时有90%转换效率：
http://goo.gl/d7e8J
ALPHA&OMEGA AOZ1022DI 这是个整合PWM与MOSFET的降稳压晶片，输出电流只有3A：
http://goo.gl/8Nk1U
每六支记忆体用一组记忆体稳压线路，板上有24支记忆体所以有四组下图线路：
http://goo.gl/j0ncd
International Rectifier IR3541A
记忆体用的五相PWM脉波宽度控制降稳压晶片，不过本记忆体稳压线路只用了三相：
http://goo.gl/VlSOM
TI CSD97370AQ5M 高效率双Power MOSFET功率电晶体晶片，专门设计给记忆体与
显卡供电用，输出电流可达40A，在25A时有90%转换效率：
http://goo.gl/0Yfmg
把散热片拆下来後可以看到Intel C602 PCH晶片周边线路包含SATA接头与BIOS：
http://goo.gl/g7CRf
Intel C602晶片组提供SATA、USB、RSTe、AMT与vPro等功能：
http://goo.gl/B8ivD
Intel C602晶片特写，型号BD82C602：
http://goo.gl/augvB
Intel C602晶片上的2D条码：
http://goo.gl/qeXqp
16MB AMI BIOS支援UEFI：
http://goo.gl/cq0W8
AMI Aptio Beyond BIOS贴纸：
http://goo.gl/LzyRn
TI SN74CBTLV3257 高速多工/分工晶片：
http://goo.gl/nJisV
Intel C602 PCH晶片右边线路：
http://goo.gl/9F1aM
PHILIPS GTL2005 4-bit GTL到TTL双向逻辑转译器：
http://goo.gl/tU4Aj
SMCI NCT7904D-S 完整支援Intel PECI指令，读取CPU与记忆体的温度与电压状态，
支援最多四个CPU插槽，包含20个电压感测接脚与12个风扇转速感测接脚：
http://goo.gl/TsCSW
ICS932SQ420DGLF这是PCIe与QPI的频率产生器晶片：
http://goo.gl/5Hdqn
Winbond W83527HG提供风扇与温度等监控功能：
http://goo.gl/Vgzf2
NXP GTL2107 专门设计来将双路Xeon的I/O逻辑转译成晶片组用的3.3V LVTTL逻辑讯号：
http://goo.gl/ML9qm
TI SN54LVC14A 史密特触发反相器，学过电子学的其实就只是六个Inverter：
http://goo.gl/qhM6e
ICS FGP202AKL 专门设计给Intel CPU主机板的频率产生器晶片，可以从一个25MHz的
石英震荡器输入产生各种CPU外频、96 MHz、33.3 MHz、50 MHz与32.768 MHz：
http://goo.gl/YfR1H
TXC 25.0 MHz的石英震荡器：
http://goo.gl/zKwYt
ALTERA EPM240T100C5N CPLD 是可自订逻辑运算的晶片，类似FPGA：
http://goo.gl/y39FV
ICS 9ZX21501B 提供给PCIe 3.0或QPI的15输出Differential Buffer：
http://goo.gl/c696F
KTS CR2032 锂电池：
http://goo.gl/2nH3o
这区主要有Intel的网路晶片(UL1)与Nuvoton BMC底板管理控制器(UM1)，
板子上的白字印刷第二个字母是L的元件都是属於Intel的网路
晶片的周边支援元件，例如电容是CL开头，电阻是RL开头；第二个字母是M的元件则是属
於Nuvoton底板管理控制器的周边支援元件，例如电容是CM开头，电阻是RM开头：
http://goo.gl/n08kI
Realtek RTL8201F 是IPMI专用的单埠100M网路控制晶片：
http://goo.gl/SNrw9
Intel NHI350AM4 提供四埠Gigabit网路，每埠支援八个VM：
http://goo.gl/da099
TI TPS54218 这是个整合PWM与MOSFET的降稳压晶片，最高输出2A的电流，
这边有两颗，一颗供电给BMC，另一颗供电给SDRAM：
http://goo.gl/weqSS
Nuvoton WPCM450RA0BX 底板管理控制器(BMC)，提供Matrox G200显示功能，
虚拟化键盘/萤幕/滑鼠远端控制功能(KVMR)，IPMI 2.0，远端光碟ISO挂载，
网页介面管理等功能，就算没有作业系统也可以远端进去管理：
http://goo.gl/OTnfG
Spansion S25FL128P 16MB FLASH记忆体，用来放置IPMI的韧体：
http://goo.gl/n0ya2
Hynix H5PS1G63EFR 1Gb DDR2 SDRAM是BMC控制器专用的记忆体：
http://goo.gl/8nurp
TXC 48.0 MHz的石英震荡器：
http://goo.gl/vfFhp
LEM1闪烁时表示BMC工作正常：
http://goo.gl/mWOAe
主机板背面接头周边线路：
http://goo.gl/bd014
TI MAX3243E RS-232 驱动晶片：
http://goo.gl/zk3Qb
ON Semiconductor CM2009 提供内显的VGA埠之静电保护与缓冲：
http://goo.gl/saZBw
UID是用於安装在机柜环境时，可透过IPMI将有问题的机器点灯，以方便辨识，找到机器
後按一下旁边这个开关即可熄灯做检修：
http://goo.gl/3trql
进入安装前要先把Intel C602的散热片装回去：
http://goo.gl/wo3x1
使用ARCTIC MX-2散热膏，具有高可靠度，可以耐八年性能不减，
这次用的是最小的1.5克包装：
http://goo.gl/0zxWi
涂上散热膏：
http://goo.gl/Wz2B4
装上散热片：
http://goo.gl/CQBHh
安装
先把背面IO档板安装到机壳上：
http://goo.gl/sXgfB
EE-ATX主机板共有11个螺丝孔，把相对应位置的铜柱锁上机壳：
http://goo.gl/Nz3G2
主机板放上去後锁上11个螺丝(红圈)，接下来要把机壳上
五个风扇的电源线接到主机板上(黄圈)：
http://goo.gl/F9yGZ
适度地做点整线，左边机壳後方两个风扇的线可以用束线带固定在扇架上(红圈)，右边三
个风扇的多余的线也可以藏起来，下一步要接电源跟前面板的线(黄圈)：
http://goo.gl/Jrsno
先看电源的部分，除了ATX 24-pin，还有两个CPU用的12V 8-pin电源线，
比较少见的是POWER还有一条System Management Bus(I2C)，用来把双备援
电源的运作状况，电源风扇与温度等状态传给主机板。前面板的灯号与开关接头
跟标准ATX不太一样，多了两个网路控的状态灯号与电源/温度异常状态灯
号，一般的机壳都没有这些而外的LED灯可以接，这边用了Supermicro本家的机壳，
有提供完全匹配的16-pin前面板排线。最後在接上前面板的USB线与机壳入侵侦测线：
http://goo.gl/ow5Kf
主机板的安装到这里告一段落：
http://goo.gl/nPi8j
结论
优点：
1. 支援双Xeon E5-2600 CPU。
2. 24条DIMM，最高768GB记忆体。
3. 共四条PCI-E 3.0 x16，且四条都是完整的16通道，另外还有一个x8与一个x4
在x8插槽里。因为每个E5-2600 CPU可以提供40条PCI-E 3.0的通道，
所以两个CPU其实就有80条通道可以用，反观现在的i7-3930K与i7-3960X系列
只有10条PCI-E 2.0的通道。
4. 四个Gigabit Ethernet网路孔。
5. IPMI 2.0远端管理功能。
缺点：
1. 特殊规格的主机板与前面板街头，必须要配合Supermicro本家的机壳
才能发挥最大效用。
这篇写了好久才写完，之後会再写一篇主机板的IPMI介绍与测试。
--
※ 发信站: 批踢踢实业坊(ptt.cc)
◆ From: 140.112.28.73
1F：推 flamedevil :可恶 没钱 09/27 04:03
2F：推 rettoly :超诚意推@@@@ 09/27 04:33
3F：推 pupuliao :连续看完三篇....期待後面实测 09/27 06:23
4F：推 malindorothy:好精彩! 推! 09/27 06:56
5F：推 ICEFTP :缺点可以再加缺USB3.0支援，不可超频 (?) 09/27 06:59
6F：→ goldduck :本来就没的超 09/27 07:38
7F：推 michaelchen1:太屌了~~ 09/27 08:10
8F：推 dre34317 :这个跑分因该有7.9了吧 09/27 08:16
9F：推 NeedGem :这种等级的机器不是拿来超的,是要稳非常久. 09/27 08:24
10F：→ WeAntiTVBS :跑分如果改用Windows 8的话 就是9.9啦！！ 09/27 08:34
11F：推 a951l753vin :四埠的intel网路晶片耶 太惊人了 09/27 10:37
12F：推 yewman :大大太猛了...这不是一般电虾版乡民会达到的境界... 09/27 10:46
13F：推 st3336 :有梦最美阿XD 09/27 11:24
14F：推 pttresident :先推热狗大再来看 09/27 12:05
15F：推 pttresident :看第一篇，基因资料那边没有丛集运算的资源帮忙？ 09/27 12:24
要可以用cluster也要程式本身运算特性适合才可以，例如BLAST系列我就有用cluster，
但是这些程式有没有用cluster其实只是速度问题而已；
不过还有另一类的程式是需要大量记忆体才可以跑的，像是De Bruijn Graph Based的
De Novo Assembly(Velvet, Trinity, ABySS)，是组这台主要的原因，
记忆体不够的结果是连跑都跑不了，反而速度倒不是问题XD
16F：推 ganbaday :除了电池都看不懂 先拜... 09/27 13:16
17F：推 abc0922001 :推~ 09/27 13:30
18F：推 oldandsea :哥 散热膏原来要这样涂哦＝ ＝ 09/27 15:00
19F：→ NeedGem :De Bruijn Graph... 看起来是指数增长的东西 orz 09/27 16:56
※ 编辑: hotdogee 来自: 140.112.28.73 (09/27 17:34)
20F：推 FTICR :散热膏会不会挤太多啊XD 09/27 18:48
21F：→ tn00210585 :那也才一点点... 而且一下就被挤去旁边了 不用担心 09/27 19:13
22F：→ NeedGem :想到自己现在的 i7 也是因为记忆体的问题才去拼的... 09/27 19:14
23F：推 chrisdar :这台是 Romley 耶 09/27 19:30
24F：推 cka :真让人羡慕!!!!不知道拿来打LOL是甚麽感觉 09/27 20:23
25F：推 cka :PTT如果架在这台上 可以上限提高到50万人吗 09/27 20:27
26F：→ vn504856 :太强大了，E3简直小巫见大巫@@ 09/27 21:00
27F：→ s25g5d4 :我只看到满满的愤怒鸟wwwwwwww 09/27 21:50
28F：推 h041807 :看到自家产品好开心XD 09/27 22:47
29F：推 s25g5d4 :楼上有八卦?! 09/27 22:49
30F：推 pttresident :喔喔喔！ 0.0 09/27 23:40
31F：→ annredy :真精彩 但这程度已经需要边看边查字典跟估狗了 09/28 01:05
32F：推 pirrysal :可恶 没钱 09/28 01:49
33F：→ pirrysal :好梦幻喔～真是男人的浪漫 09/28 01:51
34F：→ NeedGem :感觉上是指数的 space... 我光 n^2 就受不了了 orz 09/28 07:08
35F：推 freshmoon :相机居然拍的到CPU上的二维条码... 太扯 囧 09/28 12:25
36F：→ maniaque :新接龙破五万分...:D 09/28 19:21
37F：推 p520888 :朝圣推XD 10/01 00:56
38F：推 sasox03 :增广见闻推 10/24 16:26
39F：推 gmoz :50万人? 不用太神话，这种等级的品牌server一大堆XD 01/28 22:45
40F：→ gmoz :若是在相关产业 这种规格的server很常见 01/28 22:46
41F：→ gmoz :至於能不能ptt 50万人? 我想一台是绝对不够的:) 01/28 22:46
※ 编辑: hotdogee 来自: 140.112.29.6 (07/16 00:35)