Fw: 谁为HPC电费买单?

一个客户的亚太数据中心整体迁移到了上海, 200多个42U的Rack, 规划最大功率2MW, 目前2000多台x86 server. 初步帮客户估算了一下电费开支:

2000多台server, 每台平均功耗300W, 也就是说单纯服务器每年的耗电量为: 2000*300W*24 Hour* 365day = 5,256,000   千瓦时

考虑到精密空调散热以及连接服务器的交换机, KVM等功耗平均占服务器正常功耗的30%, 也就是说5,256,000×1.3 =  6832800 千瓦时.

整个数据中心目前存储将近100TB(含Centera归档设备, 不计入磁带). 每个光纤3.5'磁盘功耗为25W.

估算所有磁盘阵列功耗时, 在数量众多的磁盘数量中, 阵列控制器的功耗反而占用比例很小, 因此略去不计.

以RAID 5来估算, 裸容量为100TB/0.8 = 125TB, 按照146GB FC来估算: 125TB/ 146GB *25W *24Hour*365 = 187500千瓦时

Total: 6832800 + 187500 = 7020300 千瓦时

目前工业用电是0.9 RMB 每千瓦时, 7020300*0.9 = 6,318,270 RMB = 6.3 M RMB

也就是说, 每个月需要花至少50W RMB在电费开支上.  而2000台PC Server的采购成本按照每台平均30K RMB来估算, 每年的电费开支可以用来购买6.3M/30K = 210 units.

每年的电费开支(不含任何其他续保, 管理人员开支), 达到了初始购买成本的210units/2000units =10%.  

目前耗电量为621KW的时候电费开支已经是每年6.3M, 那么达到规划容量的80%也就是1.6MW时,  电费开支将达到16.3M, 也就是说一千六百万.

固然虚拟化可以减少服务器数量大幅降低功耗, 但是对于HPC应用来说, 为了达到系统运算的峰值, 往往需要满负荷运行, 这时功耗往往是最高的.

从维护成本来看, HPC确实是电老虎, 每年维护成本高昂, 也难怪要提Green HPC了.

当然, 归根到底, 服务器功耗无法下降的最大根源在于处理器制造商.

目前的x86处理器一个很大的弊病在于, 系统满负荷的功耗, 跟系统处于idle状态的功耗, 相差很小,

一般一台1U x86服务器, 2 CPU, 4G Mem, 4* SAS HDD, 无其他额外的板卡, 最低功耗也需要200W, 而最高功耗一般在300左右.

等于说, 即使系统不运行任何应用, 你依然要掏出200/300 =66%的电费出来.

期待着下一代处理器能在空闲状态功耗上做出改进, 届时将大大降低HPC耗电。 毕竟, 并不是任何时候都需要满负荷进行科学运算的.
来自: http://www.linpack.org/viewnews-64　　　　　　

所以虚拟化很好　　　　　　

飘过～～～飘过～～～～

root@Ubuntu-Matrix:~# ps aux |grep kvm
root       591  0.1  6.8 662364 563088 ?       Sl   Jun24  32:33 kvm  -hda ubuntu804desktop01.img -m 512MB -net nic,＊＊＊＊
root      2764  0.1 12.6 1143212 1039200 ?     Sl   Jun29  40:34 kvm -daemonize -hda /service/qemu/qemuhd/win200364bit01.img -cdrom /backup/windows/winsrv2003x64cd1.iso -boot d -m 1000MB -net nic,＊＊＊＊
root      5184 11.4 12.8 1148784 1055840 ?     Sl   Jul03 2195:32 kvm -daemonize -hda /service/qemu/qemuhd/win200332bit0.img -cdrom /backup/windows/sc_ws_2003_ent_with_sp1_vl.iso -boot d -m 1000MB -net nic,＊＊＊＊
root      5803  0.6 12.7 1146688 1042136 ?     Sl   May16 566:18 kvm -daemonize -hda win200332bit1.img -cdrom /backup/windows/sc_ws_2003_ent_with_sp1_vl.iso -boot d -m 1000MB -net nic,＊＊＊＊
root      5824  0.0  3.2 379436 269424 ?       Sl   May16  68:49 kvm -daemonize -hda ubuntu804server64.img -m 256MB -net nic,＊＊＊＊
root     18462  1.5  6.7 645640 553528 ?       Sl   Jul12  96:18 kvm -daemonize -localtime -hda /service/qemu/qemuhd/winxp.img -cdrom /backup/windows/winsp2cn.iso -boot d -m 512MB -net nic,＊＊＊＊
root     20046  0.0  0.0   5372   820 pts/1    D+   22:12   0:00 grep kvm
root     27417  0.3 12.8 1147420 1054024 ?     Sl   Jun10 170:03 kvm -daemonize -hda /service/qemu/qemuhd/win2008msdn.img -cdrom /backup/windows/win2008msdn.iso -boot d -m 1000MB -net nic,＊＊＊＊
root     31319  0.5  6.9 677616 569004 ?       Sl   Jun20 209:38 kvm -daemonize -hda /service/qemu/qemuhd/winxpzz.img -cdrom /backup/windows/winsp2cn.iso -boot d -m 512MB -net nic,＊＊＊＊
root@Ubuntu-Matrix:~#　　　　　　

呵呵，刚刚搞的好多虚拟