的需求日益增加,对数据中心的要求不断提高。众多行业也都在建设各种不同用途、规模、等级的数据中心,数据中心在政府机构以及电信、银行、证券、保险、互联网等行业中不断地提高自己的驱动力。数据中心作为一种物理载体在企业发展和运营中的作用越来越突出。
数据中心供配电系统作为数据中心基础设施最重要组成部分,已成为数据中心等级判定的主要参考标准。数据中心供配电系统架构,主要包括市电引入(10kV、110kV引入等)、高压变配电系统、后备柴油发电机系统(10kV、400V发电机组等)、市电/备用电源自动转换系统(中压切换、低压切换等)、低压配电系统(低压配电、楼层配电单元等)、不间断电源系统(UPS、240V、48V系统等)、列头配电系统、机架配电系统,以及电气照明、防雷及接地系统等。
数据中心从物理属性看,是IT设备的载体;从商业属性看,是为其服务的对象,即数据中心为各类用户的设备或信息提供保障服务。数据中心供配电系统架构选择,主要考虑用户设备类型、相关设备保障等级要求、相关标准及规范要求、绿色数据中心PUE指标要求、节能减排要求、数据中心选址区域自然条件特点、建设与运营成本的平衡等多种因素。
以通信行业数据中心为例,数据中心主要有自有数据中心和商用数据中心两大类。针对通信类,主要设备有传输类设备(国际传输干线、省际传输干线)、数据类设备(存储系统、云平台)、支撑类设备(计费系统、信息系统)等,相关设备供配电系统结构,主要考虑相关国家对通信系统建设及运维标准要求;商用数据中心主要包括政府、银行、企业等用户设备,其数据中心供配电系统及供电保障等级主要根据客户具体要求、客户设备规模、客户设备的租赁形式等来总体确定。
在数据中心供配电系统实际实施阶段,需要制定合理规划决策,评估需求与风险,进行不同方案的比较,并考虑满足未来发展的需求。
数据中心主流的各类供配电建设标准及规范,以及用户对供配电结构的要求,主要是对供配电保障提出要求。针对保障要求,从实施角度出发,能够提出多种不同的供配电结构、系统架构的总体规划与决策,对后期供配电可靠性、可用性有决定性的影响。在规划与决策阶段,一方面要针对不同系统结构的特征、投资总额、运营成本、系统优缺点等做充分的分析论证,另一方面也要考虑供配电系统逻辑关系的复杂度、对运维的要求、系统可扩展性等因素。
数据中心供配电架构应该同数据中心全生命周期一样,从概念、系统规划、决策、工程建设、交付运营等方面,是一个动态的、与时俱进的过程。现在行业有一种认识,认为供配电系统可靠性从供配电系统图上,计算结果越优,就越能提高可靠性。实际情况并非如此,而是数据中心架构的可实施性、可维护性等对设备供电连续性保障有很大影响。
供配电系统的实现与落地,必须要经过建设与施工,因此供配电系统带有较为明显的工程属性;供配电系统可靠性最终是在投入运营后,集中体现在系统运维阶段。供配电架构的设计与选择,一方面必须考虑工程施工过程的可实施性,如电缆布放距离、多层叠放、交处理、各类油电水气管路隔离措施、隐蔽工程处理等,另一方面还要考虑运维可行性,如电气设备物理位置与电气逻辑关系匹配、巡检路由规划、应急操作接口预留设置等。
目前,数据中心行业有比较全面的可供参考的相关技术规范,政府、行业、企业都根据各自领域数据中心的特点,发布了相关的规范、标准或指导意见。目前,数据中心主要参考的规范有工程建设国家标准《GB50174-2008电子信息系统机房设计规范》以及美国国家标准学会(ANSI)2005年批准颁布的《TIA-942数据中心电信基础设施标准》。
前者是我国针对于数据中心建设设计的主要标准规范,同时,为适应电子信息技术发展,新的国家标准正在编制;后者是目前国际数据中心参考的主要标准,该标准包含的条款也是随着建筑技术和电信技术的进步在不断修改和更新。
从相关标准的应用范围看,国际上参考TIA-942将数据中心等级从低到高分为TierI、TierII、TierIII、TierIV等四个级别,在国内参考GB50174将数据中心等级从低到高分为C、B和A三个等级,为了达到不同的等级,供电系统中采用不同的供配电方式。根据相关条文,不同标准的供配电系统结构特点如表1所示。
根据相关国际国内标准,规定了不同数据中心等级下,对应供电系统的原则及方式的演变,特定等级的系统,只规定了应满足的最低要求。
在规划建设阶段,在不同条件下,设计时选用系统结构需考虑总体投资规模、保障要求、节能指标、运维管理目标等多种因素综合分析,并在相应等级标准原则下进行优化设计。
目前,数据中心行业主要有以下三种典型供配电系统架构:基本型、可维护型、故障容错型等。三种典型数据中心供配电结构的特点如下:
上述三种典型供配电结构及特点,主要是从系统市电引入到所有末端设备供电的供电逻辑特点进行总体阐述,并不表示某种结构的优劣性。如对于保障等级要求不高的IT设备,基本型供配电结构完全满足供电保障需求,其系统结构在投资成本、电力设备空间、节能效果等方面,都明显优于其他两种结构;在保障等级较高的数据中心,也存在较低保障等级IT设备用电情况。
数据中心供配电系统架构的选择,应做整体考虑,根据IT设备供电保障等级和各类不同保障等级的IT设备分布情况,针对性的选择合适的、匹配的结构,才是数据中心供配电系统架构最终决策的关键点。
中国移动浙江信息通信产业园数据中心包括110kV变电站一座、柴油发电机房一座、数据中心机楼四栋。数据中心总供配电架构有以下几个部分:110kV配电系统、10kV配电系统、10kV发电机并机供配电系统、数据中心机房电源系统等。产业园数据中心基础设施分布示意图如图2所示。
园区自建110kV变电站,引入两路独立110kV市电,站内配置两台110kV/10kV变压器,每台容量50000kVA,两路常供。变电站两路110kV进线kV中压系统采用单母线分段接线,设母分;数据中心每栋配置一套独立中压系统,采用单母线分段接线,不设母分;每套中压系统分别从变电站两段10kV母线kV市电电源,两路常供。
数据中心低压配电系统,采用变压器(1+1)方式运行,每套低压系统配置两台2000kVA的10kV/0.4kV变压器,两路常供。低压馈电采用单母线分段,设母联,“两进线一母联”采用电源自动转换系统,实现自动切换控制。
共配置18台10kV/2400kW柴油发电机组作为数据中心备用电源,配置一套具有多种并机模式及控制功能的并机控制系统。发电机组并机系统采用单母线分段接线,设母分。并机系统可实现自动启动、自动并机,实现加、减机控制、负载自动投切控制等功能。并机系统具备两种工作模式:
数据中心每栋从变电站引入两路10kV市电电源,从发电机房引入两路10kV备用电源,每路容量均能满足该栋数据中心满载负荷。数据中心每栋分别配置两套独立市电/油机10kV切换装置,切换装置设电气及机械互锁。
数据中心4套独立10kV系统供配置8套独立的市电/油机切换装置,集中布置在数据中心1#楼和4#楼两个配电室,缩短切换操作时间。
数据中心机房电源系统,根据业务类型、负载种类、客户需求的不同,提供多种供电模式,包括48V直流、2N交流UPS、交流UPS+市电直供、240V直流+市电直供等模式。
当前,大型数据中心IT设备在积极采用新型供电方式,进一步降低供电损耗。由于高压直流供电系统,在投资成本、系统效率、占地空间等方面,较交流UPS具有更大的优势,已得到较大规模的推广和应用。
目前,240V直流供电技术的可行性已经得到较好验证,相应的理论分析和实践经验也在不断研究和总结中。240V直流供电技术已经成为行业热点,并在不断改变传统数据中心供电以交流UPS为主的格局。其中,基于240V直流技术衍生的“240V直流+市电直供”供电架构,进一步提升供电效率,节能效果更为显著。
IT设备两个供电路由,其中市电直供输入屏、240V直流系统输入屏均设置双电源切换装置。以上三种供电结构如图4所示。
上述三种240V直流+市电直供供电结构,从供电等级看,均属于可维护型供电结构。系统结构的演进及优化,通过采用增加较小投资成本,实现较大幅度提高系统可用性的目标。通过在不同位置增加双电源切换装置,增加部分设备双路由供电,一方面提高系统的可维护性,另一方面提高系统中部分设备的故障应急抢修、计划性停电维护期间的供电连续性。
1供电系统的低压变配电部分采用集中供电方式,布置于一层配电室;数据中心各层机房分别设立设置楼层配电柜,低配与楼层配电柜间通过密集型母线两路市电电源均通过双电源切换后,分别输出至设备市电直供列头柜,或经直流电源输出至240V列头柜,有效地提高了市电直供路由的可靠性;
由于UPS设备结构复杂,因此自身容易发生故障,设备冗余可以提高可用性,UPS系统便有了N、N+X等多种供电架构。较高等级数据中心供电结构中,为了消除单点故障,对重要保障负荷采用2N冗余系统。
2N冗余系统是由两套或多套UPS系统组成的冗余系统,每套UPS系统有N台UPS,设备的总容量为系统的基本容量。该系统从交流输入经UPS设备直到双电源输入负载,完全是彼此隔离的两条供电线路。也就是说,在供电的整个路径中,所有环节和设备都是冗余配置的。正常运行时,每套UPS系统仅承担总负荷的一部分。这种多电源系统冗余的供电方式,克服了单电源系统存在的单点故障瓶颈,保证其供电可靠性,采用2N冗余供电系统,其可用性得到明显提。