三、开工前的准备
3.1 施工材料的准备
施工材料包括:1、施工设备:主要指 UPS、空调、配电柜等大型设备;2、施工材料:包括了电缆、冷冻水管道、弱电线缆等主材以及固定件、胶水、铜接头等辅材;3、施工工具:包括运输推车、扳手、热熔器等施工时需要使用的工具;4、应急工具:主要是在正常施工情况下不会碰到,但在发生施工事故或需要使用应急手段时使用的工具。
在施工材料准备阶段,首先要确保的是施工设备的质量。由于施工设备是改造的重点,且一般不会有备份设备,在前期准备时确需提前用其他方式检测确定是施工设备的可用性。确保在设备正式上线后不会出现因设备无法使用导致启用应急预案等现象。在准备施工材料、施工工具及应急工具的过程中,需要提前对施工整个过程进行模拟,尽可能将所有工程可能碰到的各类工具、应急工具准备在内。同时对于部分重要的施工材料和工具,需要提前准备多余备件,确保各类工具及材料充足。
施工材料的准备还包括了施工材料的提前预制。对于在线机房改造类项目,如果能够对施工现场事先勘查并提前预制材料,能够大大节约机房停机时间。
3.2 施工组织
作为一个工程的总包单位,一般都会设计总包内部各专业团队的实施组织架构图,明确各分包专业的人员配置,技术联络人等。但由于整个工程中不仅涉及了总包单位,还涉及周边工程配合团队。因此,作为工程建设方,必须在施工前将所有牵涉的施工、配合、保障团队的联络方式准备妥当,以确保在整个改造项目中各团队所有人员能够明确各自工作职责。另一方面,在线机房施工一般实施时间都非常紧,因此配合人员的应急响应效率将直接影响项目时间,而大多在线机房改造施工均会利用周末或半夜等业务低峰期间实施,提前对所有相关人员的进行动员,能够有效的提高应急情况下的相应速度,为在线机房改造节省宝贵的时间。组织架构表中所有的参与的团队均要设定主备联络人,并需要提前确认联系方式的正确性,以防止联系方式错误等低级错误影响到项目的实施。
一般工程项目对施工队的组织直接由总包单位根据人员配置情况自行安排。但考虑到机房改造工程的特殊性,机房施工人员需要在技艺上、意识上均符合到机房施工的特别要求,而对于改造的核心工程,施工员的技艺也是至关重要的。尤其是对于一些特殊工种(如动火焊接等),当施工员技术能力较强时,一次施工通过率较高,无需检验后返工修补。对改造类工程能够节约许多时间,对施工风险也能降低许多。因此,在设计施工队伍中,关键工程的关键岗位,必须要求施工队派遣技能最强的施工队员。
大型在线改造完整组织架构示
3.3 工程应急预案的准备
施工项目与软件或系统项目不同,不能够通过备份等手段回退至项目起点,很多施工项目一旦开始施工,破坏了原有接口就再也无法回退。因此,在线机房改造项目中,往往需要制定临时的工程应急预案。譬如改造空调系统时,需考虑当工程无法按时完工,而业务又需要开始提供服务了,那就需要提前准备应急制冷等预案,以防在施工意外导致 IT 系统无法提供服务,企业业务无法正常开展。一般需要设计应急预案的工程为 IT 服务不可或缺的电力及暖通相关项目。
3.4 文档准备
在项目前期已经进行了详细勘察和方案制定后,施工前需将施工所需的所有文档与材料准备就绪。如施工许可证件、动火相关证件、操作相关证件等,均为施工现场不可或缺的材料。如不提前准备落实,在施工现场发现证件缺失,轻则浪费施工时间,重则直接导致施工无法继续。如无证强行施工,则面临违规操作的风险。
施工相关证件外,有些机房改造工程需要停机进行,那就意味着原先准备的电子文档将极有可能无法使用。因此一般建议在施工前将施工计划、工程联络人表等全部留存纸质版,并打印分发于各现场相关负责人,保证所有改造计划切实落实到位,不流于形式。
四、施工现场管理
4.1 施工标记管理
施工标记管理包括了施工功能区域标记、设备及施工材料的标记、完工标记等方面。
1) 施工功能区标记:由于在线机房改造的项目施工人员需要出入较为重要的机房核心区域。由于并非所有施工人员都对施工现场的各区域非常清楚,因此非常有必要对以下几个区域进行标记:(1)施工区:施工区指的是实际施工所触及到的范围,确保施工人员明白只有在施工区域才需进行操作;(2)生产警示区:该区域即为与施工无关,但施工人员可能接触到的范围,因此需要特别警示,要求施工人员在实际操作中务必避免侵入该区域,对生产设备造成损坏;(3)施工材料区:该区域则是放置施工材料的区域,目的是为了保证施工区的工具材料专用,避免造成原有备件与改造施工材料混用,管理混乱;(4)高危设备区:在施工当中如氧气、乙炔等高危易爆品需专门指定区域按照消防及防火要求进行摆放,如条件许可,最好与一般施工材料分开放置;(5)辅助区:辅助区主要提供与施工人员休息、喝水、餐饮等,该区域的明示能够避免施工人员将食物、水等带入机房,以免虫害鼠患。
2) 设备及施工材料的标记:设备及施工材料的标记是对不同设备、不同型号、不同规格材料之间匹配情况进行标记。由于施工现场的施工材料(电缆、铜管等)可能需要穿越楼板、桥架、管线等各类隐蔽区域。当多个设备同一型号的材料同时穿管,如果不做标记,可能会出现错接的现象,轻则返工重修,重则设备烧毁。因此,对施工过程中,施工材料与设备的配套标记非常有意义。
3) 完工标记:完工标记移交运维前的重要事项,当设备安装及调试完毕后,所有设备及其配套均已固定到位。工程人员撤场前需要将已调试完毕的各类设备、管线进行标记、编号并交底运维人员。由于是机房在线改造项目,许多设备标记信息需要承继施工时的标记,否则一旦投入施工结束后,即投入运行,一旦标记错误,难以在运行期间检验修订,对未来运维产生较大的风险。
4.2 现场的人流管理
系统建设项目的相关人员一般都会有固定的操作终端,实施人员也集中于固定区域进行建设和配置实施。而施工项目则将有大量的工程施工人员、监理人员等频繁的进出施工现场,而在线机房改造项目的施工现场往往就是设备运行现场。而大部分施工人员对现场不了解、不熟悉,安全意识也较为薄弱,可能会出现施工现场进入无关区域。因此,为了确保生产安全运行,应配合标识对施工人员流向进行设计。同时,对所有进场施工人员、监理、配合人员,需佩戴明显的身份标识,以便于安保人员进行查验和放行。
4.3 运输通道管理
设备运输通道包括了设备从卸货平台至机房内的全部行进路径。在许多改造项目中,往往在考察项目现场时,对项目现场进行了深入的考察,但对运输通道考察较为疏忽,导致过道转弯不足、通道门或电梯门高度不足、过道承重不足等问题。所以前期考察时,对运输通道要特别关注,如改造时需同时对过道进行调整,应同时安排入施工整体计划。此外,对于超重设备的运输,一定要充分考察运输通道的楼板、地板、电梯等承重标准,提前做好相应运输方案。
4.4 施工安全管理
除了动火、登高、坠物等传统意义上的施工安全管理外,在线机房改造项目更重要的是对在线机房运行中可能碰到的特异性安全问题进行管理和教育:1)施工安全的教育:相比系统建设项目,工程施工人员普遍存在随意性较强、安全意识薄弱等情况。而且由于在线机房改造经常处于 7×24 小时连轴工作,人员的更替频繁,让所有工人充分意识到本项目的重要性,可以提高施工质量、减少施工风险。定期工前会、总结会等都是效果较好的教育形式,不仅可以布置工作内容、工作要求、还可以对上一阶段的工作进行总结回顾,调整具体施工部署。
2)机房施工用电安全:在线机房改造项目现场往往有生产 UPS 电源插座,如不慎误接入了生产 UPS 电源,在施工过程出现跳闸,除了对施工造成影响外,将对生产中的 IT 设备也产生影响,因此需要额外关注和注意。
3) 防火管理:对于施工来说,防火的管理一直是重中之重。一般施工中,在动火前需要准备相关防火措施,检查施工证、动火证、操作证等,在施工过程中全程陪护高危操作。由于在线机房改造施工中,机房往往处于运行状态,消防报警等子系统仍处于监控状态。考虑到机房消防一般采用双重检测(温感及烟感),且很多采用气体作为灭火介质,如果出现误喷放不仅会造成较大的经济损失,若人员未及时撤离,还可能造成人员的伤亡。因此,在在线机房建设项目中的防火管理工作,要更加重视,并将所有措施落实到位,确保万无一失。
五、施工的验收与验证
5.1 施工的验收
在线机房在改造完成后,业主方总是希望尽快恢复生产。但事实上,如果忽视施工质量的检验,即使本次顺利投产上线,也可能在未来埋下安全隐患。
1)施工现场的验收:在线机房施工现场的验收工作需要关注两个问题:(1)、各接驳口施工质量。由于很多在线系统改造的新建部分都能够与普通工程一样进行验证,而接驳口处由于需要与原有系统对接,经常出现无法进行各种模拟测试,难以充分验证,因此对于接驳口的工程质量需要额外注意,可以增加安排有经验的质检人员进行额外人工复检。(2)、施工现场清理。由于机房内属于气流强循环场所,而施工产生的铁屑,粉尘,一旦空调恢复运行,将会进入机房内空气循环,轻者堵住风扇,造成散热问题,重者直接造成设备短路故障。因此,在验收并恢复生产运行前,需要对施工现场进行彻底的清洁。如整个施工过程中空调无法关闭,空气处于流动状态,那就需要在进行切割、焊接等操作时增加吸尘器等控尘措施。另外,在恢复运行的一段时间后,对空调滤网进行更换。
2)施工文档的验收:作为一个改造工程,施工文档的验收显得尤为重要。由于现场隐蔽工程实施环境限制,施工时很可能发生方案临时变更(譬如接驳口位置调整、走线方向等)。而在隐蔽工程实施完毕后,又会重新恢复封闭状态。因此,在施工完成后,对竣工图纸需要特别关注,必须要将所有现场更新改造部分全部更新在图纸上,使图纸永远保持与现场情况一致。如果有一次图纸未能及时更新,对于未来的维护和改造,将造成巨大的困难。
5.2 改造后的验证及评估
在线生产机房改造完工后需要对整个机房进行两方面的验证评估:
1)改造效果的验证。机房改造的根本目的是为了解决现有机房存在的问题或风险。因此,在改造完成后,应对改造效果进行评估。评估的过程可以通过数据测试比对、系统的整体分析、模拟场景等方法,整体评估竣工后的系统是否已达到改造效果。一般在保证安全的前提下,模拟实际场景的评估方法效果最佳,能够实际测试改造的效果,例如,空调扩容项目后,可人为模拟空调设备故障,测试在故障情况下,机房内的制冷能力及气流组织分布;电力改造后,也可模拟相关电路故障时的切换,应急步骤等。经过实战演练能够最大程度还原实际需要解决的场景,也能真实的检验出改造后的效果。
2)改造后机房适应性调整。在线生产机房改造完工后,整个系统与原有系统或多或少发生了变化。由于机房各子系统的运行大都是处于一个动态平衡状态,一旦有某一环节发生了变化,整个系统将会找到新的平衡。譬如空调设备更新,即使是同容量的更替,也有可能因新型空调在制冷、送风、控制逻辑等与原有空调存在不同,原有的机房内动态平衡就被打破,需要根据最新空调运行工况配套调整整个暖通系统的相关参数。对于考虑节能的企业,更需要重新评估改造后,现有配置是否满足企业对节能的要求,是否可以有更大的空间调整改进。
六、总结
从 IT 运维角度来讲,在线机房的改造类项目属于较为重大的变更,而且极可能对 IT 服务产生较严重的影响。而许多企业因为管理职责分工原因,机房运
维部门、IT 运维部门、工程建设部门各自管理,工程建设部门在牵头建设改造项目时,往往可能评估不全面,无法从 IT 业务服务角度,全方面评估改造的风险。这样一来,如果一旦工程中问题时,将会造成较为严重的后果。因此,在进行在线机房改造类工程时,企业一定要予以重视,并配备充分的人力资源,从组织架构上予以保证,才能保障在线机房改造项目才能顺利。另外,作为工程项目中比较特殊的改造项目,每个项目所面临的施工难点也各有不同,本文仅就常见的需要注意重点问题进行了总结,但具体的项目难点还需根据每个项目实际情况进行具体分析,制定针对每个不同项目的解决方案,才能更有针对性的保障企业IT 服务的稳定持续运行。
作者:中国证券登记结算有限责任公司上海分公司
联系客服