6月1日上午9点,央视财经频道P2系统制作区管理人员发现DC域服务器(PCDC1)当机,导致制作区工作站无法使用域用户登陆。
为保证正常业务流程,大洋运维人员及时告知相关领导并启用应急预案,有效避免了长时间影响正常工作流程的状况——
6月1日当天,制作区运维人员对网内工作站建立单机组策略,将组策略设置为与域策略相似的方案,以确保制作区正常使用。
6月3日,早10点协助厂商客服人员对服务器进行检查维修,经过排查,发现可能是DC域服务器主板和RAID卡损坏,导致系统无法正常启动,最终协商晚9点进行硬件更换。
当晚,厂商对服务器主板以及RAID卡进行更换并测试,服务器仍然无法正常启动,后将RAID卡附属的缓存以及缓存电池进行更换并测试,系统恢复正常;11点左右,进入系统测试,发现DNS控制台中PCDC1与PCDC2均报错,排查后发现服务器未识别网卡,逐步检查后发现是BIOSS设置中网卡被禁用,调整后重启,问题得以解决。