物业机房的夜班人
老赵今年五十二岁,在物业行业干了快二十年,管着三栋写字楼的弱电系统和十几台机房服务器。用他自己的话说,这活儿就是 "楼不睡,我不睡"。
以前他的夜班是这样的:手机调最大音量放枕头边,凌晨两点如果监控平台弹出告警,他就得爬起来,套上衣服骑电动车赶去机房。冬天还好,穿着厚棉袄不算太遭罪;夏天最折磨人,从空调房里钻出来的那一刻,湿热的空气像一块湿毛巾捂在脸上,骑到机房浑身都是黏的。
到了现场,十次有八次不是什么大问题 —— 某个网络交换机宕了重启一下就行,某个存储阵列报警其实是硬盘指示灯松了,甚至有一次大半夜跑过去,发现只是机房空调温度传感器误报。
"那时候我就想," 老赵磕了磕茶杯,"要是我能在自家电脑上看到机房那些屏幕,哪用得着大半夜来回跑?"
这个想法在三年前变成了现实。公司统一上线了一套综合运维平台,核心就是远程控制 —— 机房里每台服务器都装了远程客户端,他在家用笔记本就能连上去看状态、做操作。
刚开始他还不太放心,每次告警响了还是忍不住往机房跑。直到有一次冬天深夜,监控平台弹出核心交换机 CPU 使用率 98% 的红色告警。老赵坐在家里的书桌前,远程登录到交换机管理界面,发现是某个楼层的网络环路导致广播风暴。他远程定位到具体端口,一条命令关掉,CPU 使用率立刻回落到正常范围。
整个过程八分钟。
"搁以前," 老赵算了算,"我从被窝里爬起来穿衣出门骑车到机房,怎么也得四十分钟。这四十分钟里,整个写字楼的网络都是瘫的。"
从那以后老赵彻底想通了。他给自己定了个规矩:先远程诊断,判断是软件层面的问题就直接处理;只有硬件故障、线路问题这种必须动手的,才出门跑现场。
这个规矩让他的夜班质量发生了质变。现在十次告警里有七八次他在家就解决了,真正需要出门的两三趟也是带着明确的判断去 —— 比如他远程看到某台服务器的硬盘物理指示灯报错,直接带着备件过去换,不用到了现场再排查半天。
去年冬天有一场大雪,积雪没过了脚踝。凌晨三点监控平台又响了,这次是 B 座机房的 UPS 电池告警。老赵远程登录进去查了日志,判断是电池温度传感器的数值漂移,不是真的故障。他把告警阈值调整了一下,又远程给机房空调设了个定时升温,然后安心回去睡觉。
第二天他顺路去机房看了一眼,一切正常。
"以前干运维,拼的是谁能吃苦、谁跑得快。" 老赵现在逢人就说,"现在不一样了,拼的是谁先把问题看清楚。远程这东西不是偷懒,是让你把劲用在刀刃上。"
他今年打算退休了,但带出来的两个徒弟已经把远程运维的流程摸得门儿清。他说,自己这辈子最正确的工作习惯,就是学会了 "先连上去看看,再决定跑不跑"。
