跳到主要内容

嘴硬了半年,上周认了

夜班大鹏
夜班大鹏

· 阅读约 2 分钟

凌晨两点二十,刚从机房上来,膝盖还是凉的。趁着这会儿告警没响,说个事,说出来有点丢人。

就是让 AI 直接连机器看现场这个事,我一直不肯。

我是这么想的:它给我写脚本,那脚本我一行行看得见,能改能存,跑之前我自己审一遍,出了事我翻得出来是谁写的第几行。让它直接连上服务器去看,它看了什么、翻到哪、敲了哪些命令,我全不知道,就凭它最后给我一段总结,这我接受不了,尤其生产机器上。这话我跟人说过不止一次,白班的兄弟拿新工具来推,我都给挡回去了。

上周三凌晨,不对,是周四,反正就是那两天里的一天,一台跑批的机器,磁盘从七成涨到九成三,告警从一点半开始响,压掉又响。我手动 du 了两遍,一层一层往下翻,数据目录是大,可都是该大的,业务那边的东西我心里有数。翻了快两个小时,愣没找着是哪儿冒出来的。那台机器上光二级目录就六十多个,我 du 一次要等四十秒,四十秒里就干坐着,盯着屏幕等它出数。

四点多我给白班留了言,说这台机器先盯着,白天谁有空再查。发完自己也不太甘心。

然后我就想,让它上去看看吧,只读。

权限是我配的,新开了个账号,只给读,能 ls 能 du 能看日志,删不了改不了,连 cd 到人家业务目录里都不行。配的时候我还嘀咕,这不还是让它上去了。

它上去花了不到十分钟。找出来的东西也不复杂,/var/lib 下面有一个批处理任务的中间文件目录,那任务正常跑完会自己清,二十多天前有一次跑失败了,中间文件没清掉,从那以后每天攒一点,攒到那天晚上正好把磁盘顶上去。我 du 的时候是从这个目录的上一级看的,总量看着正常,因为底下另一个大目录一直是那么大,把这块的增长盖过去了。它没按总量排,它按增长量排的,按天对比,一拉就出来了。

我盯着谁最大,它盯着谁在变大。这话说出来好像挺简单,但我在那台机器上蹲了俩小时没想到。

后面就好办了,清掉,给那个任务加了个失败告警,就这么收的。

不过丑话我也说了,我还是不给它写权限,脚本还是它写我审,跑还是我自己跑。只读这个口子开着,够了。真有一天我连审都懒得审了,那再说。

先这样,困了,四点还有个巡检。

夜班大鹏
夜班大鹏

运维,常驻夜班。凌晨的机房很安静,适合写点东西。

查看主页 →