机房搬迁后跨机房 IPSec VPN 大包分片黑洞,应用小包正常但大包超时,PMTUD 黑洞 + MSS 钳制缺失导致。
etcd 定期压缩后 WAL 仍持续增长,fsync 延迟偶发飙升,导致 API Server 间歇 5xx,根因定位到 WAL 文件过大与磁盘 I/O 抖动。
服务崩溃循环与外部扫描流量两类触发都把根分区写满:默认 RateLimit 过宽、SystemMaxUse 为空、单文件无轮转。显式硬配额、收紧限速并前置日志聚合后根治。
核心服务 unit 配错端口启动秒退,Restart=always 无退避把整机 CPU 与 journal 打爆,靠 StartLimit 与降级策略止血
journald Storage=auto + SystemMaxUse 未生效,日志持续写入根分区导致 df 告警,排查发现配置被 override 覆盖。
补丁服务器四年来从未清理数据库,SUSDB 膨胀到 42GB、索引碎片超 90%,终端检查更新频繁超时报错。清理、收缩、重建索引并建立月度维护后恢复。
内网多个HTTPS服务突然不可访问,浏览器提示证书错误,排查发现是内部CA签发的通配符证书悄然过期,且没有任何告警通知到运维团队。
节点磁盘压力触发 kubelet 驱逐,容器日志与镜像未治理致业务 Pod 批量被删、节点反复 NotReady。
客户陆续收到冒充公司域名的邮件,根因是 SPF/DKIM/DMARC 均未配置,收件方无法判断发件人真伪。梳理发信源、补 SPF 与 DKIM、DMARC 逐步收紧到 reject 后收敛。
员工按钓鱼邮件提示输入设备码后,邮箱被异地读取,根因是租户允许 OAuth 设备码流程且未加条件访问限制。禁用设备码流、吊销令牌并补 CA 策略后收口。