小程序工程师避而不谈的5大混合云运维困局

　　去年寒假，我蹲在杭州城西那个老机房里听告警——不是听声音，是听节奏。告警灯在机柜顶上一跳一跳，跟心跳似的，但比心跳慢半拍。窗外下着冻雨，水珠在玻璃上爬得特别慢，像胶水拖着。张工蹲在冷通道口啃包子，韭菜馅的，油沾在他工牌挂绳上，黄黄的一小片。我没动，就盯着他右耳垂上那颗痣，随着咀嚼一晃一晃。

　　小程序工程师说“云原生”三个字的时候，嘴角是往上提的，手还习惯性点手机屏幕边缘——我见过七次，全是同一个动作。可他们没人告诉你，当小程序突然爆量、后端服务在阿里云扛不住、自动切到自建K8s集群时，那个istio的destinationrule压根没配灰度权重，全流量一股脑砸进老版本Pod里，连重试策略都还在用v1alpha1的旧语法。这个我敢打包票：你去翻去年十二月十六号凌晨三点十七分的日志，error里写的明明白白是“unknown field ‘retries’”。

　　李敏当时在视频里笑：“我们接口层已经抽象干净了呀。”她手指头还翘着，像弹钢琴。可三小时后，监控里redis连接池打满，查下来居然是tao-bff服务里硬编码了127.0.0.1:6379——就写死在Spring Boot的application.yml里，而这个配置文件压根没进ConfigMap，更别说加了混合云多环境标识。我截图发给她，她回了个捂脸表情包。后来她在钉钉群改口说“架构上支持”，没提那行代码删了没。我说不准。真的说不准。

文章配图，仅供参考

　　那天下午四点零八分，运维平台弹窗报错，说是TKE集群API Server证书过期。其实没过期，是时区漂移——腾讯云那边用UTC+8，我们IDC的NTP服务器校的是北京时间，但中间混了一台旧物理机跑的是UTC。所以证书校验时差出四十四分钟。这事儿查了五十七分钟。其间王磊接了个电话，左手一直捏着保温杯盖子转，转了三圈半，没拧开。桌上那份黄焖鸡米饭凉透了，汤凝成半透明的膜，底下浮着几粒没吸饱汁的香菇丁。

　　还有日志。他们都爱说“所有日志上SLS”。好，真上了——小程序前端埋点日志、后端access log、网关traceID、istio access log、redis slowlog、MySQL general log……全进了同一个project，不同logstore命名规则五花八门：有的带env，有的带region，有的带service name缩写，有的干脆叫“backup_2023”。查个链路？先筛三次正则，再手动对齐timestamp字段的毫秒位。我原以为至少会统一时区格式，结果发现连年份都分两种：2023-12-25和23-12-25并存，同一个系统里。没人管。谁也不认领。

　　上周五我路过测试部，听见两个实习生讨论压测方案，说“直接把微信开发者工具连本地Docker就行”。我就站门口听了十八秒。其中一个人左手一直在摸裤兜，掏出又塞回去，反复四次，最后拿出来的是一块皱巴巴的蓝莓味硬糖。他含着糖说话，含混不清，但词儿挺准：“混部资源调度……弹性扩缩……”。他不知道隔壁IDC机房里那台ECS实例上，kubelet cgroup memory.limit_in_bytes被内核悄悄截断过一次，因为数值超了uint32上限——这事发生在去年暑假，修了，但没进文档，只留在一个临时wiki页面，标题是《某次奇怪OOM排查备忘》，权限设成了仅限自己可见。

　　最搞笑的是证书更新流程。公有云上的Let's Encrypt续签是全自动的；私有云上我们跑acme.sh脚本，要手动确认CSR签名；而微信小程序后台那套HTTPS配置……还得人肉登录mp.weixin.qq.com，在那个灰色按钮上点三次，中间不能太快，否则页面会卡死。去年寒假那次证书过期，就是因为有人点了第二次就切窗口回微信回消息，漏掉了第三次点击，整个过程卡在loading状态持续三百七十二秒。没人报警，连健康检查都没触发，因为探测路径被CDN缓存了。我亲眼看见孙婷盯着那个灰色按钮看了四分半钟，手指悬在半空，指甲盖有点发白。

　　其实不怪他们闭嘴。说了也没用。说了你要么帮他们改，要么被说“你们运维太重”，改了又马上迭代，改完上线三天，产品经理说新需求要对接抖音小店SDK，整个网络策略重画——上个月补的那二十条iptables规则，又得一条条删。删到第十条的时候，我发现有两条是重复的，但来源不一样：一条是我们自己加的，一条是云厂商agent自动生成的。谁生成的？不知道。哪个优先级高？也没人验证过。我懒得问了。

　　对了，机房空调坏过一回。不是全坏，是左半边制冷剂泄漏，导致东侧机柜温控飘高两度。这事跟我吐槽的五件事一点关系没有。就是那天我进去的时候，听见压缩机嗡嗡声忽然变尖，像指甲刮黑板。我停下看了眼温湿度屏，没拍照，也没记。后来修好了，换的还是老型号，听说是去年库存的货。这事跟混合云没关系，但我记得特别清楚。

　　现在我把告警收敛阈值调松了。有些错，让它报。报多了，自然有人来问。或者不来问，也挺好。优胜劣汰嘛。我抽屉里还留着两包没拆封的薄荷糖，绿色的那种，跟张工包子上的韭菜油颜色差不多。下次谁再来聊“全链路可观测”，我打算先递一颗过去，看他剥糖纸的动作，能不能看出是不是真懂。

（编辑：站长网）

【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容!