元数据驱动运营中心服务器响应提速40%

　　告警响的那一刻，我正把最后一口泡面汤嘬干净，筷子搁在显示器边沿，汤渍滴在键盘F键上——反正这键盘早该换了，三年没换过键帽，Ctrl 键油得能反光。

　　值班表上写着“老张顶夜班”，结果十一点半他电话打进来：“哥，我家娃发烧到三十九度二，我得走。”我说你走吧，我来。他说“谢了”，挂得比告警音还干脆。我盯着屏幕右下角那个刚弹出来的红框：运营中心API平均响应延迟突破4.8秒，P95卡在7.2——这数字我闭眼都能写出来，去年十一月之前它压根不会破3秒。

　　其实我原以为是磁盘IO毛刺，顺手敲了两行iostat -x 1 5，眼睛扫着那几个%util值，心里还嘀咕：挺久没清归档日志了，是不是慢查询把wal撑爆了？结果一查pg_stat_statements，前五耗时SQL里三个带“metadata”前缀，两个带“schema_”——全他妈是元数据接口。我懵了两秒，端起泡面碗又放下，汤凉了，面坨了，窗外天快亮了，机房冷得人鼻尖发木。

　　那晚我们仨——我、小王（干了五年DBA）、还有开发那边叫陈哲的——在工位围成三角，他拿笔记本连着Kibana投屏，我敲着curl -X POST http://meta-svc/v1/refresh，小王在后台kill -9 掉了三台机器上跑着的老元数据同步进程。陈哲说：“你们真敢停？”我说：“不杀它，它就杀我们。”他笑了下，笑完又拧眉：“可刷新后schema缓存没热起来啊。”我回他：“那就再刷一遍，刷到缓存认得清自己姓什么叫什么为止。”

　　不是所有元数据都配活着。去年十一月那波压测，我们拿三台机器做AB对照：A组走传统中心化元数据注册+手动打标+定时全量拉取；B组推“优胜劣汰”逻辑——字段热度低于阈值自动降权、接口调用失败超两次就熔断、Schema变更若无下游确认，四十分钟内强制回滚至最近稳定快照。上线第一周，B组机器CPU毛刺少了六成，但没人当回事；第二周运维群里有人说“怎么监控图表看着平滑了”，我说“平滑？那是血槽空了才没波纹”。结果第三周，A组里一台跑了四年的老旧元数据同步服务崩在凌晨两点十七分，告警都没触发——它根本没注册健康探针，就蹲在systemd里假装活着，像极了某些人的年终总结。

文章配图，仅供参考

　　我桌上那本《元数据治理实践》翻烂了边，第87页被咖啡泼过，上面写着：“元数据不是文档，是活的呼吸。”放屁。它是负债。每次改个字段描述，要改八处配置、五份文档、三套校验规则；每次加个新业务标签，下游三个系统当天就报错“UNKNOWN_TAG”；而我们这些运维，白天看告警，晚上补映射，半夜修索引，凌晨三点还在给开发解释：“不是ES集群慢，是你查的这个元数据表……它去年就该删了，只是没人点那个DROP。”

　　小王后来摸黑去机房巡检，说风扇声比平时低了点。我信他。他耳朵灵，听得出哪台风扇轴承开始哼歌，听得清SSD掉盘前那0.3秒的异响。可他听不出，为什么一个字段明明标注了“已废弃”，还有六个微服务天天半夜三点零七分准时GET它。陈哲后来给我发微信：“要不要加个‘废弃字段调用排行榜’？”我说：“加，做成日报，邮件抄送CTO和所有前端组长。”他回了个捂脸笑表情，后面跟一句：“算了，还是算了吧。”

　　其实这事本来能避免。去年七月我就提过元数据生命周期评审机制，邮件正文写了一千二，附件带流程图和风险矩阵，结尾写“建议Q3落地”。结果Q3来了，会议纪要里写的是“待评估”，Q4写了“纳入明年OKR”。现在回头看，所谓“优胜劣汰”不是技术方案，是求生本能——就像人饿急了不挑食，系统卡疯了也不挑元数据。活下来的不是最准的，是最少被调用的；最稳的不是最全的，是删得最干净的。

　　昨天我又去翻了次元数据平台的删除日志，发现十一月十六号那晚，我们手动删了四十二个字段定义、十七个冗余Schema版本、八个重复别名映射。操作命令就一行：DELETE FROM metadata_field WHERE last_accessed_at < '2023-09-01' AND usage_count = 0;——但执行前，我点了三次撤销按钮，又切到浏览器看了眼钉钉群，老张头像灰着，小王刚发了个“今天晚饭吃烤鱼”，陈哲在群里甩了个崩溃的Java堆栈截图，标题叫：“MetadataCacheProvider居然抛了NPE，我怀疑它没初始化成功。”

　　我承认，那一删我没做备份。真没做。不是忘，是懒得开pg_dump –t xxx那段。反正那些字段早死透了，连影子都没人查。删完之后，告警没再响。服务器响应时间曲线掉下去的样子，像有人一把拽断了吊着它的绳子。

　　接下来？补个自动归档清理job，加上熔断后自动通知下游owner的webhook。当然——如果下周陈哲又改出个带metadata的新bug，我就把那碗泡面盒子塞他键盘缝里。

（编辑：站长网）

【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容!