加入收藏 | 设为首页 | 会员中心 | 我要投稿 站长网 (https://www.0577zz.com/)- 低代码、办公协同、物联平台、操作系统、5G!
当前位置: 首页 > 站长资讯 > 传媒 > 正文

传媒资讯分类总出错?智能算法提效至98.7%

发布时间:2026-11-13 14:17:43 所属栏目:传媒 来源:DaWei
导读:  接口超时告警那一刻,我正蹲在茶水间扒拉咖啡机的出水口——它卡了三天了,滤网里糊着一层褐色结块,像去年二月份那批资讯分类跑崩时的日志颜色。你记得不?就是那个「传媒资讯分类总出错?智能算法提效至98.7%」的推送,PPT

  接口超时告警那一刻,我正蹲在茶水间扒拉咖啡机的出水口——它卡了三天了,滤网里糊着一层褐色结块,像去年二月份那批资讯分类跑崩时的日志颜色。你记得不?就是那个「传媒资讯分类总出错?智能算法提效至98.7%」的推送,PPT里绿底白字,底下还画了个向上的箭头。结果当天凌晨三点,监控大盘上那条绿色的线一直在抖,不是跳,是抖,跟抽筋似的。


  我原以为是缓存击穿,切进线上看慢查询日志,刷得太快看不清,只扫到一堆「INSERT INTO news_tag_map SELECT…」——表结构没动过,字段没改过,但tag_id插进去之后,前端渲染直接报「Unknown category: 0」。王磊当时在工位上打电话谈房租,音量压不住,一句「押一付三太狠了」正好撞上我敲Ctrl+C。我截了三次才截全堆栈,最顶上那一行写着「CategoryMapper.selectByNewsId()」,可查出来的category_code居然是空字符串。不是null,是空。不是前端传错,是后端select完,map.get("code")吐出来一个length=0的String。


  后来才发现,问题根本不在SQL,也不在Mapper。在训练样本清洗脚本里,有个祖传的正则:\\\\s+ → '',但某天上游改了源格式,标题里塞进了一个零宽空格(U+200B),它不被\\\\s匹配,却让jieba分词崩掉一个token,最终把「影视综艺」喂成了「影视综」,再丢给分类模型……模型不认识,回default=0。而default=0,刚好映射到数据库里那个没人敢删的category_id=0记录,备注写着「未分类-临时兜底」。谁写的?不知道。什么时候写的?大概那个量级,反正git blame最后一笔是2016年11月,作者账号已注销。


文章配图,仅供参考

  所以你说提效到98.7%,站得住?站得住。优胜劣汰啊——旧规则死得差不多了,新模型跑起来,老字段还在那儿挂着,但已经没人真往里写了。上周李敏改需求,要把「AI生成内容」单独打标,她发版前问我「tag_id是不是必须非空?」我说「你加个校验就行」,她愣了三秒:「现在还能写空?!」——对,现在不能了。不是逻辑加了,是数据自然稀释了。那些老feed跑完新pipeline,85%进模型,12%进人工review队列,剩下3%直接沉底,连日志都不打。不是修bug,是让它没机会触发。


  咖啡机又响了,嗡嗡嗡,比机箱还吵。隔壁组张伟路过,伸手拍了下机箱侧面,那声嗡突然变调,持续了两秒才停。我盯了他两秒,他耸耸肩走了。这台机箱去年换过风扇,但底座螺丝没拧紧,一震就松,每次重启都得手按着听。跟那个分类服务一样,表面跑得稳,底下垫着三张A4纸。


  说到A4纸——前两天整理旧硬盘,在/DISK2/backup_2020/里翻出一份「资讯分类规则V3_final_v2_revised_202103.xlsx」,密码是「media@2021」,解开了,里面27个sheet,每个都标了「已下线」,但第19个sheet里有一行小字:「2018.07.12 新增『知识付费』子类,同步DB字段category_type,varchar(32)→text」。可现在表里还是varchar(32),insert超长字段直接截断,也没报错。为什么?因为应用层catch了SQLException,log.warn吞了,只留了一句「标签长度异常,忽略」。谁加的?记不清是哪次了。反正没人敢动那块,动了怕影响存量feed的点击归因——虽然现在归因链路早就绕开这块走了,但没人确认。


  对了,外卖筷子掉在地上了,我弯腰捡,发现地上还有一根断的,折痕特别齐,像被什么重物压过。我直起身,顺手把两张卷了边的便签从隔断上撕下来——一张写着「nginx access_log 日志路径变更(已生效)」,另一张是「【紧急】分类服务降级开关路径」,后面画了个箭头,指向一个IP和端口,但数字被涂掉了,只剩墨点。我不确定那是不是真的能用。


  其实那次雪崩复盘会我没去。那天我在产研中心驻场,帮他们查一批「来源渠道=AppPush」的数据漏采问题,查到一半,运维老周微信弹窗:「快回来!分类服务雪崩,回滚失败,热修复要上线。」我盯着手机,手悬在键盘上,心想,这破服务还有热修复?回头一问,是前端硬编码的兜底文案,本地JS里埋了「if(category===0){return'其他'}」,从来没走通,因为0从来不会透到前端——中间层全filter掉了。但那天偏偏放过去了。为什么?因为灰度流量配置里少写了一个环境变量名,dev和prod共用一套配置,测试时dev没启这个开关,prod启了,但值是空。所以,空值→空字符串→0→前端if判断为true→显示「其他」。整整六小时,首页「热门推荐」栏里三分之一的卡片,标题下面写着「其他」。产品经理小林当场把笔帽咬碎了,喷在会议纪要本上,墨点溅到「优胜劣汰」四个字旁边。


  所以我现在改字段更小心了。不是怕错,是怕对。上次我把news_tag_map里的is_primary tinyint(1) 改成 enum('yes','no'),部署后第三天,下游数仓同事说他们的宽表join结果少了17%的tag记录。我查了一下午,发现Hive JDBC Driver读enum默认转成string,但那边字段映射还是按tinyint解析,遇到'yes'就变成null,join on null失效。他们最后自己加了个CAST。这种事没法写进文档,写了也没人看。你猜现在他们怎么处理这类字段?写死注释:「⚠️此字段永远不要改类型,含泪。」


  所以接下来?先不动表结构。我把新模型的预测结果加进定时任务,每天凌晨跑一遍历史feed,产出diff报告,扔到内部wiki。不推,不通知,就晾着。等哪天哪个运营偶然点开,指着一行说「这‘财经快讯’为啥被标成‘政策解读’?」——那时候再开需求评审。现在嘛,让旧逻辑继续呼吸,直到它自己憋死。

(编辑:站长网)

【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容!