arXiv cs.AI· Alina Nesen, Prathyusha Kanmanth Reddy, David Relyea, Rohit Avinash Mujumdar, Samaneh Karimi, Bo Shen, Jordan Hashemi·· 1 天前AI 评分46
MOSS:面向搜索与推荐系统语义故障的生产级监控诊断框架
MOSS: A Production Framework for Monitoring and Diagnosing Semantic Failures in Search and Recommendation Systems
AI 导读
论文提出 Model Sanity Service(MOSS),将 LLM 相关性评分嵌入持续监控循环,用于搜索与推荐系统的语义故障诊断。该框架已在美国某大型零售商生产环境运行超过六个月,覆盖推荐、搜索和优惠场景,发现两起确认的线上服务缺陷,其中回填混合缺陷的修复方案经离线验证使告警率相对下降 76.4%。
来源:arXiv cs.AI · arxiv.org