RecHarness: 一种基于Bandit路由的智能代理框架用于自进化推荐系统
TLDR
RecHarness使用bandit路由器和LLM自动化推荐模型优化,实现稳定改进和实际收益。
评分理由
The paper presents a novel approach combining bandit algorithms with LLMs for automated recommender system tuning, supported by both offline experiments and an online A/B test. Strengths include clear separation of direction selection and hypothesis generation, and a jump-basin mechanism for long-horizon exploration. Weaknesses: limited to recommender systems, not general scientific discovery; no comparison to other automated research agents beyond LLM search.
Read-first 评分解释
综合优先阅读分 51.2,由主题、引用、图谱、方法、可复现性和近期性等信号加权得到。 原始总分保留为 37。
研究版图角色
排序敏感性
稳定性:volatile;排名波动范围:79。
关键词评分
深度分析
创新点
- Bandit路由优化,解耦方向选择与假设生成
- 跳跃盆地(Jump-basin)机制,激活结构跳跃臂以逃离局部停滞
方法
RecHarness将自动模型优化分为两步:bandit路由器根据历史验证反馈选择下一个修改方向,LLM在该方向内生成具体的优化假设和可执行代码编辑。跳跃盆地机制在局部编辑停滞时触发结构跳跃臂,以维持长期探索。
关键结果
在多个推荐任务、数据集和模型骨干上,RecHarness比LLM推理搜索实现了更稳定的性能提升,并更有效地利用了有限的试验预算。在一个大规模短视频广告平台上的7天在线A/B测试中,所选候选方案使ADVV提升2.084%,收益提升0.534%,曝光量提升0.559%。