VibeLifeBench: Can Your Life Agent Be Proactive and Persistent in a Living World?
VibeLifeBench:多周生活世界中主动持久的生活助理评测基准
🧭 长周期主动式 Agent 评测
Xiaohongshu Dots Studio · Evolvent AI
提出了首个衡量 LLM agent 在长期变化世界中主动性与持续性的评测基准,发现所有前沿模型得分极低
📌 工作参考价值(4 点)
- 电商购物助理等长期交互场景可借鉴:agent 需具备主动察变能力(如价格波动、库存变化),而不仅是响应指令。
- 评测需覆盖三个维度:最终状态、行动及时性、隐含约束遵守——业务中类似“隐含约束”(如不打扰用户休息)往往比明面要求更重要。
- 模拟世界“时间自动推进且变动沉默”的设计,可直接复用到长期推荐或营销推送的离线回测框架,强制 agent 周期性重检。
- 开源的任务与环境可作为构建“长期主动推荐 agent”的测试床,验证上下文保持与跨会话连贯性。