Hacker News· BSOhealth·· 3 小时前AI 评分36
Show HN: EvalCart——面向购物智能体的评测与排行榜
Show HN: EvalCart – Evals and leaderboard for agent shoppers
AI 导读
EvalCart 是面向购物智能体的公开评测与排行榜,用同一套家庭任务、冻结商品目录和确定性评分器比较不同智能体的购物车。示例中两个智能体都覆盖全部 27 件商品,但总价 $188.62 超出 $180 预算的购物车仍被判失败。评分维度包括完整性、预算与约束、口味匹配、库存与替代说明等,超出预算或违反硬约束即整轮失败,效率单独报告且不影响质量分。
来源:Hacker News · evalcart.com