跳到正文
Hacker News· BSOhealth·· 3 小时前AI 评分36

Show HN: EvalCart——面向购物智能体的评测与排行榜

Show HN: EvalCart – Evals and leaderboard for agent shoppers

AI 导读

EvalCart 是面向购物智能体的公开评测与排行榜,用同一套家庭任务、冻结商品目录和确定性评分器比较不同智能体的购物车。示例中两个智能体都覆盖全部 27 件商品,但总价 $188.62 超出 $180 预算的购物车仍被判失败。评分维度包括完整性、预算与约束、口味匹配、库存与替代说明等,超出预算或违反硬约束即整轮失败,效率单独报告且不影响质量分。

来源:Hacker News · evalcart.com