皮肤科医生实测:十年前CNN皮肤癌诊断胜过前沿LLM
热点事件持续更新
皮肤科医生实测:十年前CNN皮肤癌诊断胜过前沿LLM
1 篇报道1 个报道来源55 分钟前更新
先了解这件事
AI 综述
皮肤科医生 Magnus Lynch 用 200 例活检确诊的皮肤病灶对比测试:GPT-6 Astra 与 Claude Fable 5.1 的首选诊断正确率均为 42%,而 2015 年发布的 Inception v3 经约 20 分钟微调后达到 62%。 测试中,两个 LLM 只拿到病灶图像,被要求给出六种诊断中最可能的一项(或“不确定”)、置信度、次选诊断,以及该病灶能否安全地不治疗、不活检、不随访直接放行;两者使用相同提示词和默认设置,均未拒答。每个 LLM 病例只运行一次,Lynch 称答案在不同运行间会有波动。 所用数据集 MILK10k 自 2025 年起公开,Lynch 称 LLM 可能在训练中见过它,若如此反而对 LLM 有利。
AI 根据报道生成 · 45 分钟前更新
最新进展10月26日 01:15
皮肤科医生实测:10 年前的 CNN 在皮肤癌诊断上胜过前沿 LLM报道时间线
沿着报道,了解事件的不同侧面。
10月26日
- Hacker News皮肤科医生实测:10 年前的 CNN 在皮肤癌诊断上胜过前沿 LLM
一位皮肤科医生用 200 例活检确诊的皮肤病灶测试 GPT-6 Astra 和 Claude Fable 5.1,两者首选诊断正确率均为 42%,而 2015 年发布的 Inception v3 经约 20 分钟微调后达到 62%。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。