跳到正文
热点事件持续更新

皮肤科医生实测:十年前CNN皮肤癌诊断胜过前沿LLM

1 篇报道1 个报道来源55 分钟前更新

先了解这件事

AI 综述

皮肤科医生 Magnus Lynch 用 200 例活检确诊的皮肤病灶对比测试:GPT-6 Astra 与 Claude Fable 5.1 的首选诊断正确率均为 42%,而 2015 年发布的 Inception v3 经约 20 分钟微调后达到 62%。 测试中,两个 LLM 只拿到病灶图像,被要求给出六种诊断中最可能的一项(或“不确定”)、置信度、次选诊断,以及该病灶能否安全地不治疗、不活检、不随访直接放行;两者使用相同提示词和默认设置,均未拒答。每个 LLM 病例只运行一次,Lynch 称答案在不同运行间会有波动。 所用数据集 MILK10k 自 2025 年起公开,Lynch 称 LLM 可能在训练中见过它,若如此反而对 LLM 有利。

AI 根据报道生成 · 45 分钟前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月26日
  1. Hacker News
    皮肤科医生实测:10 年前的 CNN 在皮肤癌诊断上胜过前沿 LLM

    一位皮肤科医生用 200 例活检确诊的皮肤病灶测试 GPT-6 Astra 和 Claude Fable 5.1,两者首选诊断正确率均为 42%,而 2015 年发布的 Inception v3 经约 20 分钟微调后达到 62%。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。