跳到正文
Hacker News· julsimon·· 2 小时前精选AI 评分80

从外部实测苹果 200 亿参数端侧模型 Core Advanced

Exploring Apple's On-Device Model: Twenty Billion Parameters in Flash

AI 导读

作者在 M3 Max 的 MacBook Pro 上通过文件读取追踪、系统日志和功耗计数器,从外部观察 macOS 27 中 200 亿参数的苹果端侧模型 Core Advanced,该模型每次激活 1 到 4 亿参数,权重存放在 4.95 GB 的 flash 文件中。

推荐理由

作者在不反编译的前提下从外部实测苹果端侧模型的显存、能耗与路由节奏,并给出与开源同类的对比。

来源:Hacker News · airealist.ai