跳到正文
热点事件持续更新

机器学习抽象为何漏:从手写反向传播说起

1 篇报道1 个报道来源1 小时前更新

先了解这件事

AI 综述

一篇机器学习随笔借 Andrej Karpathy 在斯坦福 CS231n 课上要求学生用 Python 和 NumPy 手写神经网络前向与反向传播的做法,论证机器学习中几乎不存在密封抽象。作者称,无损压缩、TCP/IP、TLS、PostgreSQL 可算密封抽象,而模型架构的每个方面都会影响反向传播优化的代价函数形状,因此都是漏的。 作者据此建议,训练前先放慢节奏,理解模型与训练方案的每个环节。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月19日
  1. Hacker News
    为什么机器学习里一切都是漏抽象:从 Karpathy 的 CS231n 手写反向传播说起

    一篇机器学习随笔借 Andrej Karpathy 在斯坦福 CS231n 课上要求学生用 Python 和 NumPy 手写神经网络前向与反向传播的做法,论证 ML 中几乎不存在密封抽象。作者认为无损压缩、TCP/IP、TLS、PostgreSQL 可算密封抽象,而模型架构的每个方面都会影响反向传播优化的代价函数形状,因此都是漏的。他建议训练前先放慢节奏、理解模型与训练方案的每个环节。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。