Workflow
LSTM
icon
搜索文档
LSTM之父向何恺明开炮:我学生才是残差学习奠基人
量子位· 2025-10-19 14:10
鹭羽 发自 凹非寺 量子位 | 公众号 QbitAI 何恺明 残差学习奠基人的身份,也被"挑战"了。 为什么要说"也"?因为发起讨论的,又双叒是我们熟悉的 Jürgen Schmidhuber ——LSTM之父。 不过这一次,他不是要把功劳揽到自己身上,而是替LSTM的另一位作者 Sepp Hochreiter 发声: 残差学习 这把改变深度学习格局的 "钥匙",其实早在30年前就已经诞生——Sepp Hochreiter在1991年就在使用循环残差连接解决梯度消失 问题。 随即他们展开了长达多年的争论,尤其是在18年的 图灵奖 结果公布后,Jürgen更是洋洋洒洒写了篇援引200多条文献的小作文反击。 之后在 GAN 的原创争议上,双方也是争执不休,要知道GAN的提出者正是Bengio的得意门生。 而如今有关残差学习的创始之争,也是因为Jürgen自认为将残差学习这一成果的发现完全归因于何恺明团队有失偏颇。 不过正如网友所说: 从Hochreiter到ResNet,光芒随时间递归延续。阴影是被模糊的归属,但真理始终不变:1991年的种子闪耀着每一层。 有一说一,Jürgen争title也不是第一次了,作为深 ...