他的手停住了,咖啡差点洒出来。
152层卷积神经网络。Image验证集TOp-5错误率,3.57%。
人类标注员的平均水平是5.1%。去年Image竞赛冠军GOOgLe是6.67%。这篇论文直接把数字按到了3.57%。
“你们过来看看这个。”
林之远的声音不大,但语调不对。
旁边几个人抬起头,三分钟后,实验室十一个人全围在他屏幕前面。
“等等,152层?”一个叫Kevin的白人博士生最先反应过来,
“不可能。超过三十层的网络根本没法训练,梯度消失会把信号吃干净。这是常识。”
“你往下看。”林之远指着论文第三页的示意图,
“他们加了一个跳跃连接,把输入直接加到输出上。梯度可以跳过中间层回传。”
Kevin盯着那张图看了十几秒。
The content is not finished, continue reading on the next page