刚刚，ICLR 2025时间检验奖颁给Adam之父！Bengio「注意力机制」摘亚军
ICLR 2025时间检验奖揭晓，Adam优化器和注意力机制分别由Jimmy Ba、Yoshua Bengio领衔的两篇2015年论文摘得冠军与亚军。Adam让大模型训练更快更稳；注意力机制为Transformer奠定基础并广泛应用于各类AI模型。
Yoshua Bengio
史无前例！Seq2Seq和GAN同获NeurIPS时间检验奖，Ilya连续2年获奖
NeurIPS颁发了两个时间检验奖，分别是GAN（引用超过85,000次）和Seq2Seq（引用超过27,000次）。GAN在生成建模中具有基础性作用；Seq2Seq启发了编码器-解码器架构的发展。