是的,LeCun要向28岁的Alexandr Wang汇报!这是Meta新AI团队的一些独家内部消息

Meta 挖角大牛组建 AI 研究部门 Meta Superintelligence Labs (MSL),涉及高层变动及内部整合。Yann LeCun 向新领导汇报,但 MLX 不改变研究方向。Meta 未来可能裁员以支持 MSL,并面临技术争议和文化冲击。

被Transformer光芒掩盖的论文,Meta科学家回顾十年前创新之作

这篇论文是2015年发布的《End-to-End Memory Networks》,它包含了当前大型语言模型的许多要素,如完全用注意力机制替代RNN、引入带键值投影的点积软注意力机制和堆叠多层注意力等。尽管其影响力不及后来的《Attention is all you need》