计算复杂度
英伟达港大联手革新视觉注意力机制!GSPN高分辨率生成加速超84倍
香港大学与英伟达联合推出广义空间传播网络(GSPN),通过二维线性传播和稳定性-上下文条件显著降低计算复杂度,提升视觉任务效率,并在多个视觉领域刷新性能纪录。
Liquid AI推出STAR模型架构了
近日,Liquid AI 推出的 STAR (Sparse Transformer with Adaptive Reception Fields) 模型采用稀疏注意力机制显著提高了计算效率和模型泛化能力,降低了硬件需求成本,并增强了对长距离依赖关系的理解。