AI赛博佛祖张吕敏再掀开源风暴!FramePack:开启AI视频生成超低显存时代!

ControlNet 作者张吕敏(Liyuan Zhang)发布FramePack技术,让普通RTX3060笔记本也能生成高质量长视频,仅需6GB显存。FramePack提出了一种逐帧预测架构,解决了遗忘与漂移问题,大幅提升连贯性和质量,现已在GitHub上获得3.2K星。

微软开源实时交互模型:提升Agent动态复杂处理能力

微软研究院开源了实时交互世界模型MineWorld,以Transformer为核心结合《我的世界》。MineWorld参数量少于Oasis,在多方面表现更优,包括视频质量、可控性和推理速度等方面。MineWorld架构由Transformer解码器、视觉标记器和动作标记器组成,实现高效并行解码算法提高生成效率。