跳至内容
每时AI

每时AI

  • 资讯
  • 国际
  • 分享
  • 大模型
  • 学术
  • 开源
  • 机器人
  • 关于我们

统一多模态

NeurIPS 2024 TextHarmony:和谐统一的多模态文字理解与生成大模型

2025年6月12日8时 作者 极市干货

TextHarmony是首个在单一模型中实现视觉文本感知、理解与生成任务的OCR研究,通过ViT+MLLM+Diffusion架构及Slide-LoRA缓解模态不一致问题,显著提高OCR相关任务性能。

分类 学术 标签 OCR领域、 TextHarmony、 多模态大语言模型、 扩散模型、 统一多模态、 视觉编码器 发表评论

爆肝万字!从JanusPro到UniTok,多模态大模型理解与生成的统一之路

2025年5月6日16时 作者 PaperWeekly

文字生成图片、视频(生成任务)。
自回归模型(就是那种一个接一个预测下一个“词”的模型)在这两方面都

分类 大模型、 学术 标签 Janus-Pro-7B、 MLLM基准测试、 合成数据、 图像生成、 未来研究、 统一多模态 发表评论

Meta&谢赛宁版GPT-4o:通过MetaQueries实现统一多模态模型!

2025年4月14日14时 作者 PaperAgent

统一多模态模型的目标是整合深度理解与丰富的生成能力,MetaQueries采用‘token → [transformer] → [diffusion] → pixels’范式,通过可学习查询和冻结MLLM在保持性能的同时实现图像生成。

分类 分享 标签 MetaQueries、 图像生成、 扩散模型、 指令调整、 统一多模态、 预训练 发表评论

AGI AI AI技术 Anthropic ChatGPT Claude DeepSeek DeepSeek-R1 DeepSeek R1 GitHub GPT-4o LLM Meta OpenAI Python Sam Altman 人工智能 人形机器人 具身智能 大型语言模型 大模型 大语言模型 字节跳动 工业机器人 开源 强化学习 微软 扩散模型 技术创新 智能体 木易 机器学习 深度学习 清华大学 生成式AI 用户体验 百度 腾讯 自然语言处理 英伟达 谷歌 阿里云 阿里巴巴 马斯克 黄仁勋

分类

  • 分享
  • 国际
  • 大模型
  • 学术
  • 开源
  • 机器人
  • 资讯
  • 快看!谷歌和OpenAI为金牌打了起来
  • 对话谷歌前 CEO Eric Schmidt:数字超智能将在十年内到来,AI 将创造更多更高薪的工作
  • 在海外发现了一个很牛的免费AI代码解读工具,终于能读懂屎山了!
  • 英伟达竞争者获得大型订单:韩国FuriosaAI将为LG供应AI芯片
  • 上海:扩大显示芯片优势,支持智能眼镜主控芯片研发与产业化

2025 年 7 月
一 二 三 四 五 六 日
 123456
78910111213
14151617181920
21222324252627
28293031  
« 6 月    

归档

  • 2025 年 7 月
  • 2025 年 6 月
  • 2025 年 5 月
  • 2025 年 4 月
  • 2025 年 3 月
  • 2025 年 2 月
  • 2025 年 1 月
  • 2024 年 12 月
  • 2024 年 11 月

AI新闻 | X平台 | APK反编译 | 京ICP备2024096144号 |
© 2025 每时AI • Built with GeneratePress
 下载我们的APP,AI秒送达!  立即下载
×