跳至内容
每时AI

每时AI

  • 资讯
  • 国际
  • 分享
  • 大模型
  • 学术
  • 开源
  • 机器人
  • 关于我们

统一多模态

NeurIPS 2024 TextHarmony:和谐统一的多模态文字理解与生成大模型

2025年6月12日8时 作者 极市干货

TextHarmony是首个在单一模型中实现视觉文本感知、理解与生成任务的OCR研究,通过ViT+MLLM+Diffusion架构及Slide-LoRA缓解模态不一致问题,显著提高OCR相关任务性能。

分类 学术 标签 OCR领域、 TextHarmony、 多模态大语言模型、 扩散模型、 统一多模态、 视觉编码器 发表评论

爆肝万字!从JanusPro到UniTok,多模态大模型理解与生成的统一之路

2025年5月6日16时 作者 PaperWeekly

文字生成图片、视频(生成任务)。
自回归模型(就是那种一个接一个预测下一个“词”的模型)在这两方面都

分类 大模型、 学术 标签 Janus-Pro-7B、 MLLM基准测试、 合成数据、 图像生成、 未来研究、 统一多模态 发表评论

Meta&谢赛宁版GPT-4o:通过MetaQueries实现统一多模态模型!

2025年4月14日14时 作者 PaperAgent

统一多模态模型的目标是整合深度理解与丰富的生成能力,MetaQueries采用‘token → [transformer] → [diffusion] → pixels’范式,通过可学习查询和冻结MLLM在保持性能的同时实现图像生成。

分类 分享 标签 MetaQueries、 图像生成、 扩散模型、 指令调整、 统一多模态、 预训练 发表评论

AGI AI AI技术 Anthropic ChatGPT Claude DeepSeek DeepSeek-R1 DeepSeek R1 GitHub GPT-4o LLM Meta OpenAI Python Sam Altman 人工智能 人形机器人 具身智能 大型语言模型 大模型 大语言模型 字节跳动 工业机器人 开源 强化学习 微软 扩散模型 技术创新 智能体 木易 机器学习 深度学习 清华大学 生成式AI 用户体验 百度 腾讯 自然语言处理 英伟达 谷歌 阿里云 阿里巴巴 马斯克 黄仁勋

分类

  • 分享
  • 国际
  • 大模型
  • 学术
  • 开源
  • 机器人
  • 资讯
  • CU-Multi:助力多机器人地图融合与位置识别的高质量数据集
  • Observer:本地开源微Agent,守护隐私的同时观察、记录并响应屏幕动态
  • tmux-mcp:让AI助手轻松掌控tmux终端会话的Model Context Protocol
  • gpt-load:一个高性能的OpenAI格式API多密钥轮询代理服务器
  • 谁将主导AI下半场?全国首部私有化部署标准公开征集中

2025 年 7 月
一 二 三 四 五 六 日
 123456
78910111213
14151617181920
21222324252627
28293031  
« 6 月    

归档

  • 2025 年 7 月
  • 2025 年 6 月
  • 2025 年 5 月
  • 2025 年 4 月
  • 2025 年 3 月
  • 2025 年 2 月
  • 2025 年 1 月
  • 2024 年 12 月
  • 2024 年 11 月

AI新闻 | X平台 | APK反编译 | 京ICP备2024096144号 |
© 2025 每时AI • Built with GeneratePress
 下载我们的APP,AI秒送达!  立即下载
×