微软开源的统一多模态模型,用流匹配做图像编辑与文生图,同时支持流式视频理解和 GUI 电脑操作 Agent。
统一多模态模型的强化学习训练框架,打通 SGLang、vLLM 推理后端,方便把多模态大模型跑通 RL 训练流程。
统一多模态模型,把图文理解、文生图和图像编辑整合进同一套框架,省去为不同任务分别部署模型的麻烦。
汇总多模态建模相关资源,覆盖多模态大模型(MLLM)、统一多模态模型(UMM)和原生多模态模型(NMM),方便快速查找论文与工具。
汇总统一多模态模型的开源资源清单,涵盖图文生成、视觉语言模型等方向,方便快速查找和对比各类多模态大模型。