腾讯混元开源的大规模视频生成框架,基于扩散 Transformer 把文本提示直接生成连贯视频,适合做文生视频研究和应用落地。
T-Rex2 是 ECCV2024 开源的通用目标检测模型,结合文本提示与视觉提示,实现开放场景下的目标检测和计数。
基于扩散模型的时间流逝视频生成模型,能把文本提示变成物体随时间逐渐变形的延时视频,还配套了专门的延时数据集。
用 VQAScore 给文生图、文生视频和文生 3D 模型打分的评测工具,基于视觉语言模型判断生成内容与文本提示是否匹配。
从单张图片或一句文本提示生成大范围可漫游的 3D 场景,先产出高质量全景视频再重建三维空间,适合做可探索虚拟场景。