用对比学习把图像和文本映射到同一嵌入空间,实现零样本图像分类和图文匹配,是跨模态检索与多模态模型的经典底座。
工业级零样本语音合成系统,只需几秒参考音频就能克隆音色并跨语种合成,兼顾可控性与推理效率。
开源实现的 CLIP 多模态模型,提供图像-文本对比学习训练与预训练权重,支持零样本图像分类和跨模态检索。
基于流匹配的语音合成模型官方实现,只需一段参考音频就能克隆音色并生成流畅自然的语音,适合做零样本 TTS 和语音克隆。
开源音乐生成基础模型,用符号规划、零样本翻唱和智能体编辑从歌词生成完整歌曲,适合研究音乐生成与风格迁移。
把时间序列当成语言来建模的预训练预测模型,基于 Transformer 架构,可直接用于零样本或微调预测,省去从零训练的成本。
多语言大语音生成模型,覆盖推理、训练到部署全流程,支持中英日粤语及跨语种合成,适合做语音克隆和对话机器人。
面向创作者和开发者的 Gradio 语音工作台,集成多引擎 TTS、零样本声音克隆、Whisper 转写、人声分离与多语言翻译,一站式完成配音和字幕制作。
基于大语言模型的语音合成系统,能生成接近真人音色的自然语音,并支持实时流式输出,适合搭建低延迟的 TTS 服务。
中文版 CLIP 预训练模型,支持中文图文跨模态检索和表征生成,可直接用于图文匹配、零样本分类等任务。
开源的对话语音生成模型,能把文字转成自然流畅的日常对话语音,适合给聊天机器人和语音助手配音。
只需 1 分钟语音数据就能训练出高质量 TTS 模型,支持少样本音色克隆,适合快速定制个性化语音合成。
把视频从一种语言翻译成另一种语言,自动生成配音和字幕并嵌入视频,适合做视频本地化和跨语言内容分发。
中文版 基准测试数据集 - 新增 SafetyBench 零样本安全评测,支持 zh 、 en 、 zh subset ,分别报告整体及七类准确率;无法解析或缺失的预测计错,不随机回退到某个答案。 功能增强 - Web 任务工作区:评测与压测共用模型连接,支持独立草稿、配置模板、导入导出及活动任务发现;刷新页面后可恢复监控,无需重复提交。
…个样本的 WER 语言配置,以及无法评分的音频被计为完美 WER 0 的问题。 - 修复 CLIP 零样本分类在新 NumPy 下的标量转换、 limit 截断和 skip existing 提前终止整个任务的问题。 - 修复一条记录生成多个样本时, repeats 将不同问题分到同一重复组,影响 pass@k / vote@k 的问题。
…轮合成开销。校验前移到 TTS 之前。 - 静音 TTS 块会中断整次配音。 零帧 WAV 触发除以零样本数的 ZeroDivisionError ;现在原样透传并返回中性响度元数据。 - 没有 ffmpeg 的机器上交付 QC 崩溃。 probe audio sample rate 是观测性质的 delivery QC,且会在尚未渲染的
…本到 0.34.0 【平台支持】 新增对 Linux ARM64 架构的全面支持 【通用视觉】 集成零样本目标检测模型,扩展视觉能力 【活体检测】 优化视频检测流程,实现 Predictor 视频会话级复用 【人脸识别】 SQLite 人脸查询线程池优化,提高查询效率 【人脸识别】 修复 Milvus 向量库下 listFaces 接口调