文本转语音
选择声音,输入文本,然后生成清晰自然的音频。
VoxCPM2 核心能力
了解多语言 TTS、声音设计和可控声音克隆背后的模型能力。
2B 多语言语音模型
VoxCPM2 支持 30 种语言和 9 种中文方言,采用 MiniCPM-4 骨干网络。
免外部离散语音 tokenizer
模型不依赖外部离散语音 tokenizer 或音频 codec,而是在连续语音表示中生成音频;文本仍由语言模型 tokenizer 编码。
自然语言声音设计
只需用自然语言描述声音,无需提供参考音频即可生成新的声音。
可控声音克隆
提供参考音频,并可选加入风格提示,在保留音色的同时调整语速、情绪和表达。
48 kHz 音频输出
VoxCPM2 支持 16 kHz 参考音频输入,并通过 AudioVAE 流程输出 48 kHz 音频。
VoxCPM2 模型事实
以下为官方模型信息;线上延迟和音频质量取决于实际部署配置。
当前 VoxCPM2 版本
另含 9 种中文方言
支持 16 kHz 参考音频
官方 PyTorch 参考值
来源:OpenBMB VoxCPM2 官方模型资料;线上服务结果可能不同。
VoxCPM 模型版本
对比当前 VoxCPM2 版本与早期 VoxCPM 模型的官方事实。
| 模型 | 音频输出 | 参数量 | 参考音频 | 零样本 | 多语言 | 开源 |
|---|---|---|---|---|---|---|
VoxCPM2 当前服务使用的 VoxCPM2 版本 | 48 kHz | 2B | 16 kHz input | |||
VoxCPM1.5 早期 VoxCPM1.5 版本 | 44.1 kHz | 0.6B | Reference + continuation | |||
VoxCPM-0.5B 旧版 VoxCPM 模型 | 16 kHz | 0.5B | Continuation |
以上为官方模型版本事实;线上延迟和音频质量取决于部署配置。
VoxCPM2 音频演示
通过在线演示体验跨语言语音、情绪表达和上下文感知生成。
跨语言 - 英→中
英语说话人声音克隆为中文语音
跨语言 - 中→英
中文说话人声音克隆为英文语音
情感 - 开心
情感丰富的开心语调表达
情感 - 悲伤
情感丰富的悲伤语调表达
上下文感知 - 新闻
智能新闻播报风格
上下文感知 - 故事
智能故事讲述风格
更多音频示例请访问官方演示页面
应用场景
VoxCPM2 可用于内容创作、语言学习、无障碍服务和多语言音频制作等实际场景。
有声书制作
快速生成具有一致声音的高质量有声书
语言学习
个性化语音教育,多语言口音训练
内容创作
视频配音和播客制作的专业语音解决方案
无障碍应用
为视障人士提供个性化阅读体验
本地运行 VoxCPM2
安装官方包并使用 VoxCPM2 生成多语言语音。
安装官方包
安装官方 Python 包(Python ≥ 3.10、PyTorch ≥ 2.5、CUDA ≥ 12.0)。
加载 VoxCPM2 模型
从 Hugging Face 加载最新权重:
生成音频
生成语音并按原生采样率保存:
系统要求
常见问题
关于 VoxCPM2 技术和使用的常见问题与解答
