📌 评测对象:debpalash/VoiceStudio | 星数:27,996 · Fork 3,441(2026-09-14)| 协议:AGPL-3.0(应用)· 模型各自上游条款 | 语言:Python + React + Rust(Tauri v2) | 前身 OmniVoice-Studio
一句话定位:"把ElevenLabs搬进你自己的电脑——克隆、配音、听写、有声书,一个桌面应用全包,不联网也能跑。" VoiceStudio 是 2026 年语音AI开源赛道最凶的爆款:2026-04 创建,五个月冲到 28k 星,2026-09-14 单日 +2,632 星登顶 GitHub Trending。它把语音克隆、声音设计、视频配音、实时听写、说话人分离、有声书生产六条工作流塞进一个 Tauri v2 桌面应用,可切换 16 个 TTS 引擎 + 11 个 ASR 引擎,语言目录覆盖 646 种。
站内此前写过一篇上手教程《VoiceStudio教程:开源本地ElevenLabs替代,语音克隆+视频配音全攻略》,本文是深度评测视角:拆它的架构、引擎矩阵、许可证陷阱与真实上手成本。同期语音方案对比可看2026年6款主流TTS平台横评。
| 维度 | 评分 | 说明 |
|---|---|---|
| 理念与定位 | 9.5 | 本地优先做到极致:无账号、无API key、无订阅、无用量计费——"数据路径默认不出设备"写进架构 |
| 工程含金量 | 9.0 | Tauri v2壳+React UI+FastAPI后端,引擎注册表可插拔;GPU自动路由(CUDA/MPS/MLX/ROCm/CPU);SQLite+Alembic管状态 |
| 引擎丰富度 | 9.5 | 16 TTS+11 ASR+Demucs人声分离+Pyannote说话人分离,OmniVoice/CosyVoice 3/GPT-SoVITS/VoxCPM2/IndexTTS 2.5全收编 |
| 上手成本 | 8.0 | 桌面安装包+首次启动自动建Python环境下默认模型;但从源码跑要Node/Bun+Python 3.11双工具链,Intel Mac只能连远程后端 |
| 安全与隐私 | 9.5 | 后端只绑localhost:3900,回环免鉴权、远程访问强制PIN/API key;分析统计默认关且只发白名单元数据;AudioSeal水印默认嵌入 |
| 文档质量 | 9.0 | README即全站手册:安装/引擎/性能/基准/排障/卸载分册,还有中文README;引擎表连许可证逐个标注 |
| 许可证与商用 | 7.0 | 应用AGPL-3.0友好,但默认引擎OmniVoice权重CC-BY-NC(禁商用)、tokenizer另有社区条款——商用必须换引擎或读条款,这是最大暗坑 |
| 生态与集成 | 9.0 | OpenAI兼容API(/v1/audio/speech)+MCP Server+Agent技能(npx skills add)+远程Worker算力池,Claude/Cursor/Codex可直接调 |
| 工作流 | 能力 | 亮点 |
|---|---|---|
| 🎙️ 语音克隆 | 零样本合成,3秒参考音频可用,5-15秒效果更佳 | 纯提示不训练,一段干净人声即刻复刻 |
| 🎨 声音设计 | 按年龄/口音/音高/风格/语气文字描述造声音 | "温暖英式有声书叙事者"一句话捏出来 |
| 🎬 视频配音 | 转写→翻译→保说话人→合成→导出视频 | 波形+时间轴转录稿一体编辑面,术语表管理,成片标记时序问题待复核 |
| 📚 有声书 | 多角色脚本·EPUB/PDF导入·章节渲染 | 直接导出.m4b有声书格式 |
| ⌨️ 听写挂件 | 系统级快捷键+实时转录 | 可选本地LLM自动清理口癖 |
| 📦 批量队列 | 大批音视频任务排队+逐任务进度 | 可监听本地文件夹自动处理新视频 |
外加两块专业拼图:人声分离(Demucs语音/背景分离)与说话人分离(Pyannote/WhisperX),配音多人对话场景不用再开第三方工具。
核心设计是引擎可插拔:Model Catalogue(Ctrl/Cmd+E)里装、卸、选、路由模型,按硬件自动推荐。TTS 16 个引擎里,克隆+指令双支持的有 OmniVoice(默认,600+语言)、CosyVoice 3(9语言+18方言)、VoxCPM2(30语言)、MOSS-TTS-Nano 等;纯CPU轻量档有 PocketTTS、Sherpa-ONNX、KittenTTS。ASR 11 个引擎默认 WhisperX(词级时间戳+说话人分离),Apple Silicon 专属 MLX Whisper/Parakeet。
| 硬件 | 推荐TTS | 推荐ASR |
|---|---|---|
| Apple Silicon M1-M4 | MLX-Audio · OmniVoice (MPS) | MLX Whisper · Parakeet MLX |
| NVIDIA 8GB+显存 | OmniVoice · CosyVoice 3 | WhisperX |
| 低显存/纯CPU | PocketTTS · Sherpa-ONNX · KittenTTS | Moonshine · Faster-Whisper (int8) |
想逐个引擎细看的,站内有单引擎上手教程:CosyVoice Studio、VoxCPM、IndexTTS2,以及微软开源的60分钟长音频方案VibeVoice——这些模型在 VoiceStudio 里都能装上直接用,省去每家单独搭环境。
把 OpenAI SDK 的 base_url 改成 http://localhost:3900/v1,/v1/audio/speech 和 /v1/audio/transcriptions 就地可用(支持mp3/opus/aac/flac/wav/pcm 与 json/srt/vtt 输出)。对 AI Agent 玩家更致命的是内置 MCP Server(http://localhost:3900/mcp),Claude Desktop、Cursor 配一行 JSON 就获得 generate_speech、clone_voice、transcribe 三个工具;还有 skills.sh 格式的 Agent 技能(npx skills add debpalash/VoiceStudio)。配套 Rust sidecar 允许 VS Code、TUI、桌面程序触发系统级听写流。这一层是它区别于"又一个本地TTS脚本"的关键——它把自己做成了本机语音平台。类似"把开源语音能力做成Agent基础设施"的思路,可对比LiveKit Agents实时语音代理教程。
# 桌面版:官网 Release 下载(macOS DMG / Windows MSI / Linux AppImage)
# 首次启动自动建托管 Python 环境并下载默认模型,之后复用
# Docker(linux/amd64,CUDA/ROCm/CPU/worker四种镜像)
docker run -d -p 127.0.0.1:3900:3900 \
-v omnivoice-data:/app/omnivoice_data \
--name voicestudio palashdeb/omnivoice-studio:stable
# 从源码(Node 20+/Bun + Python 3.11+)
git clone https://github.com/debpalash/VoiceStudio.git
cd VoiceStudio && bun install
bun run desktop
硬件门槛:最低 8GB 内存+10GB 磁盘(GPU 可选,CPU 模式支持);推荐 16GB 内存+20GB SSD+8GB 显存。macOS 13.3+ 仅 Apple Silicon(Intel Mac 无法跑本地后端,只能连远程 Worker);Windows AMD 显卡走 CPU;Linux 上 ROCm 可选。钱:软件 $0、无付费层级,成本全在硬件电费——这是对比 ElevenLabs 按字符订阅计费模式的根本翻盘点。不想装也能试:官方提供 Google Colab notebook 云端体验。
这是评测视角必须敲黑板的地方:VoiceStudio 的 AGPL-3.0 只覆盖应用代码,不覆盖你下载的模型权重。默认引擎 OmniVoice 的预训练权重标注 CC-BY-NC(非商用),音频 tokenizer 还带额外的社区条款;IndexTTS 2.5 月活过亿或年收10亿人民币需 Bilibili 书面授权。想要干净的商用路径,应选 Apache-2.0 系引擎(CosyVoice 3、VoxCPM2、MOSS-TTS-Nano 等)或逐个审查模型条款——README 引擎表把每家许可证都列了,这份诚实值得肯定,但责任在你自己读。
另两个小坑:Electron→Tauri 重写仍在进行中,README 顶部明确喊话"别提桌面应用相关 issue/PR";项目标注 Active beta,生产任务建议锁定 Release 版。
| 方案 | 哲学 | 适合 |
|---|---|---|
| VoiceStudio | 全本地+引擎超市+开发者平台,$0软件成本 | 隐私敏感、离线、大批量、想集成的开发者 |
| ElevenLabs等云服务 | 托管算力,开箱即用,按量订阅计费 | 图省事、商用授权干净、量不大的轻用户 |
| 单引擎项目(VoxCPM/CosyVoice等) | 一个模型一个仓库,自己拼流程 | 研究者、只需单一引擎的极简玩家 |
推荐:隐私敏感用户与合规受限团队(音频永不出盘);有声书/播客/视频配音的多语言量产创作者(646语言目录+批量队列+多角色casting);想把语音能力挂进 Agent 工作流的开发者(OpenAI兼容API+MCP+技能三件套);以及任何想脱离订阅计费的人——显卡闲置着就是浪费。
不建议:显存8GB以下又不想等CPU慢慢跑的急性子;需要"生成即商用"干净授权的团队(默认权重CC-BY-NC,换引擎前别急着商用);Intel Mac 用户(本地后端跑不了)。
综合评分 8.7/10:它把"本地优先"从口号落成了架构事实——回环后端、可选遥测、默认水印、逐引擎标注许可证;引擎超市+平台化接口让它同时满足小白点鼠标和Agent代码调用两端。扣分在许可证暗坑与仍处beta的重写期。28k 星证明市场等一个"开源ElevenLabs"等太久了。
VoiceStudio是开源、全本地的AI语音工作站(28k星,AGPL-3.0),定位为ElevenLabs的开源替代:语音克隆、声音设计、视频配音、听写、转录、有声书一条龙,内置16个TTS引擎和11个ASR引擎、覆盖646种语言目录。本地工作流无需账号、API密钥、订阅或用量计费。
最低8GB内存+10GB磁盘,GPU可选(CPU模式支持);推荐16GB内存+20GB SSD+NVIDIA CUDA或Apple Silicon(8GB+显存/统一内存)。Apple Silicon M1-M4走MLX原生加速;低显存或纯CPU可用PocketTTS、Sherpa-ONNX、KittenTTS等轻量引擎。Docker镜像仅linux/amd64。
要分两层看:VoiceStudio应用本身AGPL-3.0,应用许可证不限制生成音频的商用;但下载的模型权重保留各自上游条款——默认OmniVoice权重标注CC-BY-NC(非商用),商用需换Apache-2.0等宽松协议引擎(如CosyVoice 3、VoxCPM2)或审查所选模型的条款。
软件完全免费且无付费层级,成本全在你自己的硬件。本地工作流数据不出设备;分析统计默认关闭,即使开启也只发送不含内容的白名单使用元数据,文本、音频、文件名、语音、项目一律排除,可在Settings-Privacy中控制。