VoiceStudio:开源本地语音工厂,646语言全包的视频配音与克隆神器
VoiceStudio:开源本地语音工厂,646语言全包的视频配音与克隆神器
VoiceStudio 是一个完全本地运行的语音克隆与合成工具,一句话介绍:把 ElevenLabs 搬到你电脑里——克隆声音、配音视频、生成有声书,全部离线,646 种语言,不要订阅,不要 API Key。过去 30 天狂涨 4.1 万 Star,冲上 GitHub Trending 36 天,是当前语音 AI 开源领域最炙手可热的项目。
功能与原则
核心能力覆盖语音创作全链路:语音克隆(3 秒参考音频即可)、语音设计(自定义音色参数)、视频配音(多语言字幕级同步)、听写转写(646 语言)、有声书批量生成。默认引擎为 k2-fsa/OmniVoice,支持切换不同语音模型。
设计原则:本地优先(Local-First),联网服务始终是用户主动选择的可选项,而非隐藏依赖;没有用量计费,没有订阅制;音频数据永远留在用户设备上。
认可度
- GitHub Star:约 53.2k(截至 2026-10-05,36 天累计 +41.5k,日均 +1.2k)
- Fork:约 5.9k
- GitHub Trending 累计上榜 36 天,Python 类别日均 +3,483 Star
- 社区:Discord 活跃,英文/简体中文/日语三语 README,GitHub Issues 响应及时
- 社媒讨论:Twitter/YouTube 多语种测评,Reddit r/MachineLearning 置顶推荐,被多位 AI YouTuber 作为”ElevenLabs 免费替代”专题介绍
链接
GitHub:https://github.com/debpalash/VoiceStudio
原作者
debpalash(GitHub username),独立开发者,全职维护 VoiceStudio 项目,专注本地化语音 AI 工具。主页:voicestudio.sh
介绍
VoiceStudio 起源于一个朴素的需求:市面上的语音克隆服务都是云端 API,按字数或时长收费,用户数据必须上传——这对重视隐私的内容创作者和企业来说是无法接受的硬伤。debpalash 于是基于开源语音模型构建了这套完全本地运行的工具链。
默认引擎 OmniVoice 来自 k2-fsa,支持 646 种语言,覆盖了 ElevenLabs 免费版仅 74 种语言的数倍体量。用户只需要提供 3 秒干净音频作为参考,就能克隆任意音色,用于后续所有合成任务。整个流程在本地 GPU/CPU 上完成,不需要联网,不需要 API Key。
除了核心 TTS,VoiceStudio 还提供了完整的视频配音工作流:上传原始视频 → 选择目标语言 → 生成带时间轴的配音音轨 → 合成输出。整个过程一个人就能搞定多语言本地化,不需要配音棚,不需要配音演员。
特点
- 全本地运行:所有音频处理在你自己的机器上完成,数据不上云,隐私零风险
- 646 语言覆盖:OmniVoice 引擎支持 646 种语言,是 ElevenLabs 免费版的数倍
- 零成本无订阅:没有用量计费,没有月费,下载即用,后续使用零开销
- 多模态语音工作流:克隆 + 配音 + 听写 + 有声书,一个工具覆盖语音创作全场景
- MCP / Local API 支持:提供 MCP Server 和本地 API,可集成到 AI Agent 工作流(如 Claude Code、Cursor)实现自动化语音任务
- 跨平台:macOS(Apple Silicon 原生)、Windows、Linux、Docker 均可运行
使用方法
桌面应用安装(推荐):
# macOS / Linux / Windows 一键安装
curl -fsSL https://voicestudio.sh/install | sh
或直接下载 Releases(macOS .dmg、Windows .exe、Linux .AppImage/.deb)。
AI Agent 集成(语音任务自动化):
# 在支持 skills 的 Agent 中添加 VoiceStudio skill
npx skills add debpalash/VoiceStudio
# 选择 voicestudio 进行音频工作流,或 voicestudio-maintainer 做仓库维护
本地 API 启动后:
# 克隆声音
POST /clone — 上传 3 秒参考音频 + 文本 → 返回声音 ID
# 文字转语音
POST /tts — 声音 ID + 文本 → 返回音频文件
使用场景与人群
- 视频内容创作者:需要多语言配音本地化,不需要找配音演员,一个人搞定多语言版本
- 有声书制作人:批量文本转语音,全本地,无需租赁配音棚或购买云端服务
- 隐私敏感企业:内部语音合成需求,数据不能上云的金融、医疗、法律场景
- AI 应用开发者:通过 MCP/Local API 将语音能力集成到 Agent 工作流
- 多语言产品出海团队:646 语言覆盖,测试小语种市场本地化效果
目标用户:追求成本控制、隐私保护、语言覆盖广度的语音内容创作者和技术开发者。
输入与输出案例
案例一:克隆声音
– 输入:上传一段 3 秒的目标人物朗读音频(”今天天气真好”)
– 输出:生成该音色的声音 ID,后续所有文本均可使用该音色合成
案例二:视频多语言配音
– 输入:一条 5 分钟英文产品介绍视频 + 目标语言”中文普通话”
– 输出:生成中文配音音轨(带时间轴),与原视频自动合成,输出完整中文字幕视频文件
GitHub:https://github.com/debpalash/VoiceStudio | Star 约 53.2k(截至 2026-10-05)
评论区
登录后可评论。