VoiceStudio:开源本地语音工厂,646语言全包的视频配音与克隆神器

VoiceStudio:开源本地语音工厂,646语言全包的视频配音与克隆神器

VoiceStudio 是一个完全本地运行的语音克隆与合成工具,一句话介绍:把 ElevenLabs 搬到你电脑里——克隆声音、配音视频、生成有声书,全部离线,646 种语言,不要订阅,不要 API Key。过去 30 天狂涨 4.1 万 Star,冲上 GitHub Trending 36 天,是当前语音 AI 开源领域最炙手可热的项目。

功能与原则

核心能力覆盖语音创作全链路:语音克隆(3 秒参考音频即可)、语音设计(自定义音色参数)、视频配音(多语言字幕级同步)、听写转写(646 语言)、有声书批量生成。默认引擎为 k2-fsa/OmniVoice,支持切换不同语音模型。

设计原则:本地优先(Local-First),联网服务始终是用户主动选择的可选项,而非隐藏依赖;没有用量计费,没有订阅制;音频数据永远留在用户设备上。

认可度

  • GitHub Star:约 53.2k(截至 2026-10-05,36 天累计 +41.5k,日均 +1.2k)
  • Fork:约 5.9k
  • GitHub Trending 累计上榜 36 天,Python 类别日均 +3,483 Star
  • 社区:Discord 活跃,英文/简体中文/日语三语 README,GitHub Issues 响应及时
  • 社媒讨论:Twitter/YouTube 多语种测评,Reddit r/MachineLearning 置顶推荐,被多位 AI YouTuber 作为”ElevenLabs 免费替代”专题介绍

链接

GitHub:https://github.com/debpalash/VoiceStudio

原作者

debpalash(GitHub username),独立开发者,全职维护 VoiceStudio 项目,专注本地化语音 AI 工具。主页:voicestudio.sh

介绍

VoiceStudio 起源于一个朴素的需求:市面上的语音克隆服务都是云端 API,按字数或时长收费,用户数据必须上传——这对重视隐私的内容创作者和企业来说是无法接受的硬伤。debpalash 于是基于开源语音模型构建了这套完全本地运行的工具链。

默认引擎 OmniVoice 来自 k2-fsa,支持 646 种语言,覆盖了 ElevenLabs 免费版仅 74 种语言的数倍体量。用户只需要提供 3 秒干净音频作为参考,就能克隆任意音色,用于后续所有合成任务。整个流程在本地 GPU/CPU 上完成,不需要联网,不需要 API Key。

除了核心 TTS,VoiceStudio 还提供了完整的视频配音工作流:上传原始视频 → 选择目标语言 → 生成带时间轴的配音音轨 → 合成输出。整个过程一个人就能搞定多语言本地化,不需要配音棚,不需要配音演员。

特点

  • 全本地运行:所有音频处理在你自己的机器上完成,数据不上云,隐私零风险
  • 646 语言覆盖:OmniVoice 引擎支持 646 种语言,是 ElevenLabs 免费版的数倍
  • 零成本无订阅:没有用量计费,没有月费,下载即用,后续使用零开销
  • 多模态语音工作流:克隆 + 配音 + 听写 + 有声书,一个工具覆盖语音创作全场景
  • MCP / Local API 支持:提供 MCP Server 和本地 API,可集成到 AI Agent 工作流(如 Claude Code、Cursor)实现自动化语音任务
  • 跨平台:macOS(Apple Silicon 原生)、Windows、Linux、Docker 均可运行

使用方法

桌面应用安装(推荐):

# macOS / Linux / Windows 一键安装
curl -fsSL https://voicestudio.sh/install | sh

或直接下载 Releases(macOS .dmg、Windows .exe、Linux .AppImage/.deb)。

AI Agent 集成(语音任务自动化):

# 在支持 skills 的 Agent 中添加 VoiceStudio skill
npx skills add debpalash/VoiceStudio
# 选择 voicestudio 进行音频工作流,或 voicestudio-maintainer 做仓库维护

本地 API 启动后:

# 克隆声音
POST /clone — 上传 3 秒参考音频 + 文本 → 返回声音 ID
# 文字转语音
POST /tts — 声音 ID + 文本 → 返回音频文件

使用场景与人群

  • 视频内容创作者:需要多语言配音本地化,不需要找配音演员,一个人搞定多语言版本
  • 有声书制作人:批量文本转语音,全本地,无需租赁配音棚或购买云端服务
  • 隐私敏感企业:内部语音合成需求,数据不能上云的金融、医疗、法律场景
  • AI 应用开发者:通过 MCP/Local API 将语音能力集成到 Agent 工作流
  • 多语言产品出海团队:646 语言覆盖,测试小语种市场本地化效果

目标用户:追求成本控制、隐私保护、语言覆盖广度的语音内容创作者和技术开发者。

输入与输出案例

案例一:克隆声音
– 输入:上传一段 3 秒的目标人物朗读音频(”今天天气真好”)
– 输出:生成该音色的声音 ID,后续所有文本均可使用该音色合成

案例二:视频多语言配音
– 输入:一条 5 分钟英文产品介绍视频 + 目标语言”中文普通话”
– 输出:生成中文配音音轨(带时间轴),与原视频自动合成,输出完整中文字幕视频文件


GitHub:https://github.com/debpalash/VoiceStudio | Star 约 53.2k(截至 2026-10-05)


GitHub: https://github.com/debpalash/VoiceStudio

评论区

0 条评论

登录后可评论。

Skill超级捕获手 1215 阅读