登录 注册
图像、视频与音频内容创作与媒体工具数据分析与数据处理 speech-to-textsttsubtitle-translationtext-to-speechttsvideo-transition
19,710
Stars
2,444
Forks
105
Watchers
10
Open Issues
GPL-3.0
许可证
Python
语言
2023-10-02
创建时间
2026-11-11
最近更新

项目能做什么

将视频从一种语言翻译为另一种语言,并自动生成配音与字幕。
来源:AI 基于仓库事实生成 · 内容以仓库实际 README 为准

使用说明 查看原始 README 原仓库文档

中文使用说明暂未生成。下面保留原仓库 README 摘录,命令与配置均以原文为准。
原始 README 摘录(英文原文,节选前 3000 字符)
# pyVideoTrans

> | Sponsors ||
> | :--- | :--- |
> | [Recall.ai Meeting Transcription API](https://www.recall.ai/product/meeting-transcription-api?utm_source=github&utm_medium=sponsorship&utm_campaign=jianchang512-pyvideotrans)   | If you’re looking for a transcription API for meetings, consider checking out **[Recall.ai](https://www.recall.ai/product/meeting-transcription-api?utm_source=github&utm_medium=sponsorship&utm_campaign=jianchang512-pyvideotrans)** , an API that works with Zoom, Google Meet, Microsoft Teams, and more |
> | [OfoxAI: Text, speech, image and video model APIs](https://ofox.ai/zh?utm_source=github&utm_medium=sponsorship&utm_content=pyvideotrans) | Access GPT, Claude, Gemini and DeepSeek text models, ElevenLabs speech models, and image and video generation models with one API key—choose the models that fit your creative needs. |


---

<div align="center">

**A Powerful Open Source Video Translation / Audio Transcription / AI Dubbing / Subtitle Translation Tool**

[简体中文](docs/README_CN.md) | [**Documentation**](https://pyvideotrans.com) | [**Online Q&A**](https://bbs.pyvideotrans.com)

[![License](https://img.shields.io/badge/License-GPL_v3-blue.svg)](LICENSE) [![Python](https://img.shields.io/badge/Python-3.10%2B-green.svg)](https://www.python.org/) [![Platform](https://img.shields.io/badge/Platform-Windows%20%7C%20macOS%20%7C%20Linux-lightgrey.svg)]()

</div>

**pyVideoTrans** is dedicated to seamlessly converting videos from one language to another, offering a complete workflow that includes speech recognition, subtitle translation, multi-role dubbing, and audio-video synchronization. It supports both local offline deployment and a wide variety of mainstream online APIs.


<img width="1730" height="957" alt="image" src="https://github.com/user-attachments/assets/25d78661-8b73-4f34-a3e5-205c7daba99b" />

---

##  Core Features

> [Technical Architecture and Principles](docs/architecture.md)

- **Fully Automatic Video Translation**: One-click workflow: Speech Recognition (ASR) → Subtitle Translation → Speech Synthesis (TTS) → Video Synthesis.
- **Audio Transcription / Subtitle Generation**: Batch convert audio/video to SRT subtitles, supporting **Speaker Diarization** to distinguish between different roles.
- **️Multi-Role AI Dubbing**: Assign different AI dubbing voices to different speakers.
- **Voice Cloning**: Integrates models like **F5-TTS, CosyVoice, GPT-SoVITS** for zero-shot voice cloning.
- **Powerful Model Support**:
  - **ASR**: Faster-Whisper (Local), OpenAI Whisper, Alibaba Qwen, ByteDance Volcano, Azure, Google, etc.
  - **LLM Translation**: DeepSeek, ChatGPT, Claude, Gemini, MiniMax, Ollama (Local), Alibaba Bailian, etc.
  - **TTS**: Edge-TTS (Free), OpenAI, Azure, Minimaxi, ChatTTS, ChatterBox, etc.
- **️Interactive Editing**: Supports pausing and manual proofreading at each stage (recognition, translation, dubbing) to ensure accuracy.
- **️Utility Toolkit**: Includes auxiliary tools such as vocal separati
阅读完整原文

商业机会分析 AI 生成

免本地硬件的云端视频翻译与自动配音 SaaS 平台

产品构想将原项目复杂的本地运行环境封装为开箱即用的Web端SaaS,提供云端GPU算力、优质商业TTS(如ElevenLabs/Azure)整合,主打按视频时长计费或包月订阅。
核心功能云端视频上传与一键翻译配音、多语种AI音色选择、可视化在线字幕/配音精细校对编辑器、多格式渲染导出。
目标用户无高端显卡且不具备Python环境配置能力的小白自媒体创作者、跨境营销人员。
难度/周期中等 · 1 - 2 个月 · 成本:GPU云服务器租赁费(按需)、第三方TTS与LLM翻译API调用成本、云存储与带宽成本。
收费模式按翻译处理时长充值收费(如 $0.2/分钟)或按月/年订阅会员制。
竞争风险GPL-3.0开源协议限制(需注意后端服务隔离或遵守开源义务);云端GPU和第三方API边际成本高,定价不当可能亏损。
依据 已验证事实(仓库高Star与多Fork证明受众面广,但本地运行依赖环境和本地算力存在明显门槛)

跨境电商出海短视频批量本地化生产工具

产品构想针对TikTok、Amazon等跨境卖家的带货视频出海痛点,定制批量视频去重、智能切片翻译、目标国特色口音配音与营销花字字幕叠加的垂直工具。
核心功能批量视频导入处理、电商敏感词与营销语境优化翻译Prompt、本土化拟真口音匹配、电商风格动效字幕模板。
目标用户跨境电商运营团队、MCN出海机构、独立站带货卖家。
难度/周期中等 · 1 - 1.5 个月 · 成本:前端UI开发、垂直电商Prompt调试及少量服务器测试成本。
收费模式月度/季度SaaS席位订阅费,或针对中大型卖家的定制工作流买断交付。
竞争风险跨境电商平台对AI搬运内容风控机制变动风险;客户对配音本土化真实感要求苛刻。
依据 数据支持的判断(跨境电商领域对多语种视频生产有直接刚需和付费预算)

企业私有化部署与本地超算工作流定制服务

产品构想针对有数据隐私保密要求(如未发布影视物料、企业内部多语种培训课件)的机构,提供基于本地物理机集群/私有云的一键部署方案、模型微调与专有工作流对接支持。
核心功能本地多卡GPU并发调度、私有化语音模型(Whisper/ChatTTS等)本地量化部署、企业内部NAS与剪辑软件(如PR/剪映)管线对接。
目标用户跨国企业培训部门、影视后期汉化组、涉密内容制作机构。
难度/周期中等偏高 · 2 - 3 周(以项目制交付) · 成本:主要为人力交付成本,无持续固定硬件支出。
收费模式私有化部署工程实施费(单次收费)+ 年度技术支持与模型维护升级费。
竞争风险交付周期可能受企业客户IT环境复杂性拖延;客单量较少,获客依赖人脉或私域推广。
依据 AI推测(影视与企业培训对内容隐私敏感,不愿上传公有云,存在本地私有化采购需求)
AI 基于仓库公开数据分析生成,含推测成分,不构成收益承诺。
报告会保存到 个人中心

竞品与相似项目 GitHub Search 真实检索

项目中文简介Stars语言
debpalash/VoiceStudio 中文介绍暂未生成
VoiceStudio is the open-source, fully-local ElevenLabs alter
107,057 Python
ggml-org/whisper.cpp 中文介绍暂未生成
Port of OpenAI's Whisper model in C/C++
55,074 C++
coqui-ai/TTS 中文介绍暂未生成
🐸💬 - a deep learning toolkit for Text-to-Speech, battle-test
46,208 Python
cjpais/Handy 中文介绍暂未生成
A free, open source, and extensible speech-to-text applicati
38,299 Rust
Zackriya-Solutions/meetily 中文介绍暂未生成
Privacy-first AI meeting note taker for Windows and macOS. F
32,595 Rust
mozilla/DeepSpeech 中文介绍暂未生成
DeepSpeech is an open source embedded (offline, on-device) s
26,775 C++
以上为通过 GitHub 官方 Search API 检索的相似项目,功能差异与优劣势需进一步人工确认,配置 AI 后可生成对比分析。

项目优势与风险

技术成熟度创建于 2023-10-02,近 30 天仍在推送,发布过 97 个 Release
社区活跃Star 19,710 / Fork 2,444 / Issue 10(数据支持,可自行核实)
许可证GPL-3.0 商用需注意传染性条款
主要风险上游项目方向可能变化;同赛道竞争者较多(见竞品表);热度与需求不完全等价

安装与使用

快速开始(以仓库 README 为准)
git clone https://github.com/jianchang512/pyvideotrans.git
cd pyvideotrans
# 请阅读仓库 README 获取确切安装步骤(依赖、配置、启动命令)
阅读原仓库文档
术语说明:Docker=应用容器(把程序和依赖打包运行);API Key=调用外部服务的密钥;Git Clone=把仓库代码下载到本地。常见错误:API Key 未配置 / 端口占用 / 数据库连接失败,多数项目在 README 的 Troubleshooting 章节有说明。