登录 注册
图像、视频与音频开发者工具AI 模型与开发框架 ai-translationdubbinglocalizationvideo-translationvoice-cloning
19,154
Stars
2,114
Forks
106
Watchers
25
Open Issues
Apache-2.0
许可证
Python
语言
2024-08-09
创建时间
2026-11-10
最近更新

项目能做什么

全自动 AI 视频字幕组工具,支持高质量字幕切割、翻译、对齐以及自动配音。
来源:AI 基于仓库事实生成 · 内容以仓库实际 README 为准

使用说明 查看原始 README 原仓库文档

中文使用说明暂未生成。下面保留原仓库 README 摘录,命令与配置均以原文为准。
原始 README 摘录(英文原文,节选前 3000 字符)
<div align="center">

<img src="/docs/logo.png" alt="VideoLingo Logo" height="140">

# Connect the World, Frame by Frame

<a href="https://trendshift.io/repositories/12200" target="_blank"><img src="https://trendshift.io/api/badge/repositories/12200" alt="Huanshere%2FVideoLingo | Trendshift" style="width: 250px; height: 55px;" width="250" height="55"/></a>

[**English**](/README.md)|[**简体中文**](/translations/README.zh.md)|[**繁體中文**](/translations/README.zh-TW.md)|[**日本語**](/translations/README.ja.md)|[**Español**](/translations/README.es.md)|[**Русский**](/translations/README.ru.md)|[**Français**](/translations/README.fr.md)

</div>

## 🌟 Overview ([Try VL Now!](https://videolingo.io))

VideoLingo combines speech recognition, subtitle translation, segmentation and dubbing in a Streamlit interface. It produces subtitle files and optionally subtitled or dubbed videos. Translation quality depends on the source audio, language and chosen models.

Key features:
- 🎥 YouTube video download via yt-dlp

- Word-level speech recognition and alignment with Qwen3-ASR + Qwen3-ForcedAligner

- **📝 NLP and AI-powered subtitle segmentation**

- **📚 Custom + AI-generated terminology for coherent translation**

- Direct translation with optional reflection and natural rewriting

- Subtitle segmentation with configurable length limits

- **🗣️ Dubbing with GPT-SoVITS, OpenAI, Edge TTS, and more**

- 🚀 One-click startup and processing in Streamlit

- 🌍 Multi-language support in Streamlit UI

- 📝 Detailed logging with progress resumption

- 🔍 Model searchbox with API auto-fetch — search and filter from your provider's full model list

- ⏯️ Task control — pause, resume, or stop processing at any step

The workflow combines transcription, translation, subtitle layout and dubbing in one project.

## 🎥 Demo

<table>
<tr>
<td width="33%">

### Dual Subtitles
---
https://github.com/user-attachments/assets/a5c3d8d1-2b29-4ba9-b0d0-25896829d951

</td>
<td width="33%">

### Cosy2 Voice Clone
---
https://github.com/user-attachments/assets/e065fe4c-3694-477f-b4d6-316917df7c0a

</td>
<td width="33%">

### GPT-SoVITS with my voice
---
https://github.com/user-attachments/assets/47d965b2-b4ab-4a0b-9d08-b49a7bf3508c

</td>
</tr>
</table>

### Language Support

**Input languages:**

🇺🇸 English 🤩 | 🇷🇺 Russian 😊 | 🇫🇷 French 🤩 | 🇩🇪 German 🤩 | 🇮🇹 Italian 🤩 | 🇪🇸 Spanish 🤩 | 🇯🇵 Japanese 😊 | 🇨🇳 Chinese 🤩

Dubbing languages depend on the selected TTS method.

## Installation

VideoLingo supports Windows, macOS (Apple Silicon / Intel), and Linux.

### Ask your local AI agent 🤖

If you use an AI agent that can operate your computer, send it this prompt:

> Install and launch GitHub's Huanshere/VideoLingo on my computer.

### Windows: one-click install 🎉

1. Download **Source code (zip)** from the [latest Release](https://github.com/Huanshere/VideoLingo/releases/latest), extract it to your Desktop or another folder, and open the folder.
2. Double-click `OneKeyStart.bat` and keep the window open. On
阅读完整原文

商业机会分析 AI 生成

云端一键视频本地化 SaaS 平台

产品构想将开源工作流封装为开箱即用的 Web 端服务,整合 GPU 算力、优质语音模型与大模型翻译,用户上传视频即可自动生成多语言配音与字幕。
核心功能云端一键上传转换、在线字幕/时间轴可视化微调、优质多语种音色库集成、导出无水印高清成片。
目标用户没有本地高性能 GPU、不具备 Python/Docker 部署能力的中小内容创作者与跨境电商卖家。
难度/周期中等 · 4-6 周 · 成本:中等(前期云端 GPU 实例、对象存储与第三方 LLM/TTS API 消耗成本)
收费模式按处理视频时长充值(如 $0.2/分钟)或按月订阅会员制(梯级提供处理时长额度)。
竞争风险云端算力与大模型/TTS API 成本较高,单客利润率需严格测算;容易陷入与同类云端剪辑工具的价格战。
依据 数据支持的判断

面向创作者的 Pro 版桌面端工具与工作流插件

产品构想开发针对个人电脑的独立客户端(Electron/Tauri),提供更稳定的依赖管理、本地硬件加速适配,并增强批量搬运与剪辑软件导出功能。
核心功能一键本地离线环境安装包、支持主流剪辑软件(如 Premiere、Final Cut Pro、剪映/CapCut)工程文件导出、批量排队任务处理、专有违禁词与术语表过滤。
目标用户拥有中高端显卡、注重隐私或频繁处理大批量视频的专业剪辑师与搬运工作室。
难度/周期中等 · 3-5 周 · 成本:极低(主要是打包签名证书与本地分发带宽成本,无服务端 GPU 支出)
收费模式买断制 License(单设备/多设备授权)或年度功能更新维护费。
竞争风险开源版本直接可用,Pro 版需具备极强的体验优势(如免去环境配置痛点、批量流水线)才具备足够吸引力。
依据 AI推测

出海 MCN / 机构级私有化部署与 API 定制方案

产品构想为拥有持续高频搬运或出海需求的企业客户提供私有化部署支持、专属品牌音色克隆以及工作流深度定制。
核心功能私有化集群部署方案、指定核心角色音色高保真克隆、特定行业专业术语词库优化、自动化矩阵推流对接 API。
目标用户短剧出海制作方、海外公开课引进平台、跨国企业 HR/内训部门。
难度/周期较高 · 6-8 周 · 成本:低至中等(主要为交付人力与驻场/远程调试成本)
收费模式项目制部署费 + 年度技术支持/运维服务费 + 定制音色模型训练费。
竞争风险B端客户获客周期长、定制化需求碎片化,独立开发者交付与维护精力容易被过度消耗。
依据 尚需验证的假设
AI 基于仓库公开数据分析生成,含推测成分,不构成收益承诺。
报告会保存到 个人中心

竞品与相似项目 GitHub Search 真实检索

项目中文简介Stars语言
PDFMathTranslate/PDFMathTranslate 中文介绍暂未生成
[EMNLP 2025 Demo] PDF scientific paper translation with pres
38,348 Python
krillinai/OpenCreator 中文介绍暂未生成
Formerly KrillinAI, VideoTranslation and Dubbing Tool for 12
14,292 TypeScript
nexmoe/VidBee 中文介绍暂未生成
Download video and audio from 1000+ sites, transcribe locall
11,110 TypeScript
Narcooo/inkos 中文介绍暂未生成
Story Creation AI Agent for novel, scripts, translation, int
11,106 TypeScript
zyddnys/manga-image-translator 中文介绍暂未生成
Translate manga/image 一键翻译各类图片内文字 https://cotrans.touhou.ai/
10,583 Python
mengxi-ream/read-frog 中文介绍暂未生成
🐸 Read Frog - Open-source AI language learning & flashcards,
10,379 TypeScript
以上为通过 GitHub 官方 Search API 检索的相似项目,功能差异与优劣势需进一步人工确认,配置 AI 后可生成对比分析。

项目优势与风险

技术成熟度创建于 2024-08-09,近 30 天仍在推送,发布过 49 个 Release
社区活跃Star 19,154 / Fork 2,114 / Issue 25(数据支持,可自行核实)
许可证Apache-2.0
主要风险上游项目方向可能变化;同赛道竞争者较多(见竞品表);热度与需求不完全等价

安装与使用

快速开始(以仓库 README 为准)
git clone https://github.com/Huanshere/VideoLingo.git
cd VideoLingo
docker compose up -d   # 或参考 README 中的 docker run 命令
阅读原仓库文档
术语说明:Docker=应用容器(把程序和依赖打包运行);API Key=调用外部服务的密钥;Git Clone=把仓库代码下载到本地。常见错误:API Key 未配置 / 端口占用 / 数据库连接失败,多数项目在 README 的 Troubleshooting 章节有说明。