
pyvideotrans是一个开源的视频翻译配音工具(开源协议GPL-v3),可将一种语言发音的视频,翻译为另一种语言发音的视频,并嵌入该语言字幕。它利用了先进的语音识别、机器翻译和语音合成技术,实现了视频的自动翻译和配音功能。
比如有一个英文电影,发音是英文,没有英文字幕,也没有中文字幕,使用这个工具处理后,可以转成带中文字幕,并且带有中文配音的电影。单从这么个描述来看是不是就已经感受到这个开源项目的厉害之处了。相信喜欢搜罗电影看的朋友们都是有可能有这个困扰的,看到了自己喜欢的电影或者视频,确听不懂在说什么,那么这个项目就绝对能够帮助到你了!
pyvideotrans-开源的视频翻译配音工具
pyvideotrans的主要功能特点
1.自动视频翻译
集成faster-whisper模型/并支持自定义huggingface模型,同时集成批量语音转字幕、批量字幕翻译、批量配音小工具。
2.多种配音和翻译渠道
配音:edgeTTS|AzureTTS|OpenAiTTS|Elevenlabs|clone-voice|GPT-SoVITS
翻译:Google|ChatGPT|DeepL|Gemini|Mircosoft|百度|腾讯|本地模型
3.可完全离线
翻译渠道替换为本地模型,配音渠道替换为clone-voice,即可实现完全本地离线视频翻译。
4.免费+开源
代码GitHub公开可审查,免费无功能限制,无隐藏收费。开源协议GPL-v3。
pyvideotrans的原理及转换流程
将原始视频先使用 ffmpeg 分离出音频文件和无声的mp4,然后利用 openai-whisper/faster-whisper模型识别出音频中的人声,并保存为srt字幕,接着将srt字幕翻译为目标语言并保存为srt字幕文件,再将翻译结果合成为配音音频文件。接着将配音音频文件、字幕srt文件、原无声mp4合并为一个视频文件,即完成翻译。
pyvideotrans的使用视频教程
https://img.pidoutv.com/wp-content/uploads/2024/07/1720604999-pyvideotrans.mp4
数据统计
相关导航

Verbalate AI是一款AI视频翻译和口型同步的工具。该工具利用人工智能技术,能够无缝地翻译视频中的口语,并将翻译内容与原视频中人物的口唇匹配。此外,它还具有语音克隆和多语言音轨功能,支持多种语言,允许用户创建多语言音轨和视频。

InVideo AI
InVideo AI是什么 InVideo A...

Project Blink
Project Blink 是 Adobe 实验室推出的一个基于云端的AI视频编辑工具,利用人工智能技术来简化视频编辑过程。这个工具可以让用户像编辑文本一样编辑视频,通过视频转录文本来剪辑实际视频内容。用户可以搜索视频中的特定对象或声音,例如大象、猫,或者笑声等。

Reface.ai换脸
Reface.ai是一款顶尖的人工智能AI换脸应用,这款应用程序以其有趣、好玩、滑稽和内容丰富而受到用户的喜爱。它允许用户在视频、GIF和表情包中进行换脸操作,提供了大量的素材库,用户只需要拍一张自拍即可轻松进行换脸操作。它可以识别面部特征并将用户的面部特征与其他人的面部特征进行比对。该软件可以换脸的速度非常快,而且换脸的效果也非常真实。RefaceAI支持多种不同的语言,包括中文、英文、日语、韩语等。

闪剪
闪剪是什么 闪剪是一款基于...

来画
依托AI技术,来画平台支持1分...

网易见外
专业在线语音录音转文字软件平台(付费)

Diffutoon
Diffutoon是一种先进的动漫风格渲染技术,它能够将真人视频转换成动漫风格。这个技术由阿里巴巴和华东师范大学的研究人员推出,基于扩散模型的可编辑卡通着色技术。Diffutoon具备内容一致性、高分辨率输出和智能编辑功能,适用于高分辨率和快速运动的视频。
暂无评论...