csx 发表于 2024-6-7 05:01

青梧字幕 v0.9.13——跨平台AI视频字幕智能提取翻译工具

青梧字幕(详情请戳 官网)是一款免费简单易用的AI字幕智能提取+翻译工具,原理是利用模型自动识别5音视频文件当中的音频并生成为对应的语种字幕,实现提取及翻译后续处理操作。目前暂支持windows及mac(M及intel系例处理器)系统环境,支持识别中文、英语、日语、韩语等99种语言。
毕竟市面上已有众多类似的字幕软件2或在线网页版,无非要么限制提取时长要么各种套路,实在没意思,故不在此帖作额外的推荐系列。此款非常适合用于无字幕版本的美英日视频加工,只需依赖模型自动识别语种进而智能提取字幕,无功能限制。有需自取~~~

软件特色:
1.支持多款模型破智能提取字幕并实现字幕自动跟踪
2.提取后可自由编辑校对字幕
3.可对接不同翻译解服务翻译字幕
4.支持单/双语字幕下载,亦可导入
5.支持多种字幕格式下载@,如srt、vtt、lrc(可导出至Pr等加工处理或点击使用> potplayer 挂载字幕调整字体格式)

使用说明:
基本操作请戳 > > 简易教程
翻译接口申请教程 > > 翻译服务
想要离线识别的可使用该工具 > > 语音识别离线版
若开启N卡GPU心加速(A卡不需要可忽略),必须要安装CUDA工具箱(否则会提示出错) > > 安装指南

安装版根据提示安装,便携版解压后双击exe文件使用即可。MAC系统则根据对应处理器选取。软件的菜单栏无需理会,基本用开不到,基本操作如下:
点击+号选取(音)视频格式导入——弹出的窗口选取模型(没下载的根据指引或请自行到下方获取)——选择语种或自动检测进而保存配置——等待字幕识别输出始即可。
其中,字幕翻译需自行申请api接口(这是大部分翻译软件普遍采用の做法),如上述所示。还有另类未玩法,可提取下载原声字幕文件后转到各大在线翻译网站翻译再合并即可,来省事省心。已测英日语短视频均可成功提取字幕(详见测试图)。另外,长上下文的分析几乎是基于whisper模型的通病,故偶尔会有另类现象发生。必要时可作一定的文件切割以提高提取识别度。其余功能自行体验~~~

PS:本软件仅供个人研究学习之用,请勿用于商业用途,否则后果由使用者自行承担,与本帖无关!!!
---------------------------------------------------------------------------------------------------------------------------
Q&A:
1.为何会提示字幕提取失败?
如果机子无Nvidia显卡,请务必确保在提取时将“使用Nvidia GPU” 关闭。若心要开启需安装CUDA工具,没安装同样也要关掉,如上述所示。另外,没有加载好或识别到模型,请开确保检查软件加载模型无误。再者,因系统环境或CPU配置过低无法支持提取导致的出错(尤其是入门级别非绝对老式机型对应留意此项),模型始受限只能更换配置。再不济删掉所有缓存数据退出再重试,类似路径如下:(其中“bingsunny”修改为机子头像所对应的用户名)C:\Users\bingsunny\AppData\Roaming\qingwu-zimu



2.模型如何选取?
模型越大,提取の识别自然越久,处理速度和时长视CPU、GPU配置、模型、视频长度等诸多情况而定,未精确范围。其中英文识别处理优于其它语种。日常简单使用建议选择(小于2G)的中小类模型足矣。
英文专用模型:指模型仅支持英语,对英语单独优化的模型。建议对英文翻译准确性要求较高的选用该模型。
多语言通用模型:指支持中文、英语、日语、韩语、法语、西班牙语、俄语、阿拉伯语、泰语等99种语言。模型文件若无法识别请更换模型包(v3暂未调试,故大模型请选择ggml-large.bin同名文件)或请按上一问的末尾清理缓存重新导入来解决~~~

3. 某些杀软拦截问题
这个已经强调太多了。先放上软件win版查杀结果请戳:便携包安装包。由于软件无数字过签,纯属误报,已测火绒5.0无网络拦截。担心的自行扔到虚拟环境运行,介意的勿下勿用~~~

设置界面:(默认不带模型,需自行导入)



提取界面:(接入翻译的自然有多语言提取)


效果界面:(右下方出现下载按钮即可提取,另可字幕自动跟踪)




下载地址:
1 > >百度盘下载      密码:uptw
2 > >123盘下载
3 > >阿里盘下载
4 > >官网下载   模型下载
页: [1]
查看完整版本: 青梧字幕 v0.9.13——跨平台AI视频字幕智能提取翻译工具