关于无网环境下为live视频添加中日双语字幕的全流程跑通
设备 r9000x 2021r 5800h+3060 24g内存 6g显存
shp9500 31993+97220小尾巴
系统 win11 最新
app lmstudio, subtitle edit, momeai
llm whisper large v2, sakura17b qwen3
观前提示 作者是羊噶,收集了全部mygo live视频,但原生不带翻译,导致观看略有阻碍,因此耗时大概半天在哈基米的帮助下跑通了全流程,本文仅为记录。
首先向哈基米提出愿望,哈基米回应我说memoai可行,但实际应用中发现memoai的转写功能如果要用gpu加速,就要付费开pro,否则只能试用四次,由于我没有五十刀乐,因此决定使用迂回战术。
先使用subtitle edit的视频-语音转文本功能,引擎选择whisper cpp,后台选择cublas,这样就可以激活gpu加速了,模型选择large v2 ,输入语言选择jap,勾选后处理,在后处理的高级选项中取消勾选合并短行,在高级设置中启用vad,如上设置后导入live视频,便可以静待第一份全日语srt生成,准确率很高。
得到第一份srt后,先启用lmstudio的developer中的local server本地服务并加载sakura14b,随后将视线转到momeai ,打开设置-语言模型,选择lmstudio ,填入api key并勾选sakura14b,测试能够跑通。
接下来将第一份日语srt 导入momeai ,在翻译功能中选择本地模型llm sakura14b,高级选项中选择 字幕与音视频术语 以及预设 自然本地化,点击翻译。
观后提示 其实网上有很多大佬们自制带翻译的live视频,没必要自己做,llm识别的准确率受vo发音的影响很大,比如羊宫唱的teardrops,开头的teardrops revolution ,whisper 从small到large的每个版本全都无法正确识别。
但如果你的流量也比较贵的话,enjoy it!
#灯祥爱音素世关系大乱斗##吧友来聊聊mujica完结##祥子情归何处掀热议##初华祥子回忆杀吃书实锤了##素睦领跑可太稳了##独角兽十二话隐喻藏惊天雷#
设备 r9000x 2021r 5800h+3060 24g内存 6g显存
shp9500 31993+97220小尾巴
系统 win11 最新
app lmstudio, subtitle edit, momeai
llm whisper large v2, sakura17b qwen3
观前提示 作者是羊噶,收集了全部mygo live视频,但原生不带翻译,导致观看略有阻碍,因此耗时大概半天在哈基米的帮助下跑通了全流程,本文仅为记录。
首先向哈基米提出愿望,哈基米回应我说memoai可行,但实际应用中发现memoai的转写功能如果要用gpu加速,就要付费开pro,否则只能试用四次,由于我没有五十刀乐,因此决定使用迂回战术。
先使用subtitle edit的视频-语音转文本功能,引擎选择whisper cpp,后台选择cublas,这样就可以激活gpu加速了,模型选择large v2 ,输入语言选择jap,勾选后处理,在后处理的高级选项中取消勾选合并短行,在高级设置中启用vad,如上设置后导入live视频,便可以静待第一份全日语srt生成,准确率很高。
得到第一份srt后,先启用lmstudio的developer中的local server本地服务并加载sakura14b,随后将视线转到momeai ,打开设置-语言模型,选择lmstudio ,填入api key并勾选sakura14b,测试能够跑通。
接下来将第一份日语srt 导入momeai ,在翻译功能中选择本地模型llm sakura14b,高级选项中选择 字幕与音视频术语 以及预设 自然本地化,点击翻译。
观后提示 其实网上有很多大佬们自制带翻译的live视频,没必要自己做,llm识别的准确率受vo发音的影响很大,比如羊宫唱的teardrops,开头的teardrops revolution ,whisper 从small到large的每个版本全都无法正确识别。
但如果你的流量也比较贵的话,enjoy it!

#灯祥爱音素世关系大乱斗##吧友来聊聊mujica完结##祥子情归何处掀热议##初华祥子回忆杀吃书实锤了##素睦领跑可太稳了##独角兽十二话隐喻藏惊天雷#









