撸了个提取视频字幕并用大模型翻译的工具，专门针对日语优化，支持 Windows 和 macOS （ M 芯片）： https://github.com/cddqssc/Caption-Trans
如图，帮我的一个朋友翻译了一部番号为 ipx-726 的日语片，效果非常哇塞
利用 whisperX 的词级时间戳针对日语进行优化，其他语言保持 whisperX 的基本水准，比 whisper 强。
转录自动识别 GPU 加速
推荐使用 gemini flash lite 系列模型，速度快价格便宜，还能翻译敏感词
如图，帮我的一个朋友翻译了一部番号为 ipx-726 的日语片，效果非常哇塞
利用 whisperX 的词级时间戳针对日语进行优化，其他语言保持 whisperX 的基本水准，比 whisper 强。
转录自动识别 GPU 加速
推荐使用 gemini flash lite 系列模型，速度快价格便宜，还能翻译敏感词
第 1 条附言 · 3 月 23 日
翻译是先让 AI 总结全文，然后再逐批让 ai 翻译，每批有上下文关联
效果实测不错，有些模型还能翻译出非常下流的语句
效果实测不错，有些模型还能翻译出非常下流的语句
 |
1
frankkly 3 月 23 日  4
可以不可以开发一个 Chrome 插件，支持 MISSAV 在线实时翻译
|
 |
2
kimzn33251 3 月 23 日
挺有趣的
|
 |
6
xiangran0028 3 月 23 日 1
感谢 OP ，解决了我空闲学习日语的难题。
|
 |
7
burp2019 3 月 23 日
一大早，来学习姿势了，居然支持 GPU 加速
|
 |
8
shenhualv7 3 月 23 日 via Android
我看都是无字幕的呀，哪里有带字幕的片源
|
 |
10
Brightt OP @shenhualv7 不用带字幕，工具可以帮你提取出来
|
 |
13
shen13176101 3 月 23 日
666,从 ai 开始前我就一直想实现这个功能，当时一直没成功，今天终于见到这个功能了
|
 |
14
q2316367743 3 月 23 日
这必须要点个赞，下载去试试去
|
 |
15
goodryb 3 月 23 日
支持本地模型吗，Google 总是会麻烦一点
|
 |
18
sevenyangcc 3 月 23 日 12
@Brightt #11 不如 720p 的朦胧美，4K 60 帧的只能把演员的缺点暴露得更明显。
|
 |
19
yuwancumian27149 3 月 23 日
市面上一大堆支持 emby 、jellyfin 、plex 的播放器，如果哪款播放器播放日本电影的时候能像油管或者 b 站一样支持显示实时字幕就好了......
|
 |
20
licoycn 3 月 23 日
🐮🍺
|
 |
21
aero99 3 月 23 日
人才，正好缺少这个
|
 |
24
uxstone 3 月 23 日
之前看到过有个网站的进度条会显示哪个时间段用什么 doi 姿势
|
 |
26
gy0624ww 3 月 23 日
如果有实时更换配音就好了，可以御姐音，萝莉音。
 |
 |
27
FakerLeung 3 月 23 日 1
果然黄才是第一生产力
 |
 |
28
NafIyIz 3 月 23 日
感觉还是太麻烦，楼上说的对，感觉来了还得忍着整这个，不如在线的直接翻译。
|
 |
29
GodSppp 3 月 23 日
牛逼牛逼, 下班回去试试
|
 |
30
Sendya 3 月 23 日
果然搞涩涩才是第一生产力
|
 |
31
darksword21 PRO AI 就该这么用！
|
|
32
sevenyangcc 3 月 23 日
@Atlas058 #22 下过一次 VR ，我的天，差点 ED~~
|
 |
33
ala2008 3 月 23 日
下载到本地的一般都出了很久吧，字幕肯定有了。刚需是在线刚出的
|
 |
34
kcerty 3 月 23 日
@sevenyangcc #32 那么夸张啊。。。其实一点轻微朦胧还挺好的，挺清晰了反而没那么好看，缺点全部暴露出来。。
|
 |
35
fenfire 3 月 23 日
已经用 vivo 手机的实时翻译看了，那个都不用字幕，直接音频翻译
|
 |
36
vaily 3 月 23 日
兄弟牛逼，做了我想做的事👍
可以考虑加上 cli 版本，方便集成在自动化工作流里 |
 |
38
PC9528 3 月 23 日
@yuwancumian27149 potplayer 支持实时字幕的(还支持翻译), 不过本质上还是用 whisper 实时转录
|
 |
39
johnwonderful 3 月 23 日
666
|
 |
40
xrxsh 3 月 23 日
直接去色花堂下载中文字幕版本的呗
|
 |
41
sola97 3 月 23 日
我最近也搞了个用于翻译直播的，用的 qwen3-asr ，本地 gpu 推理，就是延迟有点大
|
 |
42
FlechazoQaQ 3 月 23 日
你做得好你做得好啊！！！
|
 |
44
Chicagoake 3 月 23 日
@xrxsh 有些片子没中文字幕，或者要等很久的。不过一般有资源流出，很快就有中文字幕了。
|
 |
45
myarsenal 3 月 23 日
如果没有日语字幕的能听译吗
|
 |
47
jpyl0423 3 月 23 日
有能在 wsl 里运行的包吗
|
 |
48
faceRollingKB 3 月 23 日
秀
|
 |
49
ShawnShi PRO 大善人
|
 |
50
shadowking 3 月 23 日
666 ，收藏了
|
 |
52
Adyun 3 月 23 日 1
行 现在字幕解决了 期待 AI 配音
|
 |
55
andyskaura 3 月 23 日
上周才造的轮子 https://v2ex.com/t/1199549
 太卷了点 |
 |
56
piaorenyong 3 月 23 日
能不能加上中文配音
|
 |
57
FarAhead 3 月 23 日
先翻译一部试试
|
 |
58
Kenopsia 3 月 23 日
科技改变生活！
|
 |
59
FreshOldMan 3 月 23 日
牛逼啊，真直击用户需求
|
 |
60
huyiwei 3 月 23 日
测试的时候废了不少纸吧
|
 |
62
kiii 3 月 23 日
反正也是麻烦，不如用 TTS 直接把日语翻译成中文语音，那多开心
|
 |
63
czlccczc 3 月 23 日 1
videocaptioner
|
 |
64
um1ng 3 月 23 日
 |
 |
65
Tesla9527 3 月 23 日
nice
|
 |
66
zuou 3 月 23 日
字幕翻译这个我之前也研究过，后来发现全部上下文直接发给 Grok ，让翻译好按格式返回效果更佳，不用批次翻译了
|
 |
67
tc5156 3 月 23 日
我回去试试，感谢老铁
|
 |
68
yanlaz 3 月 23 日
@sevenyangcc 还是清晰的好看，好看的会更好看，有真实感，我就不喜欢带太大滤镜的，现在拍的清楚的 4K 其实也不多
|
 |
69
0747916 3 月 23 日
科技改变生活
|
 |
70
nocmt 3 月 23 日
|
 |
71
andrew2558 3 月 23 日 1
印证了那句古语：色色才是第一生产力
|
 |
72
pandoudousteve 3 月 23 日
科技改变生活，兄弟你高低应该去 javbus 发个帖
|
 |
73
k4x7UW92WE8 3 月 23 日
有没有可以平替 miraa 的工具
|
 |
74
r6cb 3 月 23 日
什么时候加去码功能
|
 |
76
Nyeshuai 3 月 23 日 1
@sevenyangcc #18 一样的感觉，一般演员扛不住这种距离～牙齿深处黑的、黄的，痔疮颗粒，鸡皮肤，一被吸引力注意力就倒胃口。
|
 |
77
swananan 3 月 23 日
已经 star 了，能支持 codex 或者 cc 这种 agent 的使用方式吗，而不是 api
|
 |
78
junas7 3 月 23 日
很不错，强！
但是 Windows 版本首次启动安装依赖好像安装到 C 盘了，我以为会是项目目录。 |
 |
79
msn1983aa 3 月 23 日
果然 GHS 才是推动技术进步的动力
|
 |
81
crocoBaby 3 月 23 日
这才是让技术变得有意义
|
 |
82
Daniel0829 3 月 23 日
太牛逼了
|
 |
83
feidao158 3 月 23 日
让我想起来了我之前的一个想法，有个匹配该类视频字幕的网站，SubTitle Cat ， 之前我的想法是从视频里面提取出来音频 然后再从音频里面提取出来日文字幕 再根据这个日文字幕内容匹配出来对应的番号，根据番号再找对应的中文字幕，不知道这种有没有什么好的实现方式
|
 |
85
Hajar123 3 月 23 日
 下载好像有点问题 |
|
86
feidao158 3 月 23 日
@Brightt 因为我的视频都在 nas 上面，如果这个工具能够以一个脚本或者之类的方式运行，然后自动下载到对应目录下的文件就好了， 比如原视频是 xxx.mp4,然后通过这个 ai 工具匹配出来自动在同级目录下有了 xxx.ass 之类的，这样视频播放器就能自动匹配上这个字幕文件
|
|
88
goodryb 3 月 23 日
本地模型有测试过哪个翻译效果好点么，我用 qwen3 8b 感觉像是直译的，准确度不够高； 另外这个每次翻译 x 条字幕，是会带上下文么，设置大一点效果更好？
|
|
90
feidao158 3 月 23 日
|
 |
91
xwhxbg 3 月 23 日
英雄，其实我真的只拿来看生肉日本电影和动漫，绝不是看 JAV
|
 |
94
saaak 3 月 23 日
@feidao158 #90 我现在用的 jellyfin 安装 metatube 插件，对小日子的片子刮削挺准的，大部分情况下不用手动修改。你可以看看这个项目怎么做的（ https://github.com/metatube-community/jellyfin-plugin-metatube ）
|
|
95
feidao158 3 月 23 日
@saaak 好的 感谢老哥，我研究看下，我另外一个想法是通过 ffmpeg 截取视频关键帧，通过这个来识别，不过就跟 OP 说的一样 这个也需要一个庞大的数据库，这个也没有什么公开的 API
|
 |
96
niubi666wodebody 3 月 23 日
6666
|
|
97
niubi666wodebody 3 月 23 日
有去码软件吗
|
 |
98
ccvip 3 月 23 日
谢谢兄弟，我这里有很多的剧场版和学习资料，迫切需要。 另外，有没有可能研发个根据字幕 AI 配音的插件[doge]
|
|
100
feidao158 3 月 23 日
|
Select Language