音视频翻译(公测中)
音视频功能目前处于公测阶段,欢迎将你的使用体验反馈给我,我会尽可能改进。
另外请注意,音视频功能需要用到腾讯的实时语音识别服务将音频转为文字,无论你是不是会员,这项服务目前都需要额外购买翻译积分来使用,因为这个服务除了密钥之外还需要提供额外的信息才能调用,而划词翻译目前暂不支持填写这个额外信息。我会在未来的版本中将它改为可以通过密钥使用,进展可以关注工单 #1569。
自 v8.3.0 起,划词翻译新增了音视频翻译功能,可以用来翻译网页里的音频和视频。
音视频翻译功能可以通过以下任一方式打开:
- 鼠标右键单击网页,在弹出来的右键菜单中选择 “划词翻译” -> “音视频翻译”
- 点击翻译面板左上角的“视频”图标
打开音视频翻译功能后,网页右下角会显示一个弹框,网页中的音视频会自动暂停,然后你可以选择以下两种方式翻译网页中的音视频。
音视频功能在开发时在 Youtube 和 B 站做了测试,理论上也支持其它视频网站,但有的视频网站可能比较特殊,开启音视频后会提示“当前页面没有音视频”或者识别不出文字。如果你遇到了这样的视频网站,请反馈给我,我会做适配。
第一种:逐句翻译
点击【播放视频并开始识别】按钮后,视频会开始播放,按钮会变成【停止识别并翻译】,然后划词翻译会开始接收视频的语音进行识别,识别出来的文字内容会实时更新并显示在按钮下方。未完成识别的文字内容会以灰色显示,完成识别的会以白色显示。
你可以随时点击【停止识别并翻译】按钮,点击之后,划词翻译会将这段时间内识别出来的文字发送给翻译面板进行翻译。
第二种:实时翻译
点击【播放视频并开始翻译】按钮后,划词翻译会开始将视频的语音识别为文字,文字内容会实时更新并显示在按钮下方。当识别到完整的一句话之后,文字内容和翻译结果会以黑底白字的形式显示在整个网页的上方,作为实时字幕显示出来。
注意:v8.3.0 版本的划词翻译会固定使用【谷歌翻译】获取翻译结果,后面的版本中会开放选择。
目前划词翻译使用的腾讯云实时语音识别服务还无法做到准确断句,所以在一些语音比较紧凑的视频中,会出现视频说了好几句话之后,划词翻译才显示一大段翻译结果的情况。这种情况下,建议使用逐句翻译。在后面的版本中,划词翻译会接入更多语音识别服务,提高识别准确率。
我该如何选择?
如果你希望得到更准确的翻译结果,那么就选择【逐句翻译】。逐句翻译可以让你手动断句,这同时也提高了翻译准确度。另外,由于是用翻译面板进行翻译的,所以会显示多个翻译服务的对比。
如果你希望能随着视频的播放实时显示翻译结果,那么就选择【实时翻译】。实时翻译下,翻译服务会自动判断何时断句,但并不准确,所以实时翻译是以牺牲翻译准确度来达到“准”实时字幕的。另外,实时翻译只会显示一个翻译服务的翻译结果(目前固定使用【谷歌翻译】的翻译结果)。
其它注意事项
划词翻译内置的语音识别服务不支持音视频翻译功能,所以只能用腾讯云的实时语音识别服务。使用腾讯云实时语音识别服务需要前往【服务申请】页面购买翻译积分。
如果在使用过程中消耗完了翻译积分,识别服务会立刻断开。为了不影响使用,请确保有足够的翻译积分。