让郭德纲说起英语相声,这个华人创办的软件最近火了

大河报·豫视频记者 孙凯杰

【核心提示】

最近,很多人都被社交网络上的一类视频刷屏了:郭德纲用英语说相声、赵本山用英语讲小品、泰勒·斯威夫特用中文接受采访……这类由AI生成的视频,竟然能仅凭原视频,就能翻译毫无违和感的多种语言视频,这一功能被众多网友评价为“颠覆性的功能”。

郭德纲用英语说相声的类似视频

让郭德纲说英语相声毫无违和,这家软件出自华人老板

这些颠覆性的效果,都出自一家名为HeyGen的软件之手。HeyGen成立于2020年,是一家以人工智能、计算机视觉主导的公司,而他的创始人Joshua Xu是一名华人,其个人资料显示,Joshua Xu于2013年毕业于同济大学,随后赴美,2014年毕业于卡内基梅隆大学,毕业后在照片分享应用SnapChat公司担任了6年的工程师职位,之后便创立了HeyGen公司。

HeyGen创始人Joshua Xu的个人资料页面

HeyGen公司拥有众多业务。记者在HeyGen的官网上看到,他们提供了一系列数字孪生相关的业务,例如数字人模型、虚拟主播播报、生成本人的数字孪生模型等多项功能。不过,自从2023年8月推出了“视频翻译”功能后,HeyGen便打开了新世界的魔法,不仅让马斯克都直呼“有意思”,更是在中文互联网中,彻底地火了一把。

马斯克对HeyGen翻译视频功能的评价

从10月起,中文互联网陆续出现了大批“翻译视频”,令不少老梗翻红,更让许多名场面加了点新味道。这其中,最出圈的莫过于“郭德纲用英语说相声”。在哔哩哔哩网站中,相关视频里播放最高的一条已经超过了80万的点击量。面对如此“丝滑”的口音转换,不少人评论道:“是不是以后一半翻译专业的人都要失业了?”

除了颠覆性的技术意外,这份惶恐,似乎也是“视频翻译”功能爆火的一大原因。不过,根据记者实际测试,HeyGen目前的口型、口音甚至动作都能做到惟妙惟肖,但仍会有翻译不够准确的现象存在。

记者实测“视频翻译功能”:排队需要一整天,英译中并不算完美

目前,HeyGen为免费用户提供了大约2次的免费翻译功能,用户可以自行上传一段2-5分钟的视频,选择输出语言,就能进行转换了。不过,由于HeyGen目前太过火爆,免费用户需要排队等待,而付费用户则可以优先进行后台转换,导致等待时间较长。在网站中,我们处于第6000多名的位置,记者等待了近24个小时,才成功下载到了转换好的视频。

记者使用免费版翻译视频,前方有6070位用户正在等待转换

为了对比HeyGen翻译视频的准确度,记者找到了苹果公司创始人乔布斯的一段英文演讲视频,附带双语字幕,其中的中文字幕是由人工翻译的,更贴近中文语法语境,方便后期与HeyGen的成果作对比。

在转换的视频中,HeyGen在口音、声音、动作上,都做到了相当成熟的水准,视频中的一字一顿,都像是真实发生的一样。不过,在翻译的适配上,HeyGen更倾向于识别英文语音直译,与中文的叙述语序有些割裂;并且,在中断的连句中,HeyGen有时会判断错误,把上一句的后半句识别成下一句的上半句,导致曲解原意。

由此看来,HeyGen无论是在时间成本还是在准确度上,都无法代替一部分的人工翻译功能。不过,它将多项开源应用整合,推出了如此完善的产品,不得不令人对人工智能的未来产品充满了期待。

记者使用HeyGen翻译的视频截图

资料显示,HeyGen的翻译功能、口型同步、语音克隆均使用了不同公司开发的技术,这也算是“虚拟世界的供应链整合”了。目前,HeyGen的最低订阅价格是29美元/月。

视频翻译“图一乐”,但传播也有法律风险

随手刷刷几个热门视频平台,很容易就能找到类似的翻译视频。相比于发布转载其它视频,这些翻译视频会让自媒体博主获得更高的流量、更高的关注度,进而从中获利。如果制作翻译视频只是为了“图一乐”倒还好,当下已有不少博主翻译他人的视频传播获利,又会有哪些法律风险呢?

HeyGen官网上的虚拟主播示例

上海大邦律师事务所高级合伙人游云庭律师向记者介绍,在互联网传播他人的翻译视频,可能存在三个方面的风险:

首先是人身权的风险。个人肖像、声音权都是受到保护的,如果把他人的肖像上传,再对其声音做处理,之后获得盈利,那毫无疑问是侵权行为。

其次是知识产权的风险。每个原视频,摄制者的权利都会被保护,而如果使用原视频剪辑、编辑后形成新的视听作品,也需要先获得摄制者的授权。

最后是文字授权的风险。每个含有讲话的片段都包含着各种语言的文字,二创者不仅要为这些文字拿到授权,还要拿到翻译的授权。

游云庭向记者介绍,比如你传了郭德纲的相声视频,就需要取得郭德纲的肖像权、声音权的授权、相声视频的录像制作者权和相声文字内容版权授权,缺少任何一个都可能涉嫌侵权,“当然,郭德纲是公众人物,这种无伤大雅的传播其可能未必会维权,但如果其想维权,发布视频者打官司肯定会输。”游云庭说道。

记者经过检索发现,目前,一些视频网站会对AI合成的视频加上“该内容疑似使用AI技术合成,请谨慎甄别”的类似标签,但大部分平台尚未对此类视频进行下架处理。HeyGen固然是个好工具,但如果用错了地方,还有可能为此付出沉重的代价。

来源:大河报·豫视频 编辑:龚旭

分享到