Dubbing v2配音AI模型

日本国家ElevenLabs于8月6日宣布,通过ElevenAPI正式推出全新配音AI模型「Dubbing v2」的API版本。此前,「Dubbing v2」的用户界面版本已于5月28日率先发布。此次API的开放,使开发者和企业能够将配音功能直接集成到自有产品和工作流程中。

「Dubbing v2」能够精准传达情感和表演的语调,将原始说话者独特的语气、停顿、说话方式、呼吸声及细腻的情感表达,忠实地翻译成非母语语言。目前支持包括日本语和韩国语在内的92种语言。

API版本支持从多语言配音制作、脚本调整,到按片段重新生成的完整工作流程。针对企业用户,还提供了使用自定义脚本(原文文本)和翻译文本生成配音的功能,同时支持仅修正和重新生成特定片段。此外,用户可根据需求选择不同模型,在同一API内切换至注重成本效益和大规模处理的「Dubbing v1」。

该技术适用场景广泛,包括视频创作者和游戏工作室对角色对话及过场动画的本地化处理,旅游及住宿行业制作多语言营销视频,以及电影和电视剧等长篇内容的多地区发行等。