录音棚配音耗时且成本高昂——AI实现了51种语言的配音

概述

“慷慨之道”通过一门课程传授慷慨之道。该课程由志愿者免费运营，以小班形式在世界各地开展。每个小组都需要本语言版本的视频。该课程共有约70段视频，因此增加一种语言就意味着需要制作70段新视频。

挑战

以非营利组织的预算触达全球。

图书馆不断扩充

该课程共有70段视频。如果支持5种语言，就意味着有350段视频；如果支持50种语言，就意味着有3,500段视频。该团队希望将支持的语言数量扩展到150种以上。

录音棚的工作限制了语言的数量

配音演员和录音棚的使用费是预算中最大的开支。这笔开支决定了团队每年能增加多少种语言。

难度较高的源材料

实地拍摄的纪录片中包含多位发言者，涉及各种英语口音，并收录了用当地语言录制的片段。

一门不断变化的课程

原始课程正在不断修订中，因此每次更新都会同步到所有语言版本。

解决方案

语音设置取代投屏

强度、相似度和表达方式均根据项目进行设置，而声音克隆技术则将说话者的个性融入每种语言之中。

广泛的语言覆盖范围

肯尼亚和坦桑尼亚的斯瓦希里语、阿姆哈拉语、哈萨克语、坎纳达语、泰米尔语、泰卢固语、格鲁吉亚语、他加禄语、缅甸语和尼泊尔语均已上线。

对难学语言的支持

罕见的语言组合和现场音频会产生一些特殊情况，Rask 团队会与视频负责人共同解决这些问题。

遵循该周期的计划

该团队围绕每次内容发布，在较短的时间内完成制作。他们会在制作开始时制定计划，并将未用完的时间留到下次使用。

母语者认可了该剧本

翻译稿由约30名志愿者和合作伙伴审校人员起草并校对，随后经批准的SRT文件将输入Rask AI系统进行配音。

影响

51种语言正在开发中

其中包括西班牙语、法语、印尼语、斯瓦希里语、孟加拉语、罗马尼亚语、日语、泰米尔语、越南语、哈萨克语和阿姆哈拉语，涉及9,700多个项目。

预算从工作室转移到了……

原本用于支付配音演员和录音棚费用的资金，现在可以用于支持更多语言和更多国家。

一门能够持续改进的课程

配音作为管道中的一个步骤进行，因此对主版本的修订会同步到所有语言版本。

下一步是寻找合作伙伴

目前仍有55个国家在名单上，接下来的工作重点是分发和与当地合作伙伴的合作。