天天看点

AI语音克隆公司ElevenLabs发布了吊炸天的产品,配音员要失业了

作者:我为科技狂tech
AI语音克隆公司ElevenLabs发布了吊炸天的产品,配音员要失业了

媒体日前报道,美国人工智能AI语音克隆初创公司ElevenLabs在B轮融资中筹集了8000万美元,使得该公司的估值目前达到11亿美元——成为了一家价值10亿美元以上的独角兽初创企业。而ElevenLabs的技术,如今已被财富500强公司中41%的员工使用。

ElevenLabs所专注打造的产品,是允许用户将文本转换为语音,并即时以任何语言生成自然的AI语音。此外,该公司还开发了一个AI工具,用户只需几分钟的音频就可以创建自己的AI语音克隆。除了融资公告之外,ElevenLabs还宣布了几个即将推出的新产品,包括配音工作室、语音库市场,以及预览版的移动应用阅读器——该阅读器可以将文本和URL实时转换为音频,而且具有改进速度和语言覆盖范围的新模型。

AI语音克隆公司ElevenLabs发布了吊炸天的产品,配音员要失业了

ElevenLabs的核心优先事项之一是安全和负责任地开发AI技术,他们将重点关注使用检测技术,以确保所有由AI生成的内容都能够被清晰地识别出来。为此,他们去年推出了一个AI语音分类器,用于验证音频样本中是否包含ElevenLabs生成的内容。

在此,可以通过下面一个产品应用示例,试着了解 ElevenLabs在AI语音合成领域的技术实力。

ElevenLabs现在推出了一个全自动化的AI配音或视频翻译工具(配音工作室)AI Dubbing & Video Translator。用户只需要上传视频或者粘贴视频链接,这个工具就能全自动地在几十秒到几分钟内将视频翻译成29种语言。更厉害的是,能够直接克隆原视频里面的声音,来给视频配音。就算是视频里面有多个人说话,也能全部克隆翻译。

AI语音克隆公司ElevenLabs发布了吊炸天的产品,配音员要失业了

有互联网用户已经体验了ElevenLabs的产品。该互联网用户表示,目前为止,ElevenLabs是自己用过的多语言语音合成 AI 中性价最好的!需要每月22美元的Creator订阅才能使用Dubbing服务,包含2小时(10万字),超过了2小时则是按每1000字0.3美元收费。不过,从当前的算力成本来看,AI语音合成的可用性要远大于AI视频合成,这是人类沟通的核心之一。

以下是视频是英伟达CEO黄仁勋在去年2月“ChatGPT 的iPhone时刻”的演讲节选,ElevenLabs在十几秒钟就完成了中文配音,并且克隆了黄仁勋的原声和演讲语气。

视频加载中...

下面这个视频就是由ElevenLabs翻译的中文官方视频:

视频加载中...

这个视频的英文原版:

视频加载中...

AI Dubbing & Video Translator的主要功能如下:

1、视频翻译和配音:将视频的声音从一种语言翻译成另一种语言,并且能保持原始发言者的声音特质不变。

2、广泛应用:可以用于多种场合,比如让不同语言的观众看懂外语视频,或者让公司的宣传和培训视频能被不同国家的员工理解。

3、简单操作:只需上传视频,选择想要的语言,剩下的翻译和配音工作都由AI自动完成。

4、支持多种视频平台:直接复制粘贴YouTube、TikTok、Twitter等平台上的视频链接即可进行配音。

5、保持原声风格:在翻译时,AI会尽量保持视频中人物的原声调和风格。

6、适用于多发言者视频: 能够处理多个人物的对话,确保每个人的声音都能被正确识别和翻译。

7、全自动化流程:从上传视频到翻译、配音,整个过程都是自动的,无需人工干预。

8、多语言支持:支持将视频翻译成29种不同的语言,覆盖全球多数主要语种。

9、多种文件格式支持:不仅支持视频文件,还能处理音频文件,如MP3、MP4等。

(我为科技狂整理发布)

继续阅读