Audiobox,这款Meta在2023年11月30日隆重推出的免费开源AI语音和声音生成模型,于12月11日正式上线在线网页版本,为用户免费开放体验。作为Voicebox的升级版本,Audiobox展现了其在音频生成领域的卓越能力,不仅结合了语音输入与自然语言文本提示,更能够生成高度逼真的自定义音频,满足各种应用场景的需求。

Audiobox是Voicebox的继任者,进一步推动了音频生成技术的进步。相较于前代模型,Audiobox在可控性方面有了显著的提升。用户现在可以利用文本描述提示来精确指定所需的语音和音效风格,这是Voicebox所不具备的功能。此外,Audiobox还首次实现了语音输入与文本提示的同步使用,为用户提供了前所未有的语音重塑自由。

这款模型的独特魅力在于其强大的自然语言处理能力。用户只需通过简单的文本提示,即可描述他们希望生成的声音或语音类型。例如,若用户想要打造一片独特的音景,他们只需为模型提供一段描述性的文本,如“潺潺流水与鸟鸣交织”,Audiobox便能根据这些提示生成出符合要求的音频。

Meta Audiobox


  • 克隆用户声音:录制声音按照用户的声音风格或以任意音频样本的风格生成语音

  • 文本描述生成人声:使用文本描述声音风格的特征以及声学环境生成人声

  • 更改声音风格:可结合声音和文本描述更改现有的声音风格

  • 本文描述生成音效:根据输入的声音特征文本描述生成声音效果

  • 噪音消除:提供Magic Eraser功能消除录音中的瞬态噪声

  • 声音填充:根据文本描述用新的声音替换音频中的一部分

  • 音频故事制作器:结合以上功能,利用Audiobox Maker制作原创有趣的音频故事

使

Audiobox 的所有功能都可以从该公司的官方网站试用(国内没有梯子点进去会显示未在你所在的地区使用)。可以生成音频样本、检查预览并将其下载到你的设备。

  • 转到 Web 上的 Audiobox 并移至“功能”选项卡。

  • 选择“创建音频”菜单下方的相关选项。让我们使用重新设计的声音。

  • 录制你的声音或从下拉菜单中选择示例声音。

  • 添加你希望 AI 模型说话的一小段内容。描述叙述文本的声音风格。例如,您可以写一个短段落,并要求 Audiobox 以中年人友好的语气创建音频样本。

  • 选择生成并让 AI 模型创建几个音频结果。选择播放按钮检查重新设计的语音结果并将其保存在您的计算机上。

@版权声明:部分内容从网络收集整理,如有侵权,请联系删除!

类似网站