火山引擎多媒体实验室推出全新语音内容编辑模型,让用户用自然语言指令表达”要改什么”,把”怎么自然地改进原声音”交给模型。例如 Descript 将音视频编辑做成类似文档编辑的体验,可通过编辑脚本来修正语音错误,并用 Regenerate 生成能融入上下文的新说话人音频。Meta 的 Voicebox 研究也将语音生成能力拓展到内容编辑、风格迁移、降噪和多样化采样等任务,并强调模型可以替换说错的词,而不必重新录制整段语音。
火山引擎多媒体实验室推出全新语音内容编辑模型,让用户用自然语言指令表达”要改什么”,把”怎么自然地改进原声音”交给模型。例如 Descript 将音视频编辑做成类似文档编辑的体验,可通过编辑脚本来修正语音错误,并用 Regenerate 生成能融入上下文的新说话人音频。Meta 的 Voicebox 研究也将语音生成能力拓展到内容编辑、风格迁移、降噪和多样化采样等任务,并强调模型可以替换说错的词,而不必重新录制整段语音。