Audiobox

2个月前发布 2,151 0 0

Audiobox是Meta推出的免费AI语音和声音生成模型,能结合语音输入和自然语言文本提示生成语音和音效。模型包含Audiobox Speech(专注语音生成)和Audiobox Sound(专注音效生成)等专业模型,底层基于共享的自监督模型Audiobox SSL。

语言:
zh
收录时间:
2026-08-31
AudioboxAudiobox

Meta推出的免费AI语音和声音生成模型 Audiobox是Meta推出的免费 AI语音 和声音生成模型,能结合语音输入和自然语言文本提示生成语音和音效。模型包含Audiobox Speech(专注语音生成)和Audiobox Sound(专注音效生成)等专业模型,底层基于共享的自监督模型Audiobox SSL。Audiobox具备语音风格转换等独特功能,是首个实现语音与文本双输入自由语音风格转换的模型。Audiobox能降低音频创作门槛,让任何人都能轻松创作出个性化的音频内容,能用在视频、播客、游戏等多种场景。

数据统计

相关导航

StyleTTS 2

StyleTTS 2

一个开源的文本转语音工具,其表现可以媲美Elevenlabs。它具有以下特点: 1. 能够自动生成多种不同的语音风格,无需依赖特定的参考语音。 2. 采用特殊的训练方法,使得生成的语音更加贴近真人的说话方式。 3. 利用扩散模型技术,高效地生成不同风格的语音。 4. 提供对语音的精确控制,包括语速、语调等方面。 5. 在测试中,生成的语音质量接近于真人录音。即使没有特定说话者的样本,也能生成高质量的语音。 StyleTTS 2的工作原理是通过风格扩散和与大型语音语言模型的对抗性训练来实现接近人类水平的TTS合成。这个模型与其前身不同之处在于,它通过扩散模型将风格建模为一个潜在的随机变量,以生成最适合文本的风格,而不需要参考语音。此外,StyleTTS 2采用非自回归架构,它在生成语音时不需要依次预测每个音频样本,而是可以并行生成整个语音序列。这种方法大大提高了语音合成的速度。 StyleTTS 2在多个评估结果方面表现出色: 1. 在多个测试中,StyleTTS 2生成的语音质量非常高,接近或达到了真人录音的水平。这表明了其在模仿人类语音方面的高效能力。 2. 在LJSpeech数据集