ITBear旗下自媒体矩阵:

海螺语音挑战ElevenLabs,多语言合成能力究竟如何?

   时间:2025-01-22 15:24:31 来源:ITBEAR编辑:快讯团队 发表评论无障碍通道

在职场沟通中,一个意外的挑战让一位员工不得不面对香港客户的质疑——因项目延期,他急需在线上以完美的解释挽回信任。而这段解释中的粤语与英语自如切换的语音,却并非出自人类之口,而是由海螺语音这一AI技术所生成。这一技术的出现,不仅令人惊叹,更预示着AI语音领域的一次重大突破。

海螺语音的背后,是MiniMax公司强大的技术支持。今年1月,MiniMax在推出基础语言大模型和视觉多模态大模型后,再次升级了其语音大模型T2A-01系列。这一系列的推出,标志着海螺AI语音板块的正式开启。相较于旧版本,T2A-01系列在语音生成能力上有了显著提升,不仅音质清晰、韵律自然,还能精准表达情绪,且支持包括中文、粤语、英语在内的17种语言及上百种预置音色。

从海螺语音生成的音频中,可以清晰感受到其处理不同语种的能力,以及接近人声的自然度。无需抽卡,就能达到如此稳定的水平,这无疑是对当前AI语音技术的一次革新。为了更直观地展示海螺语音的实力,我们不妨将其与其他语音生成产品进行对比。

以难度极高的绕口令“施氏食狮史”为例,ChatTTS生成的内容粘连感强,几乎听不出在读什么;而ElevenLabs虽然字与字之间能够区分开,但存在“呱呱叫”的模型幻觉问题。相比之下,海螺语音的表现则更为出色。整段声音自然流畅,虽然部分词语存在断句问题,但在大部分短句中已有显著惊艳的表现,对音调、分词错落、节奏和断句的处理都反映出其背后的理解能力。

海螺语音的多语言合成能力,足以与ElevenLabs等领先产品相媲美。MiniMax团队采用与Seed-TTS论文相同的评测集和评测工具进行计算,结果显示,海螺语音在中文的字错率和相似度上表现最佳,英文的字错率、相似度也接近真实录音。海螺语音还建立了多语种评测集,对17个语种进行客观评测,结果显示其在多个语种上的相似度、正确率均大幅领先。

海螺语音不仅在多语言合成上表现出色,其精准的情绪控制和音色选择更是令人称奇。为了让声音更加鲜活、情感表达更加精准,MiniMax对长达超千万小时的高质量音频数据进行加工训练,实现了高音质、情感丰富的声音效果。用户既可以让系统自动检测情绪,也可以明确指定情绪,从而生成能够精准捕捉人类深层情感的语音输出。海螺语音还预置了300+音色供用户选择,风格多变,满足有声书、ASMR耳语、新闻播报等多种场景需求。

海螺语音还实现了分段控制不同情绪的功能。例如,在表达老人害怕的情绪时,可以进一步从声音中感受到从害怕到难过再到开心的完整情绪变化。这种对输入文字的精准理解和对输出声音的精细控制,使得海螺语音在商业化场景和日常对话表达中都能游刃有余。

海螺语音的成功,离不开MiniMax公司对多模态模型能力的长期投入和持续发力。虽然音频在多模态模型能力开发顺序上似乎难以排在文字、图片、视频之前,但MiniMax却凭借其在语音大模型上的深厚积累和技术突破,成功推出了海螺语音这一领先产品。从文本、视频到语音能力的全面更新,MiniMax和海螺AI正不断给人带来惊喜,推动着AI技术的不断前进。

举报 0 收藏 0 打赏 0评论 0
 
 
更多>同类资讯
全站最新
热门内容
网站首页  |  关于我们  |  联系方式  |  版权声明  |  RSS订阅  |  开放转载  |  滚动资讯  |  争议稿件处理  |  English Version