2025-05-06 16:15:48 | 来源: 智享导航
12月4日报道丨当地时间12月2日,Meta对外发布了新一代Seamless翻译大模型的新版本—— SeamlessM4T v2,这是一项新的多任务语音转换技术。SeamlessM4T v2 能够同时将语音转换成多种语言,并且能够保持语音的流畅度和自然度。

SeamlessM4T v2 在多种语言转换任务上都取得了优异的效果。例如,在英语到法语的转换任务上,SeamlessM4T v2 的准确率达到了 98%。在英语到中文的转换任务上,SeamlessM4T v2 的准确率达到了 97%。

Meta透露,SeamlessM4T第二代的改进包括跨语言更加精准地保留表达的原意,并将延迟降低到约两秒。
在世界各地,语言差异可能成为沟通的障碍,翻译系统可以使来自不同语言背景的人更无缝地分享知识和经验。然而,如今许多这些系统并不能保留人类沟通所具有的关键要素。此外,语调、停顿和强调都传递着帮助人们沟通情感和意图的重要信号。
AI大模型模仿的是人类口译员的工作模式,人类的语音和翻译对于诸如轮流发言和时间控制等微妙之处也非常敏感。例如,想象一下人类口译员的工作方式:他们在低延迟和准确翻译之间找到了恰到好处的平衡。等待时间过长会阻碍沟通的流畅进行,而速度过快则会影响翻译的整体质量。能够实现真实对话的翻译系统应该在所有这些沟通要素上都能够交付。

SeamlessM4T v2 支持以下任务:
语音到语音翻译(S2ST)语音到文本翻译(S2TT)文本到语音翻译(T2ST)文本到文本翻译(T2TT)自动语音识别(ASR)
Meta进行了大量的人工智能研究,旨在表达丰富、快速和高质量的人工智能翻译来消除语言障碍。Seamless Streaming模型可以实现最快2秒的延迟内进行语音和文本的翻译。任何人都可以通过SeamlessM4T v2 实现语音和文本的相互转换与翻译,实现更轻松的跨语言交流。

Meta已经在官网发布了一系列的开源模型,以促进开放研究和合作。如果你感兴趣使用这款翻译大模型的话,它是免费体验的,点击下方的卡片即可:
体验地址:
https://seamless.metademolab.com/expressive
热门榜单
360AI搜索
常用AIsharegpt
常用AIGPTs:GPT Builder创建器
常用AIHi Echo — 网易有道
常用AI美图Moki
常用AIPicTech AI
常用AIPhotosonic
常用AIDreamUp
常用AIScribble Diffusion
常用AI热门资讯
讯飞星火大模型V3.5春季上新,长文本长图长语音,生产力实测:你的超级知识助手来了!
12-26有哪些好用的AI工具_AI工具测评使用_
12-31荣耀CEO赵明:荣耀领先三年,很高兴看到苹果追随我们的AI手机发展路线
02-24马斯克突然发布新版Grok-2大模型,牺牲特斯拉资源叫板OpenAI,一手实测来了
12-25夸克AI搜索_夸克最新动态_夸克官方网站
12-26SD3超详细使用教程+效果测评丨附热门模型下载地址
12-26快手AI文生视频大模型【可灵】首发实测:这可能将成为真正意义的第一款「中国版Sora」
12-26体验完腾讯的AI助理应用「腾讯元宝」,完整的公众号内容生态将是它的最强杀手锏
12-26Stable Diffusion 3最新模型测评丨SD3模型ComfyUI流程简单搭建
12-26商汤科技发布「日日新大模型」5.0:直接对标GPT-4 Turbo,全能分析轻松掌握周冠宇F1赛事数据
12-26