简介
Meta打造的一体化多语言多模式的翻译大模型SeamlessM4T
Meta打造的一体化多语言多模式的翻译大模型SeamlessM4T,入选2023年度《时代》杂志最佳AI生产力工具榜单。
这款工具支持将近100种语言的实时同传翻译,支持语音⇋语音、文字⇋文字、语音⇋文字、文字⇋语音。
SeamlessM4T建立在Meta AI翻译模型的技术能力基础上,并重新设计Fairseq序列建模工具包,以创建更轻量级的模型和处理更多信息。
Meta表示,SeamlessM4T从“爬取的网页数据的公开可用存储库中”收集了400万小时的“原始音频”,该模型可以在近100种语言之间进行文本到语音的翻译,并支持35种语言的完全语音到语音翻译。
对于安全性和脱敏性,Meta表示,在开发SeamlessM4T时,团队构建了一个可以识别敏感词系统,目标是能够过滤了训练数据中不平衡的数据信息,从而检测和输出正确的翻译内容。而且,Meta研究人员还尝试清理误译一些脏话的数据集,以便更准确地检测何时使用。
此外,Meta还声称新的翻译模型比竞品更高效、更准确,甚至可以轻松搞定“中夹英”的复杂句子翻译任务。
与Meta开源模型LLama 2类似,这款模型也是开源的,因此它完全免费。Meta还公布了新的开源翻译数据集 SeamlessAlign,将44.3万小时的语音与文本、2.9万小时的语音转录数据进行对齐。目前,
MetaAI 的 SeamlessM4T 模型现已在 Hugging Face 上提供!
GitHub开源页面:
https://github.com/facebookresearch/seamless_communication
热门推荐
商汤如影
对话聊天叮当好记 — ReadLecture
对话聊天秒创
对话聊天Reecho睿声
对话聊天火山引擎 — 语音合成TTS
对话聊天Uberduck
对话聊天剧分钱 — AI解说大师
对话聊天魔音工坊
对话聊天百度智能云 — 语音合成(TTS)
对话聊天AI教程资讯
淘宝AI应用_淘宝问问AI导购助手_官方内测教程方法
01-03金山WPS AI新功能新玩法首发测评:不含水分,中文版「GPT+Office」真的来了!
01-07一句话让小姐姐为我换了N套衣服,谷歌卷出视频生成新高度丨Lumiere AI使用体验分享
12-30首批85个ChatGPT Plus插件全面测评:能打“五星”的插件只有6个
01-07GPTs教程_怎么自己做GPTs_GPTs部署安装
01-15国内首次2024全科高考AI测评开分:阿里通义、GPT-4o等七款大模型参与,文科进一本理科进二本
12-25实测阿里通义千问视觉大模型Qwen-VL Max「超大杯」:会读图、写代码,秒懂网络梗图,中文顶流性能视觉大模型
12-30Midjourney V6生图超进化!国外大神深度测评:对比V5.2版本,画质逼真骇人,人像细节不再有「AI感」
12-30谷歌Gemini引发争议!网友质疑宣传片疑似剪辑效果 夸大宣传丨实测对标GPT-4测评基准有失偏颇
12-30飞书AI协同办公产品“飞书智能伙伴”实测:AI员工搬砖效率震惊全公司
12-30