近日，微软进一步扩展了 Phi-4家族，推出了两款新模型:Phi-4多模态（Phi-4-multimodal）和 Phi-4迷你(Phi-4-mini)，这两款模型的亮相，无疑将为各类 AI 应用提供更加强大的处理能力。Phi-4多模态模型是微软首款集成语音、视觉和文本处理的统一架构模型，拥有5600万参数。这款模型在多项基准测试中表现优异，超越了目前市场上的许多竞争对手，例如谷歌的 Gemini2.0系列。在自动语音识别（ASR）和语音翻译(ST)任务中，Phi-4多模态模型表现尤为突出，成功击败了如 WhisperV3和 SeamlessM4T-v2-Large 等专业语音
["1. Meta推出了能支持近100种语言语音转文本、语音转语音、文本转文本、文本转语音的AI翻译模型SeamlessM4T。","2. SeamlessM4T的语音识别能力已达到人类水准,大大提高了处理背景音和变化语音的能力。","3. Meta不仅免费开源了SeamlessM4T模型,还公开了关键训练数据集SeamlessAlign。"]
["1. Meta开源全新翻译模型SeamlessM4T,支持100种语言语音翻译。","2. SeamlessM4T集成了NLLB、MMS等多个翻译模型优点。","3. SeamlessM4T使用270,000小时对齐语音文本数据进行训练。"]
{"1":"Meta 开源全球最大多模式翻译大模型，支持 100 种语言，能识别地方语言。","2":"SeamlessM4T 是首个一体化 AI 翻译大模型，支持语音到文本、语音到语音、文本到语音和文本到文本的多模式翻译任务。","3":"SeamlessM4T 集成了 Meta 之前发布的 NLLB、MMS 等翻译模型，并使用了 270,000 小时的语音和文本对齐数据。"}
一款基于多模态模型的语音翻译产品，支持近100种语言的自动语音识别、语音翻译、文本翻译、语音合成等功能。
ai4bharat
基于SeamlessM4T-v2微调的印度语言语音转文字翻译模型，支持13种印度语言，性能超越基础模型及竞争系统。
WueNLP
从SeamlessM4Tv2-Large中提取的语音编码器模块，擅长跨语言和多语言的序列级音频分类任务
audo
SeamlessM4T是一个大规模多语言多模态机器翻译模型，支持近100种语言的语音和文本翻译。
facebook
SeamlessM4T v2 是 Facebook 发布的大规模多语言多模态机器翻译模型，支持近100种语言的语音和文本翻译。
SeamlessM4T 是一个支持多语言语音和文本翻译的统一模型，能够实现语音到语音、语音到文本、文本到语音和文本到文本的翻译任务。
SeamlessM4T 是一个多语言翻译模型，支持语音和文本的输入输出，实现跨语言交流。
%20--%3e%3cdefs%3e%3cstyle%3e%20.st0%20{%20fill:%20%23061b40;%20}%20.st1%20{%20fill:%20%23306af1;%20}%20.st2%20{%20fill:%20%235ce5cf;%20}%20%3c/style%3e%3c/defs%3e%3cg%3e%3cpath%20class='st0'%20d='M55,10.5h9v3h-9v9h12V7.5h-12v3ZM64,19.5h-6v-3h6v3Z'/%3e%3cpolygon%20class='st0'%20points='69%2016.5%2078%2016.5%2078%2019.5%2069%2019.5%2069%2022.5%2081%2022.5%2081%2013.5%2072%2013.5%2072%2010.5%2081%2010.5%2081%207.5%2069%207.5%2069%2016.5'/%3e%3cpolygon%20class='st0'%20points='95%2010.5%2095%207.5%2083%207.5%2083%2022.5%2095%2022.5%2095%2019.5%2086%2019.5%2086%2016.5%2095%2016.5%2095%2013.5%2086%2013.5%2086%2010.5%2095%2010.5'/%3e%3cpath%20class='st0'%20d='M40,1.5v21h11.6l1.4-1.4v-7.6h0c0,0-1.4-1.5-1.4-1.5l1.4-1.4V2.9l-1.4-1.4h-11.6ZM50,19.5h-7v-6h7v6ZM50,10.5h-7v-6h7v6Z'/%3e%3c/g%3e%3cpath%20class='st1'%20d='M23.1,24L14.7,4.8l-4.9,11.2h3.8l-1.8,4H3.3L12.1,0H2C.9,0,0,.9,0,2v20c0,1.1.9,2,2,2h21.1Z'/%3e%3cpath%20class='st2'%20d='M34,0h-16.8l10.6,24h6.2c1.1,0,2-.9,2-2V2C36,.9,35.1,0,34,0ZM32.5,20h-4V4h4v16Z'/%3e%3c/svg%3e)
