S

S2t Small Mustc En Fr St

由 facebook 开发
基于S2T架构的端到端英语到法语语音翻译模型,在MuST-C数据集上训练
下载量 2,326
发布时间 : 3/2/2022

模型简介

这是一个基于Transformer的序列到序列模型,专为英语语音到法语文本的翻译任务设计。模型使用卷积下采样器处理语音输入,并通过自回归方式生成翻译结果。

模型特点

端到端语音翻译
直接从语音输入生成文本翻译,无需中间转录步骤
卷积下采样
使用卷积层在编码前将语音输入长度减少3/4,提高处理效率
多语言支持
专门针对英语到法语的翻译任务优化
SpecAugment增强
训练时使用SpecAugment数据增强技术提高模型鲁棒性

模型能力

英语语音识别
英语到法语文本翻译
端到端语音处理

使用案例

语音翻译
TED演讲实时翻译
将英语TED演讲实时翻译为法语文本
在MuST-C测试集上达到32.9 BLEU分数
会议记录翻译
将英语会议录音自动翻译为法语会议记录
AIbase
智启未来,您的人工智能解决方案智库
© 2025AIbase