Hy-SimulMT是腾讯混元于2026年10月26日发布并开源的实时同声传译大模型,支持中英双向语音到语音的实时翻译。模型持续接收音频输入并在说话者讲话时同步翻译,输出译文文本和语音,同时支持实时音色克隆以保留说话者声音特征。采用30B总参数、3B激活的MoE架构。在RealSI长音频评估中StreamLAAL约3秒,低于人工同传平均4-5秒,GEMBA翻译质量评分超过对比的开源模型和五个商用API中的四个。在FLEURS、CoVoST2、ACL6060和RealSI-Sentence四个公开短音频基准上表现领先。设计面向会议、演讲、访谈等实时沟通场景,已落地腾讯Hy翻译App,11月APEC会议将作为官方AI翻译应用支持33种语言互译。模型权重和推理服务SimulInfer、训练工具SimulTrain已开源。
📋 技术规格
| 厂商 | 腾讯混元 |
|---|---|
| 模型分类 | 语音与音频 |
| 参数规模 | 30B总参数(MoE),激活3B |
| 上下文窗口 | 未公开 |
| 最大输出 | N/A(同传模型) |
| 知识截止 | 未公开 |
| API定价 | 输入: 免费(Hy翻译App)输出: 免费(Hy翻译App) |
⭐ 核心能力详解
实时双向同传
持续接收音频边听边译,同步输出译文文本和语音,StreamLAAL约3秒
实时音色克隆
保留说话者声音特征和语气,翻译后语音听起来像原说话者
30B-A3B MoE开源
30B总参数3B激活的MoE架构,模型权重和推理/训练工具链全开源
GEMBA质量领先
GEMBA翻译质量评分超过四个商用API和所有对比开源模型
APEC官方应用
11月APEC会议官方AI翻译应用,支持33种语言互译
🎯 典型应用场景
国际会议同声传译:演讲、报告、访谈实时翻译
跨国企业沟通:会议、电话、视频通话实时翻译
直播翻译:直播内容和活动实时双语输出
客服实时翻译:跨语言客服对话
个人跨语言沟通:旅行、商务沟通
💪 技术优势与差异化
- 开源30B-A3B MoE模型,支持自建部署
- 响应延迟约3秒低于人工同传4-5秒
- 实时音色克隆保留说话者特征
- 翻译质量超过大部分商用翻译API
- 免费开放体验(Hy翻译App)
⚠️ 使用局限与注意事项
- 仅支持中英双向,多语言版本尚在开发中
- 语音输出和音色克隆需配置TTS服务
- 同传质量在专业领域(法律/医学)仍需人工辅助
- 开源部署需要一定工程能力
💰 价格分析与成本建议
Hy-SimulMT已在腾讯Hy翻译App首发,免费开放体验。模型权重已开源。11月APEC会议期间,支持33种语言互译的腾讯Hy翻译将作为官方AI翻译应用。API定价未公开,请以官方为准。
👥 适用人群与企业
腾讯混元Hy-SimulMT主要面向:国际会议和活动组织方、跨国企业沟通团队、直播和媒体平台、客服中心、以及需要自建同传服务的技术团队。通过云巴巴AI大模型广场可获取选型咨询服务。
🏭 行业适配度评估
StreamLAAL 3秒适合会议同传,APEC官方应用
⚠ 仅中英双向
实时翻译+音色克隆适合内部沟通
⚠ 多语言需等待
实时翻译适合直播场景
⚠ 需搭TTS服务
跨语言客服对话实时翻译
⚠ 专业领域需人工辅助
APEC官方应用验证可靠性
⚠ 安全审查需求
🔧 技术架构解析
| 架构设计 | 30B总参数MoE,激活3B,支持中英双向语音到语音 |
|---|---|
| 核心技术 | SimulInfer推理服务+SimulTrain训练工具,实时音色克隆 |
| 性能指标 | StreamLAAL约3秒,GEMBA超过四个商用API |
| 部署方式 | 开源权重+Hy翻译App+Hy Translate App |
🔒 安全合规与数据隐私
| 数据训练策略 | 未公开 |
|---|---|
| 合规认证 | 开源、可自建部署 |
| 数据驻留 | 开源可自建,数据可控 |
| 加密方式 | 未公开 |
⚔️ Hy-SimulMT与同类型同传模型对比
| 竞品模型 | 优势 | 不足 |
|---|---|---|
| Qwen3.8-LiveTranslate | FLEURS 88.4分领先 | 非开源,StreamLAAL更高 |
| Gemini3.5-LiveTranslate | FLEURS 92.4分最高 | 闭源,非同传定位 |
| GPT-Realtime-Translate | OpenAI生态集成 | FLEURS仅77.7,延迟高 |
- 开源30B-A3B MoE可自建
- StreamLAAL约3秒低于人工同传
- 实时音色克隆
- 免费体验(Hy翻译App)
🏢 同厂商模型矩阵
腾讯混元语音/翻译模型矩阵
| 模型 | 定位 | 品类 | 特色 |
|---|---|---|---|
| Hy-SimulMT当前 | 同声传译 | audio | 30B-A3B开源,中英双向 |
| Hy ASR 3.0 | 语音识别 | audio | 已收录 |
| Hy Image 3.5 Preview | 图像生成 | image | 2K图像0.15元/张 |
🧭 选型决策指南
30B-A3B开源可自建
FLEURS 92.4分
API集成方便
Hy翻译App免费开放
🏆 真实使用案例
📌 某国际会议使用Hy-SimulMT提供同传服务
📌 某跨国企业部署Hy-SimulMT用于内部会议
💬 用户真实评价
Hy-SimulMT延迟3秒确实低于人工同传,翻译质量在通用场景已达到可用水平,开源后自建部署成本可控。
实时音色克隆很实用,翻译后语音听起来像原说话者,沟通体验自然。但仅中英双向限制了全球部署。
开源模型部署灵活,在直播翻译场景效果好。但需要自己搭TTS服务做语音输出,工程量不小。
✅ 实践建议与使用技巧
💡 Prompt工程建议
会议同传场景设计
利用StreamLAAL 3秒低延迟设计会议实时翻译流程
音色克隆优化体验
配置TTS服务启用实时音色克隆,翻译后语音保留说话者特征
自建部署调优
利用SimulInfer和SimulTrain工具链进行部署和微调
🔄 替代方案分析
Hy-SimulMT仅支持中英双向
开源部署需要工程能力
Hy-SimulMT专注同传翻译








首页 

2026-08-31


5个回答 



