腾讯混元开源实时同传模型Hy-SimulMT
先了解这件事
腾讯混元发布并开源实时同声传译模型 Hy-SimulMT-30B-A3B,支持中英双向语音到语音翻译,并可在翻译过程中实时克隆说话人音色。腾讯混元称,在 RealSI 长音频评测中,该模型 StreamLAAL 约 3 秒,为对比系统中最低;GEMBA 分数超过所比开源模型和五个商业 API 中的四个。 仓库提供 FP8、GGUF 及带原文输出等多个版本,并配套 SimulInfer 推理服务和 SimulTrain 训练工具。语音输出与声音克隆需另行配置 TTS 服务。 该模型对 llama.cpp 的支持尚未并入官方仓库,腾讯混元建议等待支持该模型的新版 llama.cpp 发布后再使用;远程麦克风访问需通过 HTTPS。
AI 根据报道生成 · 2 小时前更新
报道时间线
沿着报道,了解事件的不同侧面。
- 腾讯混元模型发布精选腾讯混元发布 Hy-SimulMT 实时同传模型,支持中英双向语音翻译与实时音色克隆
腾讯混元发布 Hy-SimulMT 实时同声传译模型,支持中英双向语音到语音翻译,并可在翻译时实时克隆说话人音色。在 RealSI 长音频评测中,其 StreamLAAL 约为 3 秒,为对比系统中最低,GEMBA 分数超过所比开源模型和五个商业 API 中的四个。
- 腾讯混元模型发布精选腾讯混元发布 Hy-SimulMT 实时同传模型并开源
腾讯混元发布 Hy-SimulMT 实时同声传译模型,支持中英双向语音到语音翻译和实时声音克隆,并开源多个版本权重。在 RealSI 长音频评测中其 StreamLAAL 约为 3 秒,为对比系统中最低,GEMBA 分数超过所比开源模型和五个商业 API 中的四个。仓库同时提供 SimulInfer 推理服务和 SimulTrain 训练工具,语音输出与声音克隆需配置 TTS 服务。
- 腾讯混元模型发布精选腾讯混元发布 Hy-SimulMT-30B-A3B 实时同传模型
腾讯混元发布 Hy-SimulMT-30B-A3B 实时同声传译模型,支持中英双向语音到语音翻译并可在说话过程中持续输出译文文本与语音。在 RealSI 长音频评测中其 StreamLAAL 约 3 秒,为对比系统中最低,GEMBA 分数超过所比开源模型和五个商业 API 中的四个。
- 腾讯混元模型发布精选腾讯混元发布 Hy-SimulMT-30B-A3B 实时同传模型
腾讯混元发布 Hy-SimulMT-30B-A3B 实时同声传译模型,支持中英双向语音到语音翻译并带实时声音克隆。在 RealSI 长音频评测中其 StreamLAAL 约 3 秒,为对比系统中最低,GEMBA 分数超过所比开源模型和五个商业 API 中的四个。模型提供 FP8、GGUF 及带原文输出等多个版本,并配套 SimulInfer 推理服务与 SimulTrain 训练工具。
- 腾讯混元模型发布精选腾讯混元开源 Hy-SimulMT-30B-A3B 实时同传模型
腾讯混元发布并开源 Hy-SimulMT-30B-A3B,支持中英双向语音到语音实时同声传译,并具备实时声音克隆能力。在 RealSI 长音频评测中其 StreamLAAL 约为 3 秒,为对比系统中最低,GEMBA 分数超过所比开源模型和五个商业 API 中的四个。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。