AIbase출처 게시일

텍센트 훈위안, 동시통역 대규모 모델 Hy-SimulMT 오픈소스 공개: 지연 시간이 인간 통역사보다 낮고, 품질은 전문 통역 수준

10월 26일, 텍센트 훈위안의 동시통역 대규모 모델 Hy-SimulMT가 공개 및 오픈소스화되었으며, 중국어·영어 음성 간 실시간 음성 번역을 지원한다: 화자의 오디오를 모델에 실시간으로 입력할 수 있고, 들으면서 번역하여 번역문과 음성을 동시에 출력하며, 실시간 음색 복제를 지원해 화자의 목소리와 억양을 재현한다. 모델은 텍센트 Hy 번역 App에서 무료 체험으로 최초 공개되었으며, 오픈소스 저장소는 HuggingFace, ModelScope와 GitHub에 동시에 공개되었다.

10월 26일, 텍센트 훈위안의 동시통역 대규모 모델 Hy-SimulMT가 공개 및 오픈소스화되었으며, 중국어·영어 음성 간 실시간 음성 번역을 지원한다: 화자의 오디오를 모델에 실시간으로 입력할 수 있고, 들으면서 번역하여 번역문과 음성을 동시에 출력하며, 실시간 음색 복제를 지원해 화자의 목소리와 억양을 재현한다. 모델은 텍센트 Hy 번역 App에서 무료 체험으로 최초 공개되었으며, 오픈소스 저장소는 HuggingFace, ModelScope와 GitHub에 동시에 공개되었다.

낮은 지연 시간은 이 모델의 핵심 지표로, 실측 응답 약 3초로 인간 전문 통역사 평균 4-5초보다 낮다. 자격을 갖춘 동시통역 전문가 6명(CATTI 1급 3명, CATTI 2급 3명)과 소프트웨어 AI, 의학, 제조·에너지, 비즈니스 관리 등 10개 분야 오디오에 대해 비교한 결과, Hy-SimulMT의 StreamLAAL 지연은 3.3초로 CATTI 1급 전문가의 4.5초와 2급 전문가의 4.7초보다 우수했으며, 번역 품질은 인간 동시통역 전문가 수준에 도달했다.

장기 오디오 평가 세트 RealSI에서 StreamLAAL은 지연 시간을, GEMBA는 번역 품질(GPT6.1-Sol이 채점)을 측정하며, Hy-SimulMT는 약 3.1초의 지연으로 약 86점을 기록해 지연이 가장 낮고 품질은 오픈소스 모델 중 최고로, 대다수 상용 동시통역 API를 능가했다. 단기 오디오 4개 테스트에서는 RealSI-Sentence 점수 84.7로 전체 최고를 기록했고, FLEURS90.3, ACL606081.2는 오픈소스 모델 중 1위였으며, Gemini3.5-LiveTranslate는 FLEURS92.4, ACL606082.6으로 각각 단일 항목 1위를 차지했다.

모델은 "먼저 말하고 나중에 수정"하는 전략으로 지연 시간을 제어하며, 수정 시의 청감은 통역사의 자기 수정에 가깝다. 광둥외국어대학교 고급통번역학원 부원장 왕웨이웨이와 중국번역협회 전 상무부회장 중웨이허 교수는 음성 인식 안정성, 동시통역 응답 속도, 통역 발화 품질 모두에서 뛰어난 성과를 보이며 기계 동시통역이 실제 현장에 들어가는 데 기여한다고 평가했다.

원문 출처

AIbase

내용 안내

원문 발행 및 권리는 출처에 있습니다.

기계 번역 · 원문을 참고하세요