IT之家 AI수정일

대형 모델에 “한 쌍의 귀”를 장착하기: 샤오미 오픈소스 공간 음향 이해 대형 모델 MiDashengLM-Spatial

IT之家 10월 16일 소식에 따르면, 샤오미는 어제 Dasheng 시리즈의 중요한 새로운 모델인 MiDashengLM-Spatial을 공개했으며, 완전한 공개 모델 가중치와 추론 코드를 제공하고 Apache 2.0 라이선스로 배포했다고 발표했습니다. 지난 2년 동안 샤오미는 소리 기반 모델 Xiaomi Dasheng과 소리 이해 대형 모델 MiDashengLM-7B을 연달아 오픈소스로…

이미지 출처 · IT之家 AI
IT之家 사용자 순조로운 방향으로、Autumn_Dream의 단서를 전달해 주셔서 감사합니다!

IT之家 10월 16일 소식에 따르면, 샤오미는 어제 Dasheng 시리즈의 중요한 새로운 제품인 MiDashengLM-Spatial을 공개했습니다. 이 제품에는 완전한 공개 모델의 가중치와 추론 코드가 포함되어 있으며, Apache 2.0 라이선스로 배포됩니다.

지난 2년 동안 샤오미는 Xiaomi Dasheng와 MiDashengLM-7B라는 음성 기반 모델과 대규모 음성 이해 모델을 연이어 출시하고 오픈소스화했습니다. 해당 기술은 샤오미 스마트 홈 및 자동차 내부 환경 등 다양한 분야에서 30개 이상의 실제 적용이 이루어졌으며, 음성, 환경 소리, 음악을 통합적으로 인식하고 이해할 수 있습니다.

보도에 따르면, 새로운 모델은 MiDashengLM-7B을 기반으로 하며, 음성 이해 대형 모델에 “한 쌍의 귀”를 추가하여 음성의 내용을 이해할 뿐만 아니라 음성이 어디에서 오는지, 공간에서 어떻게 분포하는지를 인식할 수 있게 합니다.

샤오미는 MiDashengLM-Spatial이 업계 최초의 오픈소스 종단간 공간 음향 이해 대형 모델이라고 밝혔습니다. 기본 음향 이해 능력을 유지하면서도 공간 인식 및 추론 능력을 갖추고 있어, 음향 대형 모델이 “음성을 듣는 것”에서 “음성이 위치한 공간을 이해하는 것”으로 나아가는 데 기여합니다.

이 모델은 샤오미 스마트 홈, 자동차 콘솔 등의 환경에 점진적으로 적용될 예정이며, 공간 청각 능력을 향상시켜 ‘인간과 차량, 가정의 전체 생태계’ 간의 상호작용 경험을 더욱 풍부하게 할 것입니다. 관련 테스트 데이터는 다음과 같습니다:

IT之家 관련 링크:

광고 명시: 본 문서에는 외부 링크가 포함되어 있으며, 이는 하이퍼링크, QR 코드, 비밀번호 등 다양한 형태를 포함합니다. 이러한 링크는 더 많은 정보를 전달하고 선정 시간을 절약하기 위한 목적으로 사용되며, 결과는 참고용일 뿐입니다. IT之家에서 외부 링크가 포함된 글은 모두 이 명시를 포함합니다.

원문 출처

IT之家 AI

내용 안내

원문 발행 및 권리는 출처에 있습니다.

기계 번역 · 원문을 참고하세요