github.devotd.
새 소식멀티모달

qwenlm/qwen3-omni — 다중 입력과 음성 생성을 지원하는 모델

Alibaba Cloud의 Qwen 팀이 개발한 옴니모달 모델 프로젝트로, 텍스트·오디오·이미지·비디오를 처리하고 음성과 텍스트로 응답한다.

저장소 정보qwenlm/qwen3-omni ↗

Qwen3-omni is a natively end-to-end, omni-modal LLM developed by the Qwen team at Alibaba Cloud, capable of understanding text, audio, images, and video, as well as generating speech in real time.

스타
★ 4.1K
포크
309
언어
Jupyter Notebook
라이선스
Apache-2.0
원문 보기 ↗GitHub에서 보기 ↗

qwenlm/qwen3-omni는 Alibaba Cloud의 Qwen 팀이 개발한 옴니모달 파운데이션 모델 프로젝트다. 저장소 설명에 따르면 텍스트·오디오·이미지·비디오를 이해하고 실시간 음성을 생성한다. 이번 내용은 새 버전 공개가 아니라 프로젝트 소개다. FACTS에는 최신 릴리스가 기록되어 있지 않아 버전 변경 사항은 확인되지 않는다.

이 프로젝트는 여러 입력 형식을 한 모델에서 다루고 음성까지 생성하는 종단간 모델을 제시한다. 종단간은 입력 해석과 응답 생성을 하나의 모델 체계에서 처리한다는 뜻이다. README 요약은 다국어 입력의 네이티브 처리와 텍스트 및 자연스러운 음성의 스트리밍 응답을 설명한다. 또한 오디오·비디오 상호작용, 시스템 프롬프트 제어, 멀티모달 활용 사례를 소개한다. 저장소의 라이선스는 Apache-2.0이며, 언어 표기는 Jupyter Notebook이다. FACTS에 기록된 스타 수는 4062다.

다만 소개된 기능과 실제 성능은 구분해야 한다. FACTS에는 응답 지연이나 인식 정확도를 보여주는 벤치마크 수치가 없고, 최신 릴리스도 기재되어 있지 않다. 따라서 실시간 음성 생성과 낮은 지연시간 상호작용은 프로젝트가 내세우는 기능 설명으로 읽어야 하며, 기록만으로 성능 수준이나 배포 준비도를 판단할 수는 없다.