github.devotd.
새 소식멀티모달

myshell-ai/openvoice — 참조 음성 복제 기반 음성 생성 도구

myshell-ai/openvoice는 참조 음성의 음색을 복제해 여러 언어와 스타일로 음성을 합성하는 Python 기반 음성 복제 프로젝트다.

저장소 정보myshell-ai/openvoice ↗

myshell-ai/openvoice는 참조 음성의 음색을 복제해 여러 언어와 스타일로 음성을 합성하는 Python 기반 음성 복제 프로젝트다.

GitHub 설명: Instant voice cloning by MIT and MyShell. Audio foundation model.

스타
★ 38K
포크
4.3K
언어
Python
라이선스
MIT
원문 보기 ↗GitHub에서 보기 ↗

myshell-ai/openvoice는 참조 음성의 음색을 복제해 그 목소리로 합성 발화를 만드는 음성 생성 도구다. Python으로 작성됐고 MIT 라이선스로 공개됐다. 2023년 11월 29일에 만들어진 저장소로, 별 38,019개를 모은 상태다. 이번에 확인한 릴리스 태그는 없어, 새 버전이 아니라 프로젝트 자체를 짚는 발견에 가깝다.

MIT와 MyShell이 함께 만든 프로젝트로, 저장소 설명은 이 도구를 오디오 파운데이션 모델(audio foundation model), 즉 학습한 소리에서 새로운 소리를 만들어 내는 기반 모델이라고 밝힌다. README는 OpenVoice가 참조 음성의 음색을 복제해 여러 언어와 억양으로 음성을 생성한다고 설명한다. 감정과 억양, 리듬, 쉼, 말의 높낮이 같은 음성 스타일을 세밀하게 조절할 수 있고, 참조 음성과 생성 음성의 언어가 다국어 학습 데이터에 포함되지 않아도 제로샷 음성 복제(zero-shot voice cloning), 곧 별도 학습 없이 처음 듣는 목소리로도 복제된다는 성질을 지원한다. 이어 OpenVoice V2는 더 나은 오디오 품질과 영어·스페인어·프랑스어·중국어·일본어·한국어의 네이티브 지원을 제공하고, V1과 V2 모두 MIT 라이선스로 상업·연구 목적으로 무료 이용할 수 있다고 적는다.

다만 V2가 이전 버전보다 얼마나 나아졌는지를 보여주는 수치나 벤치마크는 이번에 확인한 정보에 없다. 릴리스 이력도 남아 있지 않아 V1과 V2의 개선 폭을 직접 비교할 수 없고, 오디오 품질과 네이티브 언어 지원은 README 설명으로만 알 수 있다. 독립적으로 측정한 결과는 아니며, 남은 판단 재료는 모멘텀 점수 5.4뿐이다. 한국어가 네이티브로 명시된 V2부터 들어 보는 것이 맞다.