github.devotd.
새 소식멀티모달

deepseek-ai/janus — 시각 이해와 이미지 생성을 한 모델 계열로

deepseek-ai/janus는 시각 이해와 이미지 생성을 하나의 트랜스포머 구조로 묶은 Janus-Series 멀티모달 모델 저장소다.

저장소 정보deepseek-ai/janus ↗

deepseek-ai/janus는 시각 이해와 이미지 생성을 하나의 트랜스포머 구조로 묶은 Janus-Series 멀티모달 모델 저장소다.

GitHub 설명: Janus-Series: Unified Multimodal Understanding and Generation Models

스타
★ 17.8K
포크
2.2K
언어
Python
라이선스
MIT
원문 보기 ↗GitHub에서 보기 ↗

deepseek-ai/janus는 텍스트와 이미지 입력을 이해하고, 이미지 생성까지 지원하는 멀티모달 모델 시리즈 Janus-Series의 저장소다. 저장소 설명은 멀티모달 이해와 생성을 하나의 모델 계열로 통합한다는 내용이다. 이 저장소는 2024년 10월 18일에 만들어졌다.

구조는 시각 인코딩을 분리해 두고 단일 트랜스포머(transformer)로 두 기능을 처리하는 방식이다. README에 따르면 Janus-Pro는 학습 전략과 데이터, 모델 규모를 확장했고, JanusFlow는 자기회귀(autoregressive) 언어 모델과 rectified flow를 결합했다. 안내된 모델은 Janus-1.3B, JanusFlow-1.3B, Janus-Pro-1B, Janus-Pro-7B 네 가지이며, 각 모델의 다운로드와 추론 예제가 README에 함께 정리되어 있다. 라이선스는 MIT, 주 언어는 Python, GitHub 별은 17761개다.

다만 이 기록에는 릴리스 버전이 없어 배포 시점을 특정할 수 없고, 성능을 비교할 벤치마크 수치나 종합 평가 점수도 주어지지 않는다. 남아 있는 지표는 10점 만점 기준 모멘텀 점수 2.4로 낮다. 분리된 시각 인코딩과 단일 트랜스포머 구조, MIT 라이선스까지는 확인되지만 판단의 근거는 README 설명과 예제 코드로 한정된다. 이 기록만으로 실사용을 결정하기는 이르니, 예제 추론 코드를 직접 확인하는 편이 현실적이다.