PyoSignal Logo
PyoSignal
← 논문 목록으로 돌아가기
논문Hugging Face

Boogu-Image-0.1: Boosting Open-Source Unified Multimodal Understanding and Generation

논문 ID: 2607.13125107 추천
#Multimodal#Image Generation#Open Source#Efficient Training#Agent#Vision#Benchmark#Evaluation#Inference
Boogu-Image-0.1: Boosting Open-Source Unified Multimodal Understanding and Generation

핵심 요약

적은 비용과 데이터로 폐쇄형 모델에 근접한 성능을 내는 오픈소스 통합 멀티모달 모델 제품군 공개

상세 내용

기존의 강력한 폐쇄형 멀티모달 시스템들은 시스템 통합 방식에 의존하지만 내부 구현 방식은 공개되지 않아 연구에 제약이 있었습니다. 본 논문은 이해와 생성이 통합된 오픈소스 모델 제품군인 Boogu-Image-0.1을 제안합니다. 모델의 이해도 향상, 데이터 품질 최적화, 그리고 에이전트 기반의 추론 시간 스케일링(agentic inference-time scaling)을 통해 효율적인 학습 파이프라인을 구축했습니다. 결과적으로 약 2억 장의 이미지와 40만 달러 수준의 저비용 학습만으로도 기존 오픈소스 모델을 능가하고 선도적인 폐쇄형 모델에 근접하는 성능을 달성했습니다. 이를 위해 가중치, 코드, 레시피를 Apache 2.0 라이선스로 공개하여 오픈 생태계 발전에 기여하고자 합니다.

주요 내용

  • Base, Turbo, Edit, Edit-Turbo로 구성된 통합 멀티모달 모델 제품군 개발
  • 데이터 품질 및 에이전트 기반 추론 스케일링을 통한 효율적 성능 극대화
  • 중국어-영어 이중 언어 텍스트 렌더링 및 지시 기반 편집 기능 탑재

실무에서 볼 만한 점

적은 컴퓨팅 자원과 데이터로도 고성능 생성/편집 모델을 구축할 수 있는 실무적인 학습 레시피를 제공합니다.

참고할 행동

  • 제공된 코드와 가중치를 활용하여 로컬 환경에서 텍스트-이미지 생성 성능 테스트
  • Edit-Turbo 모델을 활용한 지시 기반 이미지 편집 워크플로우 검증
  • 제한된 컴퓨팅 자원 환경에서 에이전트 기반 추론 스케일링 효과 분석