Show HN: Emu2 – Gemini와 유사한 오픈 소스 37B 멀티모달 모델

안녕하세요 HN,

Beijing Academy of Artificial Intelligence (BAAI)에서 개발한 최신 생성형 멀티모달 모델 (Multimodal Model)인 Emu2를 소개하게 되어 기쁩니다. Emu2는 개방적이고 안전하며 책임감 있는 AI 연구를 육성하려는 BAAI의 의지를 반영하는 오픈 소스 (Open-source) 이니셔티브입니다. 이 모델은 최소한의 예시와 간단한 지시만으로 다양한 모달리티 (Modalities)에 걸친 작업을 처리하는 AI의 숙련도를 높이도록 설계되었습니다.

Emu2는 퓨샷 (Few-shot) 멀티모달 이해 작업에서 Flamingo-80B와 같은 다른 대규모 모델보다 우수한 성능을 입증했습니다. 이는 개발자들에게 다재다능한 베이스 모델 (Base model) 역할을 하며, 특화된 멀티모달 애플리케이션을 제작할 수 있는 유연한 플랫폼을 제공합니다.

Emu2의 주요 특징은 다음과 같습니다:

• 이전 모델인 Emu보다 더 간소화된 모델링 프레임워크 (Modeling framework).

• 인코더 (Encoder)의 시맨틱 공간 (Semantic space)으로부터 이미지를 재구성할 수 있는 디코더 (Decoder).

• 370억 개 (37 billion) 파라미터 (Parameters)로의 확장, 이를 통해 능력과 일반화 (Generalization) 성능 모두 향상.

BAAI는 또한 시각적 이해를 위한 Emu2-Chat과 시각적 생성을 위한 Emu2-Gen이라는 미세 조정 (Fine-tuned) 버전을 출시했으며, 이는 오늘날 사용 가능한 가장 강력한 오픈 소스 모델 중 일부로 자리 잡고 있습니다.

Emu2를 탐색하거나 기여하는 데 관심이 있는 분들을 위한 리소스는 다음과 같습니다:

• 프로젝트 (Project): https://baaivision.github.io/emu2/

• 모델 (Model): https://huggingface.co/BAAI/Emu2

• 코드 (Code): https://github.com/baaivision/Emu/tree/main/Emu2

• 데모 (Demo): https://huggingface.co/spaces/BAAI/Emu2

• 논문 (Paper): https://arxiv.org/abs/2312.13286

HN 커뮤니티가 Emu2와 어떻게 상호작용할지 매우 기대되며, 저희가 개선할 수 있도록 여러분의 피드백을 환영합니다. 멀티모달 AI의 경계를 넓히기 위해 함께 협력합시다!