Artificial Analysis Music Arena의 새로운 벤치마크: AA-Music-Vocal v1.1 및

AA-Music-Vocal v1.1과 AA-Music-Instrumental v1.1을 출시합니다. 이들은 Artificial Analysis Music Arena의 새로운 벤치마크이며, 17개 장르에 걸쳐 1,000개의 새로운 프롬프트를 기반으로 구축되었고 전문 평가단이 점수를 매겼습니다.

지난 3개월 동안 Suno v6, Lyria 3.5, Mureka V9.5, Eleven Music v2.5, MiniMax Music 3.0과 같은 플래그십 모델 출시가 AI 음악 생성의 품질에 새로운 기준을 제시했습니다. 이제 모델들은 단일 텍스트 프롬프트만으로 완전한 노래를 작성하며, 장르에 맞는 복잡한 가사, 설득력 있는 보컬, 복잡한 편곡 및 진정한 악기 연주를 만들어냅니다. 품질이 높아짐에 따라 모델 간의 차이가 미묘해지고 있어, AA-Music 리더보드를 위해 더 좋고 미묘한 평가가 요구됩니다.

업데이트된 Artificial Analysis Music Leaderboards에서 얻은 초기 통찰력:

➤ Suno v6는 두 벤치마크 모두에서 #1위를 차지했으며, Vocal에서는 Suno v6-mini보다 26 Elo 앞서고 Instrumental에서는 31 Elo 앞섰습니다. Suno가 두 리더보드 모두에서 상위 두 자리를 지키고 있습니다.

➤ Mureka V9.5는 Vocal에서 #3위를 차지하며, Mureka V9 대비 51 Elo 높은 점수로, Vocal 리더보드에서 같은 모델 계열의 두 버전 간 가장 큰 상승 폭을 기록했습니다.

➤ Mureka V9, Mureka V9.5, Lyria 3 Pro, Lyria 3.5는 Instrumental에서 #3위부터 #6위까지 통계적으로 동률이며, 서로 5 Elo 이내입니다.

➤ MiniMax Music 3.0은 선도적인 오픈 웨이트(open weights) 음악 모델로, Vocal에서 #11위, Instrumental에서 #13위를 기록했습니다. Stable Audio 3 Medium은 Instrumental에서 MiniMax Music 3.0보다 3 Elo 이내입니다.

v1.1의 새로운 기능과 주요 모델들의 예시 트랙은 아래를 확인해 주세요🧵