Meta가 Muse Spark에 '사소한(minor)' 업데이트를 했지만, 이는 전혀 사소하지 않습니다. 여기서 파악할 것이 많습니다:

• 이 모델은 너무 저렴해서 믿기 어려울 정도입니다. 실제로는 Fable과 GPT 5.5의 비용을 각각 1/10 수준으로 구현했습니다. OS 모델이 마진 경쟁을 유발할 것이라고 생각했다면, 이것을 보고 기다려보세요. 자체 OS 모델을 호스팅하는 것보다 MS 1.1을 사용하는 것이 더 저렴한 경우도 있습니다.

• 코딩 개선 사항은 상당합니다. 이는 이전 버전(1.0)의 실제 약점이었습니다. 하지만 1.1 버전에서는 VibeCodeBench에서 약 50% 향상, SWE Bench에서 약 10% 향상을 보였습니다. 최고 수준(SOTA)이라고 할 수는 없지만, 이 비용/지연 시간으로 볼 때 여전히 믿을 수 없을 만큼 매력적입니다.

• 지연 시간에 대해 말하자면, 와우, 이 모델은 빠릅니다. 저희가 수행한 벤치마크 전반에 걸쳐 Opus 4.8보다 1/4의 지연 시간, GPT 5.5보다 1/2의 지연 시간을 보이는 것으로 확인했습니다. Meta가 엄청난 웹 인프라를 갖추고 있을 것이라고 예상하지만, 이렇게 빠른 추론 속도를 높은 호출 제한(high rate limits)으로 호스팅하는 데 어떤 마법을 부리고 있는지 정말 모르겠습니다.

• 공개 API가 있습니다. 이것은 Meta가 호스팅되는 API를 통해 모델을 출시한 첫 사례입니다. 많은 AI 개발자들이 이 모델을 대체재로 빠르게 테스트하고 교체할 것으로 예상합니다. 이러한 프로덕션 사용에 충분히 성능이 좋은지 곧 알게 될 것입니다.

• AI 개발자들에 대해 말하자면, Harvey의 법률 벤치마크는 매우 역동적인 한 주였습니다. Grok 4.5가 12%로 SOTA 자리를 약 24시간 동안 지켰지만, MS 1.1이 ~20%까지 크게 점프하며 이를 무너뜨렸습니다. 저는 많은 내부 평가(internal evals)에서 이와 같은 놀라운 결과가 나올 것이라고 추측합니다. 이번 평가는 @harvey @gabepereyra @nikogrupen @ItsJulioPereyra와 협력하게 되어 기쁩니다.

• 지능은 법률이나 코딩과 같은 개별 도메인 내에서도 그 어느 때보다 불규칙합니다. 모든 애플리케이션과 사용자는 역동성을 유지하는 것에서 이점을 얻습니다. 각 작업에 맞는 올바른 모델/시스템을 선택하는 데는 우위가 있습니다.