OpenAI의 Daybreak(GPT-5.5와 Codex Security 확장 기능의 결합)와 Anthropic의 Glasswing이 같은 주에 출시되었습니다. 두 제품은 공개된 사이버 보안 벤치마크(cybersecurity benchmarks)에서 거의 동일한 수치를 기록했으며, 세 곳의 동일한 엔터프라이즈 디자인 파트너(enterprise design partners)를 언급했습니다. 출시 자료(launch decks)는 마치 동일한 홍보 팀이 작성한 것처럼 보일 정도였습니다.

이러한 수렴(convergence)이야말로 진짜 핵심적인 이야기입니다. 단일 평가(eval)에서 어느 연구소가 상대방을 근소하게 앞섰느냐가 아니라(그 격차는 오차 범위 내에 있습니다), 두 프런티어 연구소(frontier labs)가 동일한 시기에 구조적으로 유사한 특화 제품을 출시한다는 것이 무엇을 의미하는지, 그리고 이번 분기에 여러분의 AppSec 파이프라인을 위한 LLM 지원 보안 도구를 선택할 때 이 정보를 어떻게 활용해야 하는지가 중요합니다.

벤치마크의 동등함은 힌트이지, 결정타가 아니다

두 제품 모두 보도 자료에서 내세운 주요 지표인 취약점 발견율(vulnerability discovery rate), 오탐률(false-positive rate), 재현된 CVE에 대한 패치 소요 시간(time-to-patch on replayed CVEs)에서 오차 범위 내의 점수를 보고했습니다. 어느 연구소도 시드 분산(seed variance), 전체 평가 하네스(evaluation harness) 세부 정보, 또는 사용된 특정 커밋 해시(commit hashes)를 공개하지 않았습니다. 누군가가 공유 코퍼스(shared corpus)를 대상으로 독립적인 평가(independent eval)를 수행하기 전까지는 그 격차를 노이즈(noise)로 취급하십시오.

이러한 수렴에는 간단한 구조적 설명이 가능합니다. 두 팀 모두 중첩되는 공개 보안 데이터셋(public security datasets)을 대상으로 학습하고 있으며, 학계 보안 커뮤니티가 지난 2년 동안 구축해 온 동일한 평가 스위트(evaluation suites)를 사용하여 튜닝하고 있습니다. 프런티어 기술이 벤치마크에서 포화 상태에 이르면, 동등함(parity)은 더 이상 유익한 정보를 제공하지 않습니다.

실무적인 의미는 다음과 같습니다. 만약 여러분이 벤치마크 차이를 근거로 Daybreak와 Glasswing 사이에서 고민하고 있다면, 여러분은 노이즈를 선택하고 있는 것입니다. 취약점 발견에서 나타나는 1% 미만의 우위는 여러분의 코드베이스(codebase), 분류 워크플로(triage workflow), 또는 온콜 로테이션(on-call rotation)과 마주하는 순간 유지되지 않습니다.

벤더의 벤치마크 동등함은 프런티어 기술이 공개된 평가 스위트에서 포화 상태에 도달했다는 선행 지표이지, 제품이 실제 운영 환경(production)에서 서로 대체 가능하다는 의미가 아닙니다. 다년 계약에 서명하기 전에 여러분의 저장소(repos) 중 대표적인 부분을 추출하여 자체적인 평가(eval)를 수행하십시오.

벤치마크보다 중요한 것은 파트너의 중복성입니다

두 발표 모두 공통적으로 세 곳의 엔터프라이즈 디자인 파트너(design partners)를 언급했습니다. 행간을 읽어보면, 보안 성숙도가 높은 동일한 기업들이 두 연구소(labs) 모두로부터 동시에 연락을 받고, 병렬적으로 파일럿(pilots)을 운영하며, 양쪽 팀에 동일한 워크플로(workflow) 요구사항을 제공하고 있다는 뜻입니다. 이 제품들이 구조적으로 유사하게 느껴지는 이유가 바로 이것입니다. 즉, 이들은 동일한 주관을 가진 구매자들을 대상으로 삼아 삼각 측량(triangulating)을 하고 있는 것입니다.

실질적인 시사점은 다음과 같습니다. 어떤 제품을 선택하든, 여러분은 동일한 레퍼런스 고객들에 의해 형성된 주관적인 워크플로를 접하게 될 것입니다. 만약 여러분 팀의 리뷰 프로세스가 그들의 방식과 유사하다면(PR 시점의 스캔, 일괄 분류(batched triage), 낮은 심각도의 이슈에 대해 인간의 검토를 거치는 자율 패칭(autonomous patching)), 어떤 도구를 선택해도 무난하게 적응할 수 있습니다. 하지만 만약 여러분의 프로세스가 다르다면 — 예를 들어 PR 시점의 SAST(정적 애플리케이션 보안 테스트) 대신 스테이징 환경에 대한 지속적인 DAST(동적 애플리케이션 보안 테스트)를 수행하거나, PR별 분석 대신 모노레포(monorepo) 전체에 대한 주기적인 스윕(sweeps)을 수행한다면 — 두 도구 모두 약간 어긋난 느낌을 줄 것이며, 어떤 경우든 통합(integration) 작업을 위한 예산을 책정해야 할 것입니다.

계층형 액세스 프레임워크가 실제 제품입니다

두 연구소 모두 기능을 계층(tiers)에 따라 제한하고 있습니다. 읽기 전용 분류(triage) 및 인라인 주석(inline annotations)은 폭넓게 사용할 수 있습니다. 반면, 모델이 직접 수정 사항을 작성하고 커밋하는 자율 패칭(autonomous patching)은 엔터프라이즈 계약, 저장소 허용 목록(allowlists), 브랜치 보호(branch protection) 요구사항, 그리고 CI 통합에 대한 보안 검토를 거쳐야만 사용할 수 있습니다.

이러한 제한은 임의적인 것이 아니며, 단순히 책임 회피를 위한 연극(liability theater)도 아닙니다. 두 연구소 모두 모델이 작성할 수 있는 저장소를 열거하고, 병합(merge) 전의 인간 검토 단계를 문서화하며, 브랜치 보호 규칙이 마련되어 있는지 확인하도록 요구합니다. 이는 책임감 있는 방식이며, 동시에 "샌드박스에서의 평가"와 "프로덕션에서의 실행" 사이의 간극이 데모 영상이 암시하는 것보다 훨씬 크다는 것을 의미합니다. 최상위 계층에 도달하기 전, 어떤 플랫폼에서든 몇 주간의 조달(procurement) 및 보안 검토 과정을 예상해야 합니다.

한쪽을 선택하기 (또는 선택하지 않기)

대부분의 팀에게 결정은 벤치마크 이외의 세 가지 요소로 귀결됩니다:

1. 기존 연구소(Lab)와의 관계. 이미 OpenAI 엔터프라이즈 도구(Enterprise tooling)를 사용 중이고 구매 팀의 데이터 처리 검토(Data-handling review)가 완료된 상태라면, Daybreak를 도입할 때 발생하는 순수 마찰(Net friction)은 거의 제로에 가깝습니다. Anthropic 측도 논리는 동일합니다. 벤치마크 점수 0.8%를 아끼기 위해 6개월짜리 벤더 보안 검토(Vendor security review)를 다시 수행하는 것은 승산 없는 거래입니다.
2. CI 및 SCM 스택. 두 제품 모두 출시 시점에 주요 Git 호스팅 CI 제공업체와 통합됩니다. 기능이 동일하다고 가정하기 전에 귀사의 특정 스택에 대한 퍼스트 클래스 지원(First-class support) 여부를 먼저 확인하십시오. 커뮤니티 유지 통합(Community-maintained integrations) 방식은 훨씬 더 많은 엣지 케이스(Edge cases)를 수반합니다.
3. 규제 프로필 (Regulatory profile). HIPAA, PCI 또는 규제 데이터 체제(Regulated-data regime) 하에서 운영되는 경우, 각 연구소가 제공하는 계약 유형(BAA 범위, DPA 약관, 지역 데이터 레지던시(Data residency))은 제품 기능과는 별개로 수개월의 구매 주기(Procurement cycle)를 좌우할 수 있습니다.

만약 이 세 가지 요소 중 어느 것도 결정적인 요인이 아니라면, 동일한 리포지토리(Repos) 세트를 대상으로 2주 동안 두 제품의 파일럿(Pilot)을 병렬로 실행한 후, 엔지니어들이 별도의 요청 없이도 실제로 더 많이 사용하는 제품을 선택하십시오. 제약 조건은 벤치마크 점수가 아니라 개발자 채택(Developer adoption)입니다.

이러한 수렴이 시사하는 바

두 프런티어 연구소(Frontier labs)가 동일한 주에 거의 동일한 전문 제품을 출시한다는 것은, LLM 지원 보안 도구(LLM-assisted security tooling)가 "연구 방향"에서 "기대되는 SKU(Stock Keeping Unit)" 단계로 넘어갔음을 의미합니다. Google, Mistral, 그리고 최소 하나 이상의 오픈 웨이트(Open-weights) 도전자가 향후 2분기 내에 유사한 제품을 출시할 것으로 예상됩니다.

이는 구매자에게는 좋은 소식입니다. 경쟁은 가격을 낮추기 때문입니다. 반면, 연구소들이 자신들의 영역에 침범하지 않을 것이라는 전제하에 프런티어 모델 가치로 투자를 유치했던 독립형 AI 보안 스타트업들에게는 문제입니다. 이제 해당 스타트업들의 해자(Moat)는 워크플로의 깊이(Workflow depth)에 있습니다. 즉, 커스텀 규칙(Custom rules), 귀사 코드베이스의 관용구(Idioms), 팀의 트리아지(Triage) 이력, 그리고 연구소들이 우선순위를 두지 않을 귀사 스택의 구성 요소들과의 통합 능력이 핵심입니다.

구매자라면: 출시 가격으로 다년 계약을 체결하지 마세요. 시장 가격은 곧 저렴해질 것입니다. 이 분야에서 제품을 구축 중이라면: 가공되지 않은 모델 성능 (raw model capability)을 판매하는 것을 멈추고, 워크플로 (workflow)를 판매하세요.