
코딩 벤치 30%가 깨져 있다.
요약
OpenAI가 SWE-Bench Pro의 평가 신뢰성 문제로 인해 프론티어 코딩 평가 추천을 철회했습니다. 이는 모델 성능 경쟁보다 측정 인프라 자체에 근본적인 문제가 있음을 시사합니다. 또한, 삼성전자가 2030년까지 전 생산 라인을 AI 기반 완전 자율 공장으로 전환하겠다는 계획도 언급되었습니다.
핵심 포인트
- OpenAI가 코딩 평가 도구(SWE-Bench Pro)의 신뢰성 문제로 추천을 철회함.
- 모델 성능 경쟁보다 평가 인프라 자체의 안정성이 더 큰 병목임.
- 삼성전자는 2030년까지 AI 기반 완전 자율 공장 구축을 목표로 함.
코딩 벤치 30%가 깨져 있다.
OpenAI가 SWE-Bench Pro를 감사하고 프론티어 코딩 평가 추천을 철회했다.
과제 열 개 중 셋이 깨진 상태로 점수가 매겨지고 있었다.
다들 모델 순위 싸움을 하는데
실제 병목은 모델이 아니라 측정기 자체다.
리더보드 경쟁이 평가 인프라를 먼저 망가뜨렸다.
점수가 아니라 채점표가 죽었다.
삼성전자가 반도체 공장에서 사람을 빼는 게 인건비 때문이라고 생각하면 절반만 본 거다.
삼성이 2030년까지 국내외 전 생산라인을 자재 투입부터 출하까지 AI가 제어하는 완전 자율공장으로 바꾸겠다고 했다. 이미 일부 라인은 무인 자율가동 실증에 성공했고, AI 에이전트를 넣으니 설비가 멈췄을
AI 자동 생성 콘텐츠
본 콘텐츠는 X @j90236317 (검증됨)의 원문을 AI가 자동으로 요약·번역·분석한 것입니다. 원 저작권은 원저작자에게 있으며, 정확한 내용은 반드시 원문을 확인해 주세요.
원문 바로가기