지능을 측정하는 단위는 존재하지 않습니다.

요약

본문은 인공지능과 인간 모두에게 '지능'을 객관적으로 측정할 수 있는 단위를 아직 존재하지 않는다고 지적합니다. 특히 기존 LLM 평가 벤치마크의 최대 45%가 유출된 학습 데이터로 오염되어 있음을 경고하며, 이를 해결하기 위한 ARC-AGI-3와 같은 새로운 접근 방식을 제시하고 있습니다.

핵심 포인트

• 지능 측정 단위는 인간과 기계 모두에게 존재하지 않음.
• 기존 LLM 벤치마크의 최대 45%가 데이터 유출로 오염됨.
• ARC-AGI-3와 같은 새로운 방법론이 필요함.
• NIA Volume 10에서 지능 측정에 필요한 요소들을 논함.