하네스(Harness)는 모델만큼이나 중요합니다 - Claude Code(및 유사 도구)의 작동 방식

요약(TLDR): 목표는 하네스(harness)가 실제로 작동하는 모습을 보고 그것이 왜 중요한지 이해하는 것입니다.

• LLM(대규모 언어 모델)은 토큰(tokens)을 생성합니다.
• 하네스(harness)는 도구 호출(tool calls)을 해석하고, 이를 실행하며, 결과를 다시 피드백합니다.
• 대부분의 에이전트 점수(agent scores)는 사실 (모델 + 하네스) 점수입니다.
• 하네스(harness)는 권한(permissions), 검증기(validators), 재시도(retries), 그리고 오라클(oracles)이 존재하는 곳입니다.

하네스(harness)는 LLM 자체만큼, 혹은 그보다 더 중요할 수 있습니다. Anthropic, OpenAI, 그리고 다른 모든 이들은 단순히 "최고의" 모델을 만드는 사업뿐만 아니라, 그 주변의 최고의 하네스(harness)를 만드는 사업도 함께 하고 있습니다. 이를 설명하기 위해 짧은 글을 쓰고 작은 데모를 만들었습니다: https://blog.ixau.com/the-llm-does-not-use-tools-the-harness-makes-tool-use-possible