AI 에이전트가 레포지토리를 수정하기 전에, 감사할 수 있는 증거를 제공하라
요약
AI 코딩 에이전트의 신뢰성을 높이기 위해 '주장(claim)'과 이를 뒷받침하는 '증거(evidence)'를 분리하여 제공하는 컨텍스트 팩을 제안합니다. 이 패키지는 프로젝트가 무엇을 주장하고, 그 주장이 어떤 파일이나 보고서로 증명되는지 구조화하여 에이전트의 작업 과정을 투명하게 만듭니다.
핵심 포인트
- AI 에이전트에게 '주장'과 '증거'를 분리하는 컨텍스트 제공
- CLAIM_GRAPH.json, EVIDENCE_INDEX.json 등 구조화된 파일 포함
- 검증되지 않은 경우 실행하지 않는 네거티브 스페이스 강조
- 프로젝트의 증명/추론 상태를 명확히 구분하여 인계 루프 개선
AI 코딩 에이전트를 위한 유용한 컨텍스트 팩은 정확히 적절한 곳에서 지루해야 합니다.
Doramagic AI Context Pack Benchmark는 하나의 제약 조건을 중심으로 구축되었습니다. 즉, 에이전트가 레포지토리를 수정하기 전에, 주장(claim)과 증거(evidence)를 분리할 수 있어야 한다는 것입니다.
이 패키지는 다음을 포함합니다:
- CLAIM_GRAPH.json: 프로젝트가 주장하는 것과 그 주장이 어떻게 관련되는지.
- EVIDENCE_INDEX.json: 각 주장이 파일이나 보고서에서 어디에 의해 뒷받침되는지.
- CAPABILITY_CONTRACT.json: 이 패키지가 에이전트가 할 수 있고 할 수 없다고 말하는 것.
- AI_CONTEXT_PACK.md: 사람이 읽을 수 있는 운영 컨텍스트.
- CONTINUE_CHECK.md: 다음 에이전트 실행을 위한 인계 확인(handoff check).
중요한 부분은 네거티브 스페이스입니다. 이 패키지는 검증되지 않은 경우 대상 프로젝트를 설치하거나 실행한다고 가장하지 않습니다. README를 런타임 증명으로 바꾸지 않습니다. 소스 패키징, 증거 색인화, 그리고 유효성 검사 보고서를 분리하여 다운스트림 에이전트가 다음과 같이 말할 수 있게 합니다: 이것은 증명되었고(proven), 이것은 추론되었으며(inferred), 이것은 여전히 실제 실행이 필요하다.
이는 레포지토리 인계 루프를 변화시킵니다. 모델에게
AI 자동 생성 콘텐츠
본 콘텐츠는 Dev.to AI tag의 원문을 AI가 자동으로 요약·번역·분석한 것입니다. 원 저작권은 원저작자에게 있으며, 정확한 내용은 반드시 원문을 확인해 주세요.
원문 바로가기