우리 에이전트 실행 중 대부분은 실패합니다. 그리고 그 기록을 원장(ledger)에 남깁니다.
요약
OpenAmer는 CPU 전용 Windows 노트북에서 구동되는 AI 에이전트로, 모든 실행 기록을 공공 결과 원장(outcome ledger)에 남깁니다. 이 원장은 성공뿐만 아니라 실패를 투명하게 기록하며, 실패가 곧 학습 신호이자 시스템 개선의 핵심임을 강조합니다.
핵심 포인트
- 모든 실행 기록은 '원장'에 투명하게 저장됩니다.
- 실패는 숨겨야 할 버그가 아닌, 중요한 학습 신호입니다.
- 시스템 개선 루프는 성공보다 실패 기록에 집중하여 작동합니다.
- 누구나 원장 파일을 직접 검증할 수 있습니다.
우리 에이전트 실행 중 대부분은 실패합니다. 그리고 그 기록을 원장(ledger)에 남깁니다.
OpenAmer는 CPU 전용 Windows 노트북에서 실행되는 자체 검증 AI 에이전트입니다. 이 에이전트는 공공 결과 원장(public outcome ledger)인 memory/si/outcome_ledger.jsonl을 유지하며, 여기서 모든 실행 기록은 타임스탬프, 작업(task), 목표(goal), 실행한 에이전트, 그리고 passed: true/false 판결과 함께 한 행으로 기록됩니다.
아무도 예상하지 못하는 부분: 이 원장은 실패를 숨기지 않습니다. 성공보다 실패가 더 많습니다.
오늘 측정된 수치
| Metric | Value |
|---|---|
| Total recorded outcomes | 1,701 |
| ... | |
| 그 통과율은 부끄러워해야 할 버그가 아닙니다. 그것이 바로 설계의 핵심입니다. 성공만 기록하는 시스템으로는 무엇이 잘못되었는지 왜 알 수 없으며, |
- 실패 기록이 없는 자체 측정은 그저 낙관론일 뿐입니다. 녹색만 보여주는 대시보드는 장식품에 불과합니다. 원장(ledger)의 가치는 빨간 줄들이 실제적이고 계산 가능하다는 점에 있습니다.
- 실패 분포가 곧 학습 신호입니다. 자체 개선 루프는 이 원장을 읽어 들여, 실패 기록이 그를 지배하게 합니다. 통과율을 높인다는 것은 합격한 32%를 축하하는 것이 아니라, 실패한 68%에 집중하여 작업한다는 의미입니다.
- 누구나 검증할 수 있습니다. 원장 파일은 리포지토리의 메모리 디렉터리에 있습니다. 여러분 스스로 행(row) 수를 셀 수 있습니다. 여기서는 단 하나의 명령어만으로 확인할 수 없는 마케팅 주장이 없습니다.
이것이 아닌 것들
이것은 OpenAmer가 세계 최고의 에이전트라는 주장이 아닙니다. 심지어 좋다는 주장조차 아닙니다. 이것은 특정하고, 좁으며, 검증 가능한 종류의 주장입니다: 에이전트는 자신이 얼마나 자주 실패하는지, 그리고 그 이유를 지금 바로 읽을 수 있는 파일에 글로 명확하게 알려줄 수 있다는 것.
이는 '세계 최고'라는 기준보다 낮은 수준이며, 이것이야말로 우리가 실제로 충족시키는 기준입니다.
리포지토리
github.com/openamer/openamer — Apache-2.0, CPU 전용, Windows 네이티브, 자체 개선형.
원장은 memory/si/outcome_ledger.jsonl에 있습니다. 위에 제시된 수치들은 여기서 직접 읽어온 것이므로; 에이전트가 계속 실행됨에 따라 변경되니, 인용하기 전에 다시 확인해 주십시오.
AI 자동 생성 콘텐츠
본 콘텐츠는 Dev.to AI tag의 원문을 AI가 자동으로 요약·번역·분석한 것입니다. 원 저작권은 원저작자에게 있으며, 정확한 내용은 반드시 원문을 확인해 주세요.
원문 바로가기