지난주에 7일 유료화(metered)가 되기 전에 Fable 5에게 스킬을 작성하게 하자는 스레드를 보았습니다. 단순히 GitHub에 시스템 프롬프트를 덤핑하는 대신, 누군가 제대로 수행했는지 찾아보았고 이것을 발견했습니다.

누군가가 Fable 5에게 자신의 작동 규율(working discipline)을 6가지 스킬(plan-gate, adversarial-verify, live-state-truth, scope-fence, ruthless-editor, memory-hygiene)로 작성하게 했습니다. 그런 다음 그들은 함정이 설치된 작업들을 대상으로 Opus 4.8에서 각 스킬을 스킬이 로드된 상태와 로드되지 않은 상태로 각각 실행했으며, 별도의 모델이 어떤 것이 어떤 것인지 모르는 상태에서(blind) 쌍을 평가하게 했습니다.

그들의 수치: 14번의 평가 중 12승 0패 2무, 작업당 토큰은 약 7% 더 사용.

저를 설득한 점은 두 가지 스킬이 첫 번째 버전에서 실패했음에도 불구하고 그 실패한 실행 결과들을 그대로 공개했다는 점입니다. 그들은 이를 다시 작성하고, 새로운 작업으로 다시 테스트한 후 배포했습니다. 많은 스킬이 기본적으로 아무런 역할도 하지 못한다는 연구가 돌고 있기 때문에, 실패한 사례들을 보는 것이 나머지 스킬들을 믿을 수 있게 만들었습니다.

며칠 동안 plan-gate와 scope-fence를 로드해 두었는데 결과물(diffs)이 더 정교하게 나옵니다. 무료이며, 가입 없이 복사 또는 다운로드 가능합니다: [tools link]. 방법론이 담긴 설명글은 여기에 있으며, SKILL.md가 이제 개방형 표준(open standard)이 되었기 때문에 동일한 파일이 Codex CLI 및 Gemini CLI에서도 작동하는 것으로 보입니다.
submitted by /u/keonakoum
[link] [comments]