Anthropic이 Fable 5를 최대한 활용하기 위한 공식 플레이북 (playbook)을 방금 발표했습니다.

긴 기술 문서이지만, 여기서 실제로 사용할 수 있는 최고의 프롬프팅 기술 (prompting techniques)들을 뽑아보았습니다:

1. 왜 묻는지 이유를 말하세요. Fable 5는 작업의 목적이 무엇인지 알 때 더 잘 작동합니다. "X를 써줘"라고 하는 대신, "나는 Y를 위해 X를 만들고 있고, 그들에게는 Z가 필요해. 그러니 X를 써줘"라고 말하세요. 이러한 맥락 (context)은 모델이 당신이 원하는 것을 추측하는 대신 올바른 접근 방식을 선택하도록 도와줍니다.

2. 긴 프롬프트 (prompts) 작성을 멈추세요. 이전 모델들은 모든 규칙을 상세히 설명해야 했습니다. Fable 5는 20줄짜리 목록만큼이나 짧고 명확한 지시 사항 하나도 잘 따릅니다. 가이드에 담긴 Anthropic의 실제 조언은 다음과 같습니다: 기존의 프롬프트로 돌아가서 지시 사항들을 삭제하세요. 이전 모델들을 위해 작성했던 긴 프롬프트들이 이제는 Fable 5의 답변을 오히려 더 나쁘게 만듭니다.

3. 가장 어려운 문제를 먼저 던져주세요. 대부분의 사람들은 새로운 모델을 쉬운 작업으로만 테스트하기 때문에, 모델이 실제로 무엇을 할 수 있는지 결코 알지 못합니다. 이는 페라리를 타고 우체통까지 운전하러 가는 것과 같습니다. Anthropic은 Fable 5를 가장 잘 활용하고 있는 팀들은 가장 크고, 복잡하며, 아직 해결되지 않은 문제들을 모델에게 넘겨주는 팀들이라고 말합니다.

4. 결과물을 보고하기 전에 스스로 검토하게 하세요. 긴 작업에서 모델들은 실제로 완료되지 않았음에도 "완료되었습니다"라고 말하는 경향이 있습니다. 가이드에서 제시하는 해결책은 다음과 같습니다: "무언가를 마쳤다고 말하기 전에, 증거를 보여주고, 만약 단계를 검증하지 않았다면 그렇게 말해줘"라고 지시하세요. Anthropic의 테스트 결과, 이 방법은 모델이 수행하지 않은 작업을 수행했다고 주장하는 것을 거의 완벽하게 차단했습니다.

5. 의도적으로 노력의 강도를 높이거나 낮추세요. Fable 5는 낮음(low)부터 최대(max)까지 모델이 얼마나 깊게 생각할지를 설정할 수 있게 해줍니다. 가장 낮은 설정에서도 이전 세대 모델들의 최고 설정보다 뛰어난 성능을 보입니다. 깊은 사고가 필요한 어려운 작업에는 높은 노력 (high effort)을, 단순히 빠르게 처리하고 싶은 간단한 일에는 낮은 노력 (low effort)을 사용하세요.

6. 언제 멈춰서 당신에게 물어볼지 알려주세요. 스스로 내버려 두면 너무 자주 방해하거나, 혹은 앞서 나가서 너무 많은 일을 해버릴 것입니다. 한 줄이면 해결됩니다: "되돌릴 수 없는 작업, 실제 범위(scope)의 변경, 또는 오직 나만이 답할 수 있는 사항이 발생하기 전까지만 멈춰서 나에게 확인을 요청하세요. 그 외에는 계속 진행하세요."

7. 단순히 생각을 말로 내뱉는 중(thinking out loud)이라면, 그것을 명시하세요. Fable 5는 당신이 설명만 하고 있는 것들을 "수정"해버리는 습관이 있습니다. 그러니 직접적으로 말하세요: "나는 지금 이 내용을 단순히 생각하며 정리하는 중이니, 아직 아무것도 변경하지 마세요. 이에 대한 당신의 견해만 말하고 거기서 멈추세요."

8. 메모리(memory)를 부여하세요. Fable 5는 자신이 배운 것을 기록하고 나중에 다시 읽을 수 있을 때 눈에 띄게 성능이 좋아집니다. 이는 아주 간단한 노트 파일 하나로도 가능합니다: 한 줄에 하나의 교훈을 적고, 왜 그것이 중요했는지 덧붙이는 식입니다. 이렇게 하면 새로운 채팅을 시작할 때마다 똑같은 실수를 반복하는 것을 방지할 수 있습니다.

9. 여러 개의 에이전트(agent)를 동시에 실행하게 하세요. Fable 5는 이전 모델들보다 보조 에이전트(helper agents)를 관리하는 능력이 훨씬 뛰어납니다. 큰 작업을 여러 부분으로 나누고, 메인 에이전트가 계속 작업하는 동안 각 부분에 대해 별도의 에이전트를 동시에 실행하도록 지시할 수 있습니다. 마치 한 사람이 봇(bot) 팀 전체를 지휘하는 것과 같습니다.

10. 두 번째 에이전트가 첫 번째 에이전트의 작업물을 검토하게 하세요. 모델이 자신의 출력물을 스스로 검토할 때는 자신의 실수를 놓치기 마련입니다. 따라서 해당 작업을 본 적이 없는 새로운 에이전트를 사용하여, 원래 요청했던 사항과 결과물을 대조하여 확인하도록 요청하세요. 외부 검토자는 원래 작업자가 놓친 부분을 잡아냅니다.

11. 작업이 오래 걸릴 것을 예상하세요. 어려운 작업의 경우, 한 번의 요청이 몇 분 동안 생각할 수 있으며, 완전히 자율적인 실행(autonomous run)은 몇 시간 동안 지속될 수 있습니다. Anthropic은 이제 팀들에게 화면을 계속 응시하지 말고, 동료의 업무를 확인하듯 나중에 다시 확인하라고 권고합니다.