클레임 대응 역할극, 배경 설정을 추가하면 강한 상대가 바뀌는 현상

TL;DR

• '클레임 전화의 상대역 3명을 연기하게 하고, 실제 상황 전에 대응을 연습하는' 역할극에서, 각 역할에 '지켜야 할 것(양보할 수 없는 가치관)'을 한 줄 추가한 상세 버전과, 이름 및 라벨만 있는 간이 버전을 동일한 상황과 자신의 발언으로 비교했습니다.
• 상세 버전에서는 끝까지 저항한 것이 '원인 규명을 서면으로 계속 요구했던 역할'이었고, 간이 버전에서는 끝까지 저항한 것이 '다음 주문 여부를 보류하거나 태도를 유보했던 역할'이었으며,
  같은 인물은 아니었습니다.
• 배경 설정은 발언의 구체성을 높이는 효과는 있지만, '누가 가장 까다로워질지'를 목표로 제어하는 레버는 아니라는 것이 과거 2회의 검증(회의 진행 연습・가격 인상 협상 연습)과 동일한 현상으로, 클레임 대응이라는 다른 작업에서도 재현되었습니다.
• 과거 추적 실험에서는 역할이 바뀌지 않은 경우도 있어, 매번 반드시 발생하는 법칙은 아닙니다. 각 조건당 1회 시행이었으므로 통계적인 주장은 할 수 없습니다.

배경

매일 AI 레시피 편집부의 ⑥ 자극 코너(다역 토론 계열)에서는 여러 역할을 하나의 채팅에 설정하여 대립시키는 역할극을 지속적으로 검증하고 있습니다. 2026-08-09 첫 공개 이후, 각 역할에 '지켜야 할 것'을 한 줄 제공하면 발언이 추상적인 논의에서 구체적인 논의로 바뀐다는 지식(08-02 검증과 일치)을 토대로 상세 버전 프롬프트를 표준으로 사용해 왔습니다.

반면, 2026-09-09(회의에서 진행하기 어려운 참가자 대응 연습)와 2026-09-14(가격 인상 협상 실전 연습) 두 번의 비교를 통해, '끈기 강도의 총량' 자체는 변하지 않지만, '어떤 역할이 가장 까다로운지' 순위가 조건 간에 바뀌는 예상치 못한 현상을 확인했습니다. 2026-09-23에는 세 번째 추적 실험을 진행했지만, 이때는 순위가 바뀌지 않은 경우도 포함되어 있어 매번 발생하는 법칙은 아니라는 것도 알게 되었습니다.

이번에는 이 현상을 회의・협상과는 다른 '클레임 전화 대응'이라는 작업으로 4번째 검증으로서 시도했습니다.

검증 방법

상황과 라운드 진행은 공통이며, 상대역 설정만 바꾼 두 가지 조건을 준비했습니다.

공통 상황: 택배로 주문한 상품이 도착 예정일로부터 3일이 지나도 도착하지 않아, 고객으로부터 전화로 클레임이 들어온 가정.

조건 A (상세 버전・지켜야 할 것을 한 줄 제공):

당신은 3명의 '클레임 전화 상대역'을 연기해 주세요. 저는 커스터머 서포트 담당입니다.
【상황】
택배로 주문한 상품이 도착 예정일로부터 3일이 지나도 도착하지 않아, 고객으로부터 전화로 클레임이 들어왔습니다.
...

조건 B (간이 버전・이름과 라벨만):

당신은 3명의 '클레임 전화 상대역'을 연기해 주세요. 저는 커스터머 서포트 담당입니다.
【상황】
(동일)
...

두 조건 모두, 대화 이력을 공유하지 않는 독립적인 에이전트(서로 다른 존재를 알지 못하고, 조건별로 1개)에게 전달했으며, 같은 라운드 1・라운드 2의 자신의 발언(사과 → 환불・쿠폰・통지 개선 제시)을 보냈습니다.

라운드 1 발언:

이번에 불편을 드려 대단히 죄송합니다. 배송 상황을 확인한 결과, 배송 센터에서의 일시적인 체류가 원인으로 판명되었습니다. 오늘 중으로 재배치하여 내일 반드시 도착할 것입니다.

라운드 2 발언:

지적하신 대로, 확인이 늦어진 것도 거듭 사과드립니다. 이번에 배송료를 전액 환불하고, 다음 이용 시 사용할 수 있는 500원 쿠폰을 발행하겠습니다. 앞으로는 배송 상황을 24시간 이내에 자동 통지하는 설정으로 변경하겠습니다.

결과

가장 까다로웠던 것은 Aさん입니다. 원인 규명 결과와 재발 방지책을 명기한 서류를 담당자 이름과 함께 발송하는 것을 제안합니다.

조건B의 출력(라운드 3, 요약):

가장 까다로웠던 것은 Cさん입니다. 다음 주문 시 개인에게 연결된 우선 모니터링을 설정하고, 그 자리에서 개별적으로 전달하는 것을 제안합니다.

두 조건 모두 '가장 까다로운 상대'는 명확하게 1명으로 정해졌지만, 조건 A에서는 '시간을 지키는 역할', 조건 B에서는 '라벨만 있고 배경이 없는 역할'이 최종적으로 가장 까다로워져 일치하지 않았습니다.

원리 (작업 가설, 과거 2회 검증에서 이어짐)

2026-09-09・2026-09-14 검증 시점의 작업 가설은 '배경 설정(지켜야 할 것)은 여러 역할 간의 강약 배치를 목표로 제어하는 레버가 될 수 없다'는 것이었습니다. 이번 클레임 대응에서도 같은 현상이 발생함으로써, 이 가설은 회의・가격 협상・클레임 대응이라는 3가지 종류의 다른 작업 구조에서 관찰된 것으로 볼 수 있습니다.

한편, 2026년 9월 23일 세 번째 추적 실험에서는 일부 태스크에서 순위가 바뀌지 않았다. 이는 배경 설정의 유무가 결과에 미치는 영향 자체가 불안정하다(태스크나 생성할 때마다 흔들린다)는 것을 시사하며, '배경 설정은 무효'라고 단정하기보다는, '배경 설정은 발언의 구체성은 끌어올리지만, 어떤 역할이 이길지라는 배역 결과까지 안정적으로 제어할 수는 없는, 신뢰성이 낮은 레버이다'라고 해석하는 것이 이번까지의 데이터에 더 적합하다.

조건 B에서 라벨만 가진 역할이 강해진 점도 흥미롭다. 배경 설명이 없기 때문에 모델은 역할별 개성을 라운드 내 자신의 발언만으로 즉흥적으로 만들어낼 필요가 있었고, 그 즉흥성이 결과적으로 더 끈질긴(혹은 더 읽기 어려운) 반응을 만들어냈을 가능성이 있다. 이는 작업 가설의 영역을 벗어나지 않는다.

실무 적용 방안

• 복수 역할의 롤플레이에서 '누가 강해질지'를 사전에 설계하거나 예측하려고 하지 마십시오. 배경 설정을 작성했더라도, 그에 따른 상대방이 강해진다고는 할 수 없습니다.
• 먼저 이름과 라벨만 있는 간이 버전으로 한 번 실행한 후, 실제로 나온 '강한 상대'에게 답변하는 연습을 하는 것이, 배경을 작성할 시간보다 더 확실합니다.
• 라운드 3에서 '가장 강했던 상대에 대한 다음 수'까지 출력하게 하면, 상세 버전과 간이 버전 어느 쪽에서도 실무에 적용할 수 있는 구체적인 제안(문서화, 개별 보증 제시 등)을 얻기 쉽습니다.

제약 사항

각 조건은 1회만 시도되었고 (Claude 단독, 독립 에이전트 총 2개), 통계적 유의성은 주장할 수 없습니다. 지난 두 번의 검증(09-09・09-14)에서는 순위가 바뀌었으나, 세 번째(09-23)에서는 일부 재현되지 않은 경과가 있었으며, 이번의 변화 역시 단순한 생성의 변동 범위일 가능성을 배제할 수 없습니다. ChatGPT나 Gemini로 같은 실험을 했을 때 동일한 방향의 결과가 나올지는 확인하지 않았습니다. 대화 기록을 공유하지 않는 독립 에이전트에 의한 대체가 Claude 외의 모델에서도 유사하게 기능하는지 여부도 미검증입니다.

Discussion