전이중(Full-duplex) 음성 대화 시스템은 발언권을 양보해야 하는 끼어들기(interruptions)와 계속 말하는 것을 허용하는 백채널(backchannels)을 구별할 수 있어야 합니다. 기존의 벤치마크들은 일반적으로 이러한 사건들을 독립적으로 평가하기 때문에, 문맥 민감적인 결정보다는 고정된 행동 선호도를 보상할 수 있습니다. 우리는 중국어 전이중 발언권 교대를 위한 쌍을 이루는 진단 벤치마크인 ECHO를 소개합니다. ECHO는 동일한 오버랩(overlap) 스크립트를 가진 예시들을, 각각 '양보(Yield)'가 필요한 선행 다중턴 대화 문맥과 '유지(Keep)'가 필요한 선행 다중턴 대화 문맥을 짝지어 구성했습니다. 또한 불필요한 양보를 진단하기 위한 오프-톡(off-talk) 예시도 포함하고 있습니다. 우리는 두 쌍의 멤버 모두에 대한 정확한 결정이 필요하며, 일정한 행동 정책에는 점수를 부여하지 않는 '쌍 정확도(pair accuracy)'를 도입했습니다. 여러 전이중 시스템에 대한 실험 결과, 대부분은 extsc{Yield} 쪽으로 뚜렷한 편향을 보이며, 백채널보다 끼어들기에서 훨씬 더 나은 성능을 보이는 반면, 다른 하나의 시스템은 비교적 균형 잡힌 모습을 유지했습니다. 이러한 발견들은 끼어들기만을 평가하는 것이 실제 발언권 교대 신뢰도를 과대평가할 수 있음을 보여줍니다. ECHO와 그 메타데이터는 공개적으로 배포될 예정입니다.