AppTek 콜센터 대화: 영어 ASR 를 위한 다중 방언 장문 벤치마크

요약

본 연구는 대화형 AI 응용 프로그램의 영어 ASR 시스템 평가에 필요한 자발적이고 역할극 기반의 다중 방언 장문 코퍼스인 'AppTek 콜센터 대화' 데이터셋을 제시합니다. 이 데이터셋은 14개 영어 방언과 16가지 서비스 지향 시나리오를 포함하며, 기존 공개 코퍼스와 중복될 위험이 적습니다. 벤치마크 결과는 ASR 시스템의 성능이 특정 방언이나 세그멘테이션 방법에 따라 크게 달라지며, 일반적인 미국 영어에서의 좋은 성능이 다른 방언에 반드시 일반화되지 않음을 보여줍니다.

핵심 포인트

• 대화형 AI를 위한 영어 ASR 평가는 짧은 세그먼트나 준비된 발화 위주로 이루어져 있어 어려움이 있습니다.
• 제시된 'AppTek 콜센터 대화' 코퍼스는 14개 방언과 16가지 서비스 시나리오를 포괄하는 자발적이고 역할극 기반의 실제 대화 데이터입니다.
• 데이터셋은 평가 목적으로 의뢰되어 기존 대규모 사전 학습 코퍼스와 중복될 위험이 낮습니다.
• ASR 시스템의 성능은 방언과 세그멘테이션 방식에 따라 큰 변동성을 보이므로, 일반화된 벤치마크가 필요합니다.