무엇을 오류로 간주할 것인가? 비전형적 ASR을 위한 이중 참조 벤치마킹
요약
비전형적 음성 인식(ASR) 평가 시 발생하는 '있는 그대로의 전사(verbatim)'와 '의도된 전사(intended)' 간의 혼동 문제를 다룹니다. 말더듬 발화 사례를 통해 11개 모델을 벤치마킹하며, 사용 사례에 맞는 적절한 참조 기준 선택의 중요성을 강조합니다.
핵심 포인트
- 비전형적 발화에서 verbatim과 intended라는 두 가지 유효한 참조 방식 존재
- 단일 정답(ground truth) 사용 시 모델 성능 평가의 왜곡 가능성 제기
- 말더듬 발화 대상 11개 ASR 모델의 벤치마킹 수행
- 사용 사례에 따라 적절한 전사 참조 기준을 선택하는 것이 필수적임
AI 자동 생성 콘텐츠
본 콘텐츠는 arXiv cs.CL (NLP)의 원문을 AI가 자동으로 요약·번역·분석한 것입니다. 원 저작권은 원저작자에게 있으며, 정확한 내용은 반드시 원문을 확인해 주세요.
원문 바로가기