의료 환경에서의 회의 오디오를 구조화된 회의록으로 변환하기
요약
의료 환경 내 다양한 위원회 및 컨퍼런스의 오디오를 구조화된 회의록으로 변환하는 AI 시스템 구축 방안을 다룹니다. 임상 기록에 직접 개입하지 않고 전사 및 요약에 집중하여 규제 준수와 안전성을 확보하는 설계 원칙을 제시합니다.
핵심 포인트
- 임상 기록이 아닌 회의 기록(참석자, 의제, 결정 사항 등) 생성에 집중
- 진단이나 치료 권고를 생성하지 않도록 엄격한 프롬프트 및 스키마 제약 적용
- TGA 등 의료 규제 기관의 가이드라인을 준수하는 디지털 서기 설계
- 모델의 추론을 배제하고 발화된 내용만을 정확히 기록하는 구조화 방식
우리가 대화하는 대부분의 의료 서비스 기관들은 환자에게 다가가기도 전에 회의의 홍수에 빠져 있습니다. 임상 거버넌스 위원회 (Clinical governance committees), 품질 및 안전 (quality and safety), 자격 인증 (credentialling), 감염 관리 (infection control), 약물 및 치료 (drug and therapeutics), 그리고 90분 동안 20명의 환자를 다룰 수 있는 다학제 사례 컨퍼런스 (multidisciplinary case conferences) 등이 있습니다. 회의실의 누군가는 참여를 시도하면서 동시에 노트북으로 노트를 작성하고 있습니다. 회의록은 3주 후에나 전달되거나, 아예 전달되지 않기도 하며, 아무도 기록하지 않은 실행 항목 (action items)들은 조용히 사라집니다.
이곳은 의료 조직에서 AI를 도입하기에 가장 좋은 장소 중 하나입니다. 주로 실패 모드 (failure modes)를 통제할 수 있기 때문입니다. 또한, 이를 단순한 소프트웨어 구매가 아닌 기록 및 동의 (records and consent) 문제로 다루지 않을 경우 팀들이 빠르게 곤경에 처할 수 있는 곳이기도 합니다. 이 포스트는 우리의 Practical AI in Health 시리즈의 일부이며, 우리가 실제로 구축할 버전을 다룹니다. 즉, 임상 기록 (clinical record)에는 전혀 손을 대지 않으면서, 위원회와 사례 컨퍼런스를 위한 전사 (transcription) 및 구조화된 요약 (structured summaries)을 제공하는 방식입니다.
범위: 노트가 아닌 회의록
초기에 선을 긋고 이를 설계에 반영하십시오. 이 시스템은 참석자, 의제 (agenda items), 결정 사항, 실행 항목 및 담당자를 포함하는 회의 기록 (meeting records)을 생성합니다. 임상 노트 (clinical notes)를 작성하지 않으며, 환자의 의료 기록 (medical record)에 접근하지 않고, 조언 (advice)으로 읽힐 수 있는 그 어떤 것도 생성하지 않습니다.
그 문구는 단순히 철학적인 의미가 아니라 규제적인 의미를 담고 있습니다. TGA(호주 의료제품 규제국)의 입장은 대화를 서면 기록으로 전사(transcribe)하고 번역하기 위한 목적으로만 설계된 디지털 서기(digital scribe)는 의료 기기가 아니지만, 예를 들어 임상의가 말하지 않은 진단이나 치료 권고를 생성하는 방식으로 임상 대화를 분석하거나 해석하는 것은 의료 기기에 해당하며, 공급되기 전에 반드시 ARTG(호주 의료기기 등록부)에 등록되어야 한다는 것입니다. 안전 및 품질 위원회(Safety and Quality Commission) 또한 자사의 앰비언트 서기 안전 시나리오에서 동일한 점을 지적하며, 진단을 제안하는 도구는 개발자의 의도가 전혀 아니었더라도 ARTG 요건을 촉발할 수 있다고 명시했습니다.
회의록 작성의 경우, 실질적인 결과는 엄격한 프롬프트(prompt) 및 스키마(schema) 제약으로 나타납니다. 모델은 의장이 선언한 내용을 의장의 표현 그대로 기록합니다. 만약 회의에서 환자를 방사선 종양학과로 회부하기로 결정했다면, 회의록에는 그 내용이 기록됩니다. 모델은 아무도 말하지 않은 추론을 결코 추가하지 않으며, 비어 있는 결정 필드를 그럴듯한 내용으로 결코 채우지 않습니다.
파이프라인 (The pipeline)
이 아키텍처(architecture)는 특이하지 않으며, 바로 그것이 핵심입니다.
- Capture (캡처): 회의실 장치 또는 Teams 녹화본을 사용하며, 회의당 하나의 파일을 호주 지역의 스토리지 계정(storage account)에 업로드합니다.
- Diarisation (화자 분리) 및 transcription (전사): 먼저 화자를 분리한 후, 자동 음성 인식 (ASR)을 수행합니다. 출력물은 화자 라벨이 포함된 타임스탬프 기반의 전사본입니다.
- Speaker mapping (화자 매핑): 의장(chair) 또는 서기(secretary)가 검토 시작 시점에 "화자 3"을 실제 이름으로 한 번 매핑합니다. 회의 전반에 걸쳐 음성 지문(voice fingerprints)을 저장하는 것은 효율적으로 보일 수 있으나, 원치 않는 생체 데이터(biometric data) 문제를 야기합니다.
- Structured extraction (구조화된 추출): 언어 모델(language model)은 자유로운 산문이 아닌 고정된 스키마 (schema)를 채웁니다. 모델이 찾을 수 없는 모든 항목은 null로 유지됩니다.
- Review queue (검토 대기열): 지정된 검토자가 내용이 배포되기 전에 편집 및 승인합니다.
- Publication (발행) 및 retention (보관): 승인된 회의록은 문서 관리 시스템(document management system)으로 전송되며, 원본 오디오는 삭제 일정(deletion schedule)에 따라 처리됩니다.
스키마 (schema)는 출력을 단순히 읽을 수 있는 수준을 넘어 유용하게 만드는 핵심 요소입니다:
{
"meeting": "Cancer MDT - Colorectal",
"date": "2026-07-14",
...
이러한 구조는 Cancer Australia가 다학제 팀(multidisciplinary teams)에 기록하도록 요구하는 사항, 즉 참석자, 회의 빈도 및 결정 사항과 결과 및 권고 사항을 환자와 그들의 GP(일반의)에게 전달하기 위한 정의된 프로세스를 반영합니다. 데이터가 구조화되면 인증 증거(accreditation evidence)와 미결 작업 보고서(overdue action reports)를 별도의 노력 없이 얻을 수 있으며, 이는 대개 프로젝트를 내부적으로 설득(sell)할 때 가장 강력한 요소가 됩니다.
Consent (동의)는 주(state)마다 다른 문제입니다
대화 녹음에는 단일한 국가적 규칙이 존재하지 않습니다. NSW(뉴사우스웨일스)의 경우, Surveillance Devices Act 2007 제7조에 따라 모든 주요 당사자의 동의 없이 사적인 대화를 녹음하는 것을 범죄로 규정하고 있으며, WA(서호주), SA(남호주), Tasmania(태즈메이니아) 및 ACT(호주 수도 특별구)도 유사한 방식을 취하고 있습니다. Victoria(빅토리아), Queensland(퀸즐랜드) 및 NT(노던 테리토리)는 참여자가 녹음하는 것을 허용하지만, 동의 없이 녹음본을 전달하는 행위는 여전히 처벌 대상입니다. 만약 둘 이상의 주에서 서비스를 운영한다면, 가장 엄격한 규칙에 맞춰 시스템을 구축하고 모든 회의 시작 시 녹음 사실을 알리는 스크립트를 사용하며, 해당 내용을 회의록 자체에 기록하십시오.
그 위에 개인정보 보호(Privacy) 문제가 자리 잡고 있습니다. 상용 AI 제품에 대한 OAIC(호주 정보위원회)의 지침은 노트 테이킹(note taking) 및 전사(transcription) 어시스턴트를 구체적으로 명시하고 있습니다. 또한 개인정보 보호법(Privacy Act)이 입력값(inputs)과 출력값(outputs) 모두에 적용됨을 확인하며, 도입 기관에 개인정보 영향 평가(privacy impact assessment)를 실시하고 벤더(vendor)의 약관이 실제로 보유한 동의 사항과 충돌하지 않는지 확인할 것을 권고합니다. Safer Care Victoria의 ambient AI scribes advisory는 한 걸음 더 나아가, 보건 서비스 기관이 도입된 특정 제품에 맞춰 개인정보 및 보건 정보 관리 정책을 업데이트할 것을 요구합니다. 이는 비즈니스 케이스(business case)의 한 단락이 아니라, 마감 기한이 정해진 정책적 업무입니다.
정확도(Accuracy): 적절한 수치에 대비한 계획
벤더(Vendors)들은 깨끗한 단일 화자 오디오(single speaker audio)를 기준으로 단어 오류율(Word Error Rate, WER)을 인용합니다. MLCommons의 2025 MLPerf 추론 벤치마크(inference benchmark)에서는 LibriSpeech에서 97.93%의 참조 단어 정확도(reference word accuracy)를 기록한 Whisper large-v3를 사용했습니다. 하지만 여러 사람이 동시에 말하는 소리(crosstalk), 스피커폰, 다양한 억양, 그리고 누군가 뮤즐리 바를 뜯는 소리가 섞인 회의실은 전혀 다른 문제입니다. 이 경우 8~20%의 WER이 정직한 계획 범위입니다.
단순한 오류율(Raw error rate) 자체가 위험한 부분은 아닙니다. Koenecke와 동료들의 연구에 따르면, Whisper 전사(transcriptions)의 약 1%는 오디오에 전혀 존재하지 않는 완전히 환각(hallucinated)된 문구를 포함하고 있었으며, 그중 38%는 조작된 연관성이나 암시된 권위와 같은 명백한 위해(harms)를 포함하고 있었습니다. 요약(Summarisation) 단계는 그 자체로 또 다른 층위의 문제를 추가합니다. 100명 이상의 임상의와 21개 전문 분야를 대상으로 진행된 Gold Coast Hospital and Health Service의 주변 환경 기록 기술(ambient scribe technology) 시험에서, [출력물의 평균 58%만이 수정 없이 수용되었습니다], 환각 및 잘못된 출력에 대한 일부 증거도 발견되었습니다. 열 명 중 네 명은 사람이 무언가를 수정해야 했습니다.
시스템을 실제 운영(go live)하기 전에 위원회 의장들에게 이 수치를 말씀하십시오. 타이핑 시간을 60% 절약해주지만 100% 검토가 필요한 도구는 여전히 가치가 있지만, 이는 사람들이 검토할 것을 예상할 때만 해당됩니다.
검토 단계가 곧 제품이다
위의 모든 사항은 기반 시설(plumbing)에 불과합니다. 실제로 중요한 통제 장치는 회의록이 배포되기 전에 각 회의록 세트를 검토, 편집 및 승인하는 지정된 담당자입니다. 이는 RACGP가 일반 진료 분야의 AI 기록가(AI scribes in general practice)를 위해 설정한 책임 모델을 반영합니다. 즉, 명시적 동의, 도입 전 정책 수립, 암호화·저장·파기에 대한 벤더의 보장, 그리고 모든 출력물에 대한 인간의 최종 승인(human sign off)이 필요합니다.
검토자가 이를 건너뛸 수 없도록 구축하십시오. 회의록은 승인될 때까지 초안(draft) 상태로 유지되며 내보내기(export)할 수 없습니다. 검토자는 추출된 각 결정 사항 옆에서 전사(transcript) 세그먼트를 확인할 수 있으며, 타임스탬프(timestamp)가 제공되어 오디오의 해당 시점으로 바로 이동할 수 있습니다. 신뢰도가 낮은 필드는 주의를 요하는 플래그(flag)가 지정됩니다. 승인된 문서에는 AI가 생성 과정에 사용되었음을 기록하는 라벨이 붙습니다. 이는 위원회(Commission)가 요구하는 사항이며, 회의록 세트가 검시(coronial) 또는 민원 절차에서 제출될 경우 매우 중요합니다. 특히 사례 회의(Case conference) 회의록은 이 도구가 행정용임에도 불구하고 임상적 무게(clinical weight)를 가지므로, 서기(secretary)나 소프트웨어가 아닌 의장(chair)이 서명합니다.
보존, 비용 및 지루한 부분들
보존(Retention)은 단 하나의 숫자로 결정되지 않습니다. NSW(뉴사우스웨일스)에서 위원회 기록은 GA28의 적용을 받으며, 보존 기간은 위원회 유형에 따라 다릅니다. 공식 이사회 및 소위원회(sub-committee) 기록은 다르게 취급되며, 서기가 마스터 세트(master set)를 보유하고 다른 구성원은 복사본만 보유합니다. 공공 보건 기관은 또한 GDA21 및 해당 기관의 환자 기록 권한(patient records authority)을 확인해야 합니다. 오디오에 대한 결정은 더 쉽습니다. 이를 작업 자료(working material)로 취급하여, 승인 후 짧은 고정 일정에 따라 삭제하고 이를 동의 스크립트(consent script)에 명시하십시오.
비용 측면에서 전사(transcription)를 위한 컴퓨팅 비용은 미미한 부분입니다. 실제 예산은 검토자의 시간과 정책 수립 작업이며, 여기에 도구를 사용할 수 없는 날 위원회가 취해야 할 조치를 다루는 AIDH 정보 시트에서 요구하는 비상 계획(contingency plan)이 포함됩니다. 또한 AIDH는 범용 제품보다는 호주 데이터를 기반으로 학습된 의료 특화 도구를 선택할 것을 권고합니다. 이는 SA Health가 개인정보 보호 우려로 인해 공공 병원에서 오픈 소스 AI 서기(AI scribes) 사용을 금지했던 시기에 발표된 권고입니다.
이미 템플릿을 보유하고 있으며 타이핑 작업에 지친 서기(secretary)가 있는 위원회 하나로 시작하십시오. 현재 프로세스와 병행하여 6회의 회의 동안 실행하며, 각 회의록 세트의 편집에 시간이 얼마나 소요되는지 측정하십시오. 그 후에야 사례 회의(case conferences)에 적용할지 여부를 결정하십시오.
PicNet은 호주 기업들을 위한 프로덕션 AI (production AI) 시스템을 구축합니다. 첫 번째 프로젝트가 어떤 모습일 수 있는지 저희에게 문의하십시오.
원문은 picnet.com.au에 게시되었습니다.
AI 자동 생성 콘텐츠
본 콘텐츠는 Dev.to AI tag의 원문을 AI가 자동으로 요약·번역·분석한 것입니다. 원 저작권은 원저작자에게 있으며, 정확한 내용은 반드시 원문을 확인해 주세요.
원문 바로가기