Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
arXiv cs.CL (NLP) 1795건필터 해제
arXiv논문
거의 지능적인 혁명: 숙의(Deliberation)의 규모 확장 및 AI를 통한 인간 역량 강화 방안
LLM이 민주적 숙의 과정에 미치는 영향과 이를 통해 숙의의 규모를 확장하고 민주화하는 방안을 탐구합니다. 언어적 편향과 불평등을 완화하며 포용성을 높이기 위한 AI의 역할과 윤리적 안전장치 구축의 필요성을 다룹니다.
6월 19일0
arXiv논문
다중 에이전트 거래적 기억 (Multi-Agent Transactive Memory)
다양한 LLM 에이전트들이 생성한 결과물(궤적)을 공유하고 재사용할 수 있는 MATM 프레임워크를 제안합니다. 에이전트 간의 지식 공유를 통해 새로운 에이전트가 기존의 해결책을 반복 학습하지 않고도 작업 성능을 높일 수 있습니다.
6월 19일0
arXiv논문
이산 음성 토큰의 놀람도(Surprisal)를 이용한 경량 발음 평가
원어민 음성 데이터만으로 학습 가능한 비지도 방식의 경량 발음 평가 프레임워크를 제안합니다. 이산 음성 토큰의 놀람도(Surprisal)와 정렬 특징을 결합하여 지도 학습 없이도 높은 성능의 발음 평가를 구현했습니다.
6월 19일0
arXiv논문
GEMS: 기하학적 제약이 LLM의 다중 의미 중첩을 가능하게 함
LLM의 추론 시점에 은닉 상태를 수정하는 Activation Steering 기술에서 발생하는 모델 붕괴 문제를 해결하기 위한 GEMS 방법론을 제안합니다. 분포 편차와 방향 간섭이라는 두 가지 원인을 기하학적 제약 조건으로 해결하여 다중 의미 중첩을 가능하게 합니다.
6월 19일0
arXiv논문
음향 및 운율 섭동을 통한 음성 품질 평가에서의 인간-모델 불일치 조사
TTS 품질 평가 모델인 MOS 예측 모델이 인간의 지각과 어떻게 다른지 조사한 연구입니다. 모델은 음향적 저하는 잘 포착하지만, 운율적 오류와 화자 특성 변화에는 인간보다 둔감한 한계를 보입니다.
6월 19일0
arXiv논문
대조 학습 (Contrastive Learning)을 결합한 오토인코더 (Autoencoder) 기반의 세그먼트 수준 중국어 음성 인지 기능
대조 학습과 오토인코더를 결합하여 제한된 라벨링 데이터 환경에서도 견고한 음성 기반 인지 기능 저하 탐지 프레임워크를 제안합니다. 중국어 음성 데이터셋 실험을 통해 세그먼트 수준의 표현 학습이 임상적 분류 성능을 효과적으로 향상함을 입증했습니다.
6월 19일0
arXiv논문
Text-to-JSON 학습을 위한 소스 기반 데이터 생성
비정형 문서에서 JSON 구조를 추출하기 위한 새로운 데이터 생성 파이프라인인 STAGE를 제안합니다. 스프레드시트를 기반으로 정답 값을 검증하여 신뢰할 수 있는 학습 데이터를 합성하며, 기존 방식 대비 모델의 추출 성능을 대폭 향상시켰습니다.
6월 19일0
arXiv논문
HydraHead: 헤드 수준의 기능적 이질성으로부터의 특화된 어텐션 하이브리드화
HydraHead는 레이어 단위가 아닌 헤드 단위로 Full Attention과 Linear Attention을 결합하는 새로운 하이브리드 어텐션 아키텍처를 제안합니다. 해석 가능성 분석을 통해 검색에 중요한 헤드를 식별하고, 스케일 정규화 융합 모듈을 통해 효율적인 성능 향상을 달성합니다.
6월 19일0
arXiv논문
스트리밍 도구 사용은 언제 도움이 되는가? 스트리밍 검색 증강 생성 (Streaming RAG)에서의 도구 의도 안정화 특성 분석
사용자의 입력이 완료되기 전 도구 쿼리를 미리 발행하여 지연 시간을 줄이는 Streaming RAG의 '도구 의도 안정화' 특성을 분석한 연구입니다. CRAG 벤치마크를 통해 도구 지연 시간과 입력 속도에 따른 지연 시간 은닉 가능성을 모델 불가지론적 상한으로 도출했습니다.
6월 19일0
arXiv논문
검증 가능한 지시 이행 수정(Instruction-Following Revision)에서 자기 선호(Self-Preference)는 약하거나
LLM이 자신의 생성물을 검토할 때 발생하는 자기 선호 편향(self-preference bias)을 IFEval 환경에서 검증했습니다. 연구 결과, 모델은 결정론적 검증기에 의해 확인된 양질의 수정안을 거부하지 않으며, 자기 선호 편향이 실질적으로 존재하지 않음을 발견했습니다.
6월 19일0
arXiv논문
ReNikud: 오디오 지도 학습 기반의 히브리어 자소-음소 변환 (Grapheme-to-Phoneme Conversion)
ReNikud는 모음 표기가 생략되는 히브리어의 특성을 극복하기 위해 오디오 지도 학습을 활용한 새로운 G2P 방법론을 제안합니다. ASR 의사 레이블링과 문자 수준 정렬을 통해 자연스러운 구어 발음을 반영하며, 기존 SOTA 모델보다 뛰어난 성능을 입증했습니다.
6월 19일0
arXiv논문
NAMESAKES: 텍스트-이미지(Text-to-Image) 모델의 정체성 암기(Identity Memorization) 조사
텍스트-이미지 모델이 특정 인물의 정체성을 암기하여 생성하는지 여부를 판별하는 블랙박스 행동 프로브 연구를 소개합니다. 참조 사진이나 학습 데이터 없이도 암기 여부를 구분할 수 있는 NAMESAKES 데이터셋을 제안합니다.
6월 19일0
arXiv논문
음높이 표기(Pitch Spelling) 재즈 리드 시트, 솔로 채보, 클래식 피아노 및 단선율 악보
MIDI 데이터를 기반으로 음높이 표기(Pitch Spelling)와 조성을 추정하는 새로운 알고리즘을 제안합니다. 최단 경로 탐색과 최적화 과정을 통해 임시표를 최소화하고 정확한 조표 및 음계를 도출합니다.
6월 19일0
arXiv논문
CzechDocs: 체코 내 소수 언어를 위한 서식 지정 문서의 다방향 병렬 데이터셋
체코어 및 소수 언어의 서식(HTML, DOCX, PDF)을 보존하는 다방향 병렬 데이터셋인 CzechDocs를 소개합니다. 기계 번역 시스템이 문서의 레이아웃을 유지하며 번역하는 능력을 평가하고 연구할 수 있도록 설계되었습니다.
6월 19일0
arXiv논문
언어 모델 제품군 전반에 걸친 창발적 정렬 불량(Emergent Misalignment) 탐지 및 완화를 위한 실행 가능한 활성화 방향
언어 모델 미세 조정 시 발생하는 창발적 정렬 불량을 탐지하고 완화하기 위한 활성화 방향 연구를 소개합니다. 특정 활성화 방향을 제어하는 인과적 스티어링을 통해 코드 유출을 효과적으로 감소시킬 수 있음을 입증했습니다.
6월 19일0
arXiv논문
PsyScore: 특성 적응형 에세이 채점 및 ZPD 스캐폴딩 피드백을 위한 심리측정 인지 프레임워크
PsyScore는 자동 에세이 채점과 교육적 피드백을 통합한 심리측정 인지 프레임워크입니다. 신경망 IRT 채점기와 학습자의 숙련도에 맞춘 ZPD 스캐폴딩 피드백 생성기를 통해 정밀한 평가와 맞춤형 교육을 동시에 제공합니다.
6월 19일0
arXiv논문
CATCH-ME if you RAG: 혐오 및 오정보 교환에 대응하는 문맥 주석이 달린 다회차 대응 발언(Counterspeech) 데이터셋
혐오 표현과 오정보가 중첩된 상황에 대응하기 위한 다국어 다회차 대화 데이터셋인 CATCH-ME를 소개합니다. 외부 지식에 기반한 사실적 근거를 포함하여 RAG 시스템에 최적화된 구조를 갖추고 있습니다.
6월 19일0
arXiv논문
RECOM: 개방형 Reddit 질의응답을 위한 자동 평가 지표의 타당성 판별 트레이드오프 (Validity Discrimination
LLM 생성 텍스트 평가 시 발생하는 타당성(validity)과 판별력(discrimination) 사이의 트레이드오프를 분석한 연구입니다. Reddit 데이터를 활용한 새로운 평가 데이터셋 RECOM을 제안하며, 기존 지표들의 한계를 지적합니다.
6월 18일0
arXiv논문
신탁(Oracle)이 아닌 인터페이스로서의 언어 모델: 소아 충수염을 위한 하이브리드 LLM-ML 시스템
LLM의 환각 현상과 구조화된 ML 모델의 데이터 입력 한계를 극복하기 위해, LLM을 인터페이스로 활용하는 하이브리드 시스템 ClaMPAPP을 제안합니다. LLM이 비정형 텍스트에서 임상 특징을 추출하면 XGBoost가 진단을 수행하여 높은 정확도와 안정성을 확보했습니다.
6월 18일0
arXiv논문
STARE: 정책 엔트로피 안정성을 위한 놀람도 기반 토큰 수준 이득 재가중치 부여
GRPO 강화학습 과정에서 발생하는 정책 엔트로피 붕괴 문제를 해결하기 위해 STARE 알고리즘을 제안합니다. 놀람도(Surprisal) 기반의 토큰 수준 이득 재가중치를 통해 안정적인 탐색과 활용의 균형을 유지하며 모델의 추론 성능을 향상시킵니다.
6월 18일0