Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
arXiv cs.CL (NLP) 1803건필터 해제
arXiv논문
합의(Agreement) 및 레이블 얽힘 해제(Label Disentanglement)를 통한 해석 가능한 판별적 텍스트 표현
본 논문은 해석 가능한 텍스트 표현을 위해 '합의(Agreement)'와 '레이블 얽힘 해제(Label Disentanglement)'라는 두 가지 운영 기준을 제안합니다. 제안된 LLM 보조 특징 발견(LFD) 방법론은 개념적 명확성을 확보하면서도 특징이 단순히 타겟 레이블을 재진술하는 문제를 방지하여, 기존 방식보다 더 신뢰할 수 있고 감사 가능한 텍스트 분류 특징을 생성합니다.
5월 21일0
arXiv논문
SCRIBE: Indic ASR를 위한 진단적 평가 및 풍부한 전사 모델
SCRIBE는 기존의 단어 오류율(WER)이 가진 한계를 극복하기 위해 오류 유형을 어휘, 문장 부호, 숫자, 도메인 엔티티 등으로 세분화하여 분석하는 진단 프레임워크입니다. 특히 교착어 구조에서 발생하는 연음 문제를 해결하기 위해 도메인 어휘 주입을 통한 정렬 방식을 제안합니다. 연구팀은 SCRIBE 프레임워크와 함께 힌디어, 말라얄람어, 칸나다어를 지원하는 오픈 웨이트 풍부한 전사 모델을 공개했습니다.
5월 21일0
arXiv논문
인컨텍스트 러닝 (In-Context Learning)에서 태스크 벡터 (Task Vectors) 설계를 위한 기준으로서의 분포 정렬
본 논문은 In-Context Learning(ICL)의 높은 추론 비용 문제를 해결하기 위해 예시를 은닉 상태로 압축하는 태스크 벡터(Task Vectors) 연구를 다룹니다. 기존의 간접적인 평가 방식 대신, 태스크 벡터의 예측 분포를 ICL의 분포와 정렬하는 $d_{\text{NTP}}$ 지표를 도입하여 성능을 정량화했습니다. 이를 바탕으로 개발된 Linear Task Vector(LTV)는 기존 방식 대비 정확도를 9.2% 향상시키고 추론 지연 시간을 단축하며, 모델 규모 간 전이 가능성까지 입증했습니다.
5월 21일0
arXiv논문
MTR-Suite: 대화형 검색 벤치마크의 평가 및 합성을 위한 프레임워크
MTR-Suite는 대화형 검색(Conversational Retrieval) 시스템의 평가와 데이터 합성을 위한 통합 프레임워크입니다. 기존 벤치마크의 높은 비용과 경직된 자동화 방식의 한계를 극복하기 위해 LLM 기반 감사 도구, 멀티 에이전트 합성 시스템, 그리고 실제 서비스 환경을 모방한 벤치마크를 제공합니다.
5월 21일0
arXiv논문
분포 인식 보상: LLM 회귀를 위한 예측 분포 기반 강화학습 (Distribution-Aware Reward: Reinforcement
본 논문은 LLM의 회귀 작업에서 단순 점 추정치를 넘어 보정된 예측 분포를 생성할 수 있도록 하는 '분포 인식 보상(Distribution-Aware Reward)' 방식을 제안합니다. 온폴리시 강화학습을 통해 모델이 생성한 샘플들을 경험적 예측 분포로 취급하고, CRPS를 활용하여 분포의 품질에 따라 보상을 할당함으로써 예측의 정확도와 불확실성 추정 능력을 동시에 향상시킵니다.
5월 21일0
arXiv논문
Draw2Think: 제약 조건 엔진 (Constraint Engine) 상호작용을 통한 기하학적 추론 활용
Draw2Think는 시각-언어 모델의 기하학적 추론 능력을 향상시키기 위해 GeoGebra 제약 조건 엔진과 에이전트적으로 상호작용하는 새로운 프레임워크를 제안합니다. '제안-그리기-검증(Propose-Draw-Verify)' 루프를 통해 모델의 가설을 실행 가능한 캔버스에 구현하고, 대수적 정의를 바탕으로 기하학적 관계를 강제하여 추론의 정확성과 검증 가능성을 확보합니다.
5월 21일0
arXiv논문
카운터 튜링 테스트(Counter Turing Test)의 결과: AI 생성 텍스트 탐지
본 논문은 AI 생성 텍스트를 탐지하는 기술을 분석하고 '카운터 튜링 테스트(CT2)' 공유 과제를 통해 그 성능을 평가합니다. 이진 분류 과제에서는 높은 성능을 보였으나, 특정 모델을 식별하는 모델 귀속 과제에서는 상대적으로 낮은 성능을 기록하며 LLM 간의 미세한 차이를 구분하는 데 어려움이 있음을 보여주었습니다.
5월 21일0
arXiv논문
개입의 환상: LLM 시뮬레이션 실험은 관찰 연구이다
LLM을 활용한 인간 행동 시뮬레이션 시, 개입(intervention)이 합성 사용자의 잠재적 속성을 변화시켜 '사용자 드리프트(user drift)'를 유발할 수 있다는 문제를 지적합니다. 이러한 드리프트는 효과 추정치를 왜곡하는 선택 편향이나 교란을 일으킬 수 있으며, 이를 진단하기 위해 부정 대조 결과(negative control outcomes)를 활용한 분포 변화 식별을 제안합니다. 또한, 페르소나 명세를 조정하여 이러한 편향을 완화할 수 있는 방법론을 제시합니다.
5월 21일0
arXiv논문
아랍어 NLP를 밑바닥부터 구축하기: 20년간의 교훈, 실패, 그리고 미결 과제
지난 20년간 아랍어 NLP 인프라를 구축하며 겪은 기술적, 사회적 경험과 교훈을 정리한 논문입니다. 데이터 구축의 사회적 성격, 커뮤니티의 중요성, 그리고 언어 자원에서 계산 사회 과학으로 전환 시 발생하는 도전 과제들을 다룹니다. 특히 표준 아랍어와 방언 간의 격차 및 소외된 언어를 위한 NLP 개발 시 직면하는 사회적·제도적 문제들을 심도 있게 분석합니다.
5월 21일0
arXiv논문
대부분의 Transformer 수정 사항은 1-3B 규모에서 전이되지 않는다: Narang et al. (2021)에 대한 2020-2026
Narang et al. (2021)의 연구를 바탕으로 1-3B 규모의 모델에서 Transformer 아키텍처 수정 사항의 전이 가능성을 재검토했습니다. 실험 결과, 20개의 수정 사항 중 대부분이 다운스트림 성능으로 전이되지 않음을 확인했으며, 아키텍처 비교 시 노이즈 플로어 보고와 다운스트림 평가가 필수적임을 강조합니다.
5월 21일0
arXiv논문
텍스트 데이터를 통한 사회경제적 기후 영향 평가
NLP와 LLM의 발전으로 뉴스 및 소셜 미디어 등 텍스트 데이터를 활용한 기후 위험의 사회경제적 영향 평가가 가능해졌으나, 방법론적 일관성이 부족한 상황입니다. 본 연구는 데이터 정의, 편향 처리, 모델링 전략 등 '데이터로서의 텍스트' 방법론에서 발생하는 주요 과제를 분석하고 이를 해결하기 위한 가이드라인을 제안합니다. 이를 통해 재난 위험 관리 및 기여도 연구를 위한 보다 견고하고 투명한 데이터셋 구축을 지원하고자 합니다.
5월 21일0
arXiv논문
PulseCol: 확산 언어 모델 (Diffusion Language Models) 가속을 위한 주기적 갱신형 컬럼 희소 어텐션
PulseCol은 확산 대규모 언어 모델(dLLM)의 추론 비용을 절감하기 위해 제안된 주기적 갱신형 컬럼 희소 어텐션 기술입니다. 기존의 블록 단위 희소화 방식 대신 더 세밀한 컬럼 수준의 희소 구조를 사용하여, 모델의 품질을 유지하면서도 계산 효율성을 극대화합니다. 초기 단계에서 식별된 희소 패턴을 재사용하고 필요한 시점에만 갱신함으로써 FlashAttention 대비 최대 1.95배의 속도 향상을 달성했습니다.
5월 21일0
arXiv논문
LLM 어노테이션을 위한 어노테이션 가이드라인의 정제 및 재사용
LLM의 제로샷 어노테이션 성능을 높이기 위해 어노테이션 가이드라인을 체계적으로 재사용하고 정제하는 반복적 중재 프레임워크를 제안합니다. GPT, Gemini, DeepSeek 모델을 활용하여 생물 의학 NER 작업을 테스트한 결과, 가이드라인 통합과 추론 최적화 모델의 효능이 입증되었습니다.
5월 21일0
arXiv논문
소비자용 하드웨어에서의 GraphRAG: 의료 EHR 스키마 검색을 위한 로컬 LLM 벤치마킹
본 연구는 개인정보 보호가 중요한 의료 EHR 데이터 환경에서 소비자용 GPU를 활용한 로컬 LLM 기반 GraphRAG의 성능을 벤치마킹합니다. Llama 3.1, Mistral, Qwen 2.5, Phi-4-mini 모델을 대상으로 인덱싱 효율성, 지연 시간, 답변 품질 등을 평가하여 모델 크기와 검색 모드에 따른 성능 차이를 분석했습니다.
5월 21일0
arXiv논문
MemGym: LLM 에이전트를 위한 장기적 관점의 메모리 환경
MemGym은 LLM 에이전트가 장기적인 과업을 수행할 때 필수적인 동적 메모리 형성 능력을 평가하기 위해 설계된 새로운 벤치마크입니다. 기존 벤치마크가 개인화된 정보 유지에 치중했던 것과 달리, MemGym은 도구 사용, 심층 연구, 코딩, 컴퓨터 사용 등 실제적인 에이전트 환경을 포괄합니다. 특히 메모리 성능을 추론, 검색, 도구 사용 능력과 분리하여 측정함으로써 메모리 전략의 순수 효과를 정밀하게 평가할 수 있습니다.
5월 21일0
arXiv논문
Terminal-World: 에이전트 기술을 통한 터미널 에이전트 환경의 확장
Terminal-World는 고품질 학습 데이터 부족 문제를 해결하기 위해 에이전트 기술을 활용하여 터미널 에이전트 환경을 자동 생성하는 파이프라인입니다. 이 시스템은 작업 지침, 환경, 교사 궤적을 동시에 도출하며, 기술 팀과 기술 그래프를 통해 다중 역할 및 교차 도메인 작업을 합성합니다. 실험 결과, Terminal-World-32B 모델은 매우 적은 학습 데이터만으로도 기존 벤치마크에서 뛰어난 성능을 기록하며 베이스라인을 압도했습니다.
5월 21일0
arXiv논문
조음 음소 인식 (Articulatory Phoneme Recognition)을 이용한 음성 조음 합성 (Speech Articulation
본 논문은 조음 음성 합성의 품질을 평가하기 위해 음소 인식(Phoneme Recognition)을 대리 지표로 사용하는 새로운 방법론을 제안합니다. 기존의 점별 거리 지표가 포착하지 못하는 미세한 조음 위치의 차이를 음소 인식을 통해 더 정확하게 평가할 수 있음을 RT-MRI 데이터셋 실험을 통해 입증했습니다.
5월 21일0
arXiv논문
Strategy-Induct: 지시문 생성을 위한 태스크 수준의 전략 유도 (Strategy Induction)
Strategy-Induct는 라벨링된 정답 없이 소수의 질문 예시만으로 효과적인 태스크 수준의 지시문을 생성하는 새로운 프레임워크입니다. 모델이 질문에 대한 명시적인 추론 전략을 먼저 생성하게 함으로써, 기존의 입력-출력 쌍 기반 방식이 가진 비용 문제를 해결하고 성능을 극대화합니다. 실험 결과, 질문만 제공되는 환경에서 기존 최첨단 방식보다 뛰어난 성능을 보였으며 대규모 추론 모델과의 결합 시 시너지가 확인되었습니다.
5월 21일0
arXiv논문
말하면서 생각하기: 실시간 음성 생성을 위한 제어된 인터리브 추론 방법론
InterRS는 AI가 심층적인 추론을 수행하는 동안 끊김 없이 유창한 음성을 유지할 수 있도록 하는 '말하면서 생각하기(thinking-while-speaking)' 방법론을 제안합니다. 이 방식은 추론 단계와 음성 생성을 정밀하게 정렬하여, 자연스러운 대화 흐름을 유지하면서도 수학 및 논리적 성능을 향상시킵니다. SFT와 두 가지 새로운 보상 함수를 활용한 강화학습을 통해 타이밍과 언어적 품질을 동시에 최적화합니다.
5월 21일0
arXiv논문
Memory Grafting: 오프라인 조건부 메모리를 통한 언어 모델 사전 학습 확장
Memory Grafting은 기존의 비용이 많이 드는 메모리 학습 방식 대신, 동결된 이식 모델의 은닉 상태를 조건부 n-gram 메모리로 활용하여 언어 모델의 용량을 확장하는 새로운 방법론을 제안합니다. 이 방식은 이식 모델을 오프라인에서만 실행하여 메모리 값을 저장하므로 학습 및 추론 오버헤드가 매우 적으며, 검색 복잡도 또한 $O(1)$로 효율적입니다. 실험 결과, Memory Grafting은 MoE 및 기존 Engram 방식보다 뛰어난 성능 향상을 보이며 사전 학습된 모델이 외부 메모리의 생성기 역할을 할 수 있음을 입증했습니다.
5월 21일0