Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
arXiv cs.CL (NLP) 1801건필터 해제
arXiv논문
MIC: 등방성 부분 공간 정렬을 통한 적응형 표현의 정보 용량 극대화
MIC는 멀티 스케일 표현 학습에서 발생하는 차원 중복과 스펙트럼 붕괴 문제를 해결하기 위한 새로운 프레임워크입니다. 등방성 부분 공간 정렬을 통해 정보 용량을 극대화하며, 고압축 시나리오에서 탁월한 성능을 보여줍니다.
5월 29일0
arXiv논문
대규모 언어 모델(LLM)의 잠재적 성능 프로파일링
기존 벤치마크 중심 평가의 한계를 극복하기 위해 모델의 내부 활성화와 출력 분포를 분석하는 '잠재적 성능 프로파일링(LPP)' 프레임워크를 제안합니다. LPP는 모델의 잠재 표현과 역학을 통해 표면적인 정확도를 넘어 모델의 내재적 특성과 취약성을 진단합니다.
5월 29일0
arXiv논문
정렬을 유지하면서 다양성 회복하기: 사후 학습된 LLM을 위한 DPO 레시피
사후 학습 과정에서 LLM의 출력 다양성이 감소하는 문제를 해결하기 위한 새로운 DPO 데이터 구축 파이프라인인 REDIPO를 제안합니다. REDIPO는 정렬 성능을 유지하면서도 베이스 모델의 다양한 응답을 재구성하여 모델의 응답 다양성을 효과적으로 회복합니다.
5월 29일0
arXiv논문
공간을 확보하라! 인코더 내 위치 및 의미 표현의 명시적 분리
Transformer 인코더 내에서 위치 정보와 의미 정보가 혼재되는 문제를 해결하기 위해 이를 세 가지 스트림으로 명시적으로 분리하는 연구를 제안합니다. 이 디커플링 방식을 통해 위치 신호와 의미 신호의 서브스페이스를 분리함으로써 언어적 표현력을 향상시켰습니다.
5월 29일0
arXiv논문
대규모 오디오-언어 모델(LALM)에서의 오디오 탈옥: 분류 체계, 공격-방어 분석 및 비용 인지 평가
대규모 오디오-언어 모델(LALM)의 탈옥 위험을 체계적으로 분석한 연구입니다. 의미론적, 음향적, 신호적 공격 유형을 분류하고, 10개의 오픈 소스 모델을 대상으로 공격 성공률과 방어 성능을 실증적으로 평가했습니다.
5월 29일0
arXiv논문
토큰 인플레이션: 부정직한 제공자가 대규모 언어 모델 (LLM) 사용료를 과다 청구하는 방법
LLM의 토큰당 과금 방식에서 제공자가 토큰 수를 조작하여 과다 청구할 수 있는 취약성을 분석합니다. 현재의 감사 방식은 제공자가 제공하는 데이터에 의존하는 '신뢰의 역설' 문제를 안고 있으며, 이를 해결하기 위해 암호학적 증명 등의 새로운 검증 체계가 필요함을 제안합니다.
5월 29일0
arXiv논문
기계에게 가치관 가르치기: LLM에서의 인간과 유사한 행동 시뮬레이션
본 연구는 심리학적 가치 이론을 활용하여 LLM이 인간과 유사한 가치 구조를 준수하며 행동할 수 있는지 평가합니다. 대규모 실험 결과, 가치 프롬프트가 적용된 LLM은 인간의 가치 분포 및 행동 패턴과 강력한 일치성을 보였습니다.
5월 29일0
arXiv논문
REPOT: 체크포인트 수리를 통한 복구 가능한 사고 프로그램 (Recoverable Program-of-Thought)
RePoT는 Program-of-Thought(PoT)의 실행 오류를 해결하기 위해 체크포인트 기반의 복구 메커니즘을 제안합니다. 첫 번째 무효한 동작 발생 시 검증된 접두사부터 재개하여 단 한 번의 추가 호출로 높은 복구 성능을 달성합니다.
5월 29일0
arXiv논문
나는 누구인가? 튜터링 대화 내 학생 시뮬레이션을 위한 이력 인식 프로필
LLM 기반 자동 튜터링 도구 개발을 위해 학생의 학습 이력을 활용한 '이력 조건부 학생 시뮬레이션' 과업을 제안합니다. 프로필 생성기와 시뮬레이터로 구성된 프레임워크를 강화학습으로 학습시켜, 실제 수학 학습 데이터셋에서 기존 방식보다 뛰어난 성능을 입증했습니다.
5월 29일0
arXiv논문
HEART-Bench: LLM 에이전트는 인간과 유사한 심리를 보이는가?
LLM 에이전트가 인간과 유사한 심리적 특성을 시뮬레이션할 수 있는지 평가하기 위한 새로운 벤치마크인 HEART-Bench를 소개합니다. Big Five 성격 특성과 자전적 기억을 결합하여 에이전트의 성격 일관성과 의사결정 능력을 체계적으로 검증합니다.
5월 29일0
arXiv논문
UniSteer: 다재다능한 LLM 스티어링을 위한 활성화 공간에서의 텍스트 가이드 Flow Matching
UniSteer는 자연어 조건을 통해 LLM의 활성화 공간을 제어하는 새로운 플로우 매칭(Flow Matching) 모델을 제안합니다. 기존의 고정된 방향 방식과 달리, 보편적인 조건부 속도장을 학습하여 세밀한 개념과 복합적인 제약 조건을 유연하게 조절할 수 있습니다.
5월 29일0
arXiv논문
토큰화가 필요 없는 계층적 모델을 위한 적응형 타겟 동적 청킹 (Adaptive Targeted Dynamic Chunking)
토큰화가 필요 없는 계층적 모델의 압축률 최적화를 위한 새로운 메커니즘인 ATDC를 제안합니다. 커리큘럼 학습을 통해 압축률을 점진적으로 조정하며, 기존 모델 대비 안정적인 학습과 우수한 성능을 입증했습니다.
5월 29일0
arXiv논문
추론 경로 접두사의 컨포멀 인증 (Conformal Certification of Reasoning Trace Prefixes)
언어 모델의 추론 과정 중 오류가 발생하기 전까지의 유효한 중간 단계(접두사)를 통계적으로 보증하는 CROP 방법론을 제안합니다. 기존의 전체 응답 인증 방식과 달리, 단계별 위험 프록시를 활용해 안전한 추론 경로의 길이를 엄격하게 제어합니다.
5월 29일0
arXiv논문
DirectorBench: 개인화된 멀티 에이전트 평가를 통한 롱폼 비디오 생성 진단
롱폼 비디오 생성 모델의 서사 구조와 영화적 제어 능력을 평가하기 위한 새로운 벤치마크인 DirectorBench를 소개합니다. 이 시스템은 단일 점수 대신 5개 차원의 체크포인트를 통해 워크플로우의 병목 현상을 정밀하게 진단합니다.
5월 29일0
arXiv논문
SEAL: LLM-as-a-Meta-Judge를 통해 포화된 벤치마크를 되살릴 수 있는가?
기존 LLM 벤치마크의 포화 문제를 해결하기 위해 새로운 평가 프로토콜인 SEAL을 제안합니다. SEAL은 적응형 LLM-as-a-Meta-Judge와 시드 제거 방식을 사용하여 기존 태스크에서 유의미한 순위 신호를 추출합니다.
5월 29일0
arXiv논문
CCS: 방사선 보고서 생성을 위한 임상적 합의 선택 (Clinical Consensus Selection)
방사선 보고서 생성(RRG) 시 추론 단계의 품질을 높이기 위한 CCS 프레임워크를 제안합니다. 여러 후보 보고서 중 임상적 합의가 가장 높은 보고서를 선택하는 디코더 불가지론적 방식을 통해 임상 지표를 개선합니다.
5월 29일0
arXiv논문
조언을 위한 HEALTHDIAL 대화: 지식 기반 정보 탐색을 위한 다국어 및 다중 병렬 음성 대화 데이터셋
RAG 기반 음성 대화 시스템 평가를 위한 대규모 다국어 및 다중 병렬 데이터셋인 HEALTHDIAL을 소개합니다. WHO의 신뢰할 수 있는 콘텐츠를 기반으로 4개 공식 언어의 방언을 포함한 163시간의 음성 데이터를 제공합니다.
5월 29일0
arXiv논문
CRAC 2026에서의 CorPipe: 다국어 상호참조 해결 (Multilingual Coreference Resolution)에서의 빈 노드
CRAC 2026 공유 태스크에서 우승한 CorPipe 26 시스템을 소개합니다. 이 모델은 다국어 상호참조 해결 과정에서 빈 노드(Empty Nodes)를 예측하는 새로운 방식을 도입하여 기존 LLM 및 특화 시스템보다 높은 성능을 기록했습니다.
5월 29일0
arXiv논문
LLM의 연산량(Compute)과 용량(Capacity) 확장을 위한 이중 경로 아키텍처
연산량(Compute)과 용량(Capacity)을 독립적으로 확장할 수 있는 새로운 이중 경로(Dual-path) 블록 아키텍처를 제안합니다. 루프형 트랜스포머의 한계를 극복하여 동일 연산량 대비 더 높은 성능과 매개변수 효율성을 달성했습니다.
5월 29일0
arXiv논문
GRUFF: 독일어에서의 LLM 대명사 충실도, 추론 및 편향성
독일어의 문법적 성 체계를 반영하여 LLM의 대명사 충실도, 추론 및 편향성을 평가하는 새로운 데이터셋 GRUFF를 제안합니다. 연구 결과, 모델들은 일반 대명사에는 강하지만 신조어 대명사에는 취약하며, 인코더 전용 모델이 독일어 문법 구조에서 더 견고한 성능을 보임을 확인했습니다.
5월 29일0