Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
arXiv cs.CL (NLP) 1801건필터 해제
arXiv논문
SafeSteer: 효율적인 안전 정렬을 위한 국소적 온폴리시 증류 (Localized On-Policy Distillation)
SafeSteer는 LLM의 안전 정렬 과정에서 발생하는 성능 저하(alignment tax)를 최소화하기 위해 제안된 국소적 온폴리시 증류 기법입니다. 안전 토큰에만 집중하여 학습함으로써 범용 데이터 없이도 매우 적은 양의 유해 샘플만으로 높은 안전성과 일반 능력을 동시에 확보합니다.
6월 2일0
arXiv논문
SN-WER: 다중 문자 인도어 ASR 평가를 위한 문자 정규화 WER
다국어 ASR 평가 시 서로 다른 문자 표기로 인해 발생하는 WER의 과대평가 문제를 해결하기 위한 SN-WER 지표를 제안합니다. 참조 텍스트와 가설을 표준 문자로 음차하여 계산하는 이 방식은 인도어 환경에서 모델 간 격차를 최대 12% 완화합니다.
6월 2일0
arXiv논문
증거 보강 머신러닝 접근법을 이용한 응급실 분류 기록 기반의 전이 가능한 자해 감시
응급실 분류 기록을 활용하여 자해를 탐지하는 3단계 머신러닝 접근법을 제안합니다. LLM 기반의 증거 추출 기술을 결합하여 기존 진단 코드의 한계를 극복하고 높은 전이 가능성을 입증했습니다.
6월 2일0
arXiv논문
레이어에서 서브모듈로: 교체 기반 LLM 압축에서의 입도(Granularity) 재고
LLM의 사후 학습 압축 시 기존의 레이어 단위 방식에서 벗어나 서브모듈 단위로 압축하는 SubFit 기법을 제안합니다. 비연속적인 서브모듈 선택과 경량화된 잔차 바이패스를 통해 높은 정확도와 낮은 퍼플렉시티를 유지하며 추론 속도 및 KV-캐시 효율을 개선합니다.
6월 2일0
arXiv논문
AdaCodec: 비디오 MLLM을 위한 예측형 시각 코드
AdaCodec은 비디오 프레임 간의 시간적 중복성을 활용하여 시각적 토큰을 효율적으로 압축하는 예측형 시각 코드를 제안합니다. 예측 가능한 프레임은 변화량인 P-토큰으로 인코딩하여 토큰 사용량을 줄이고 모델의 성능과 추론 속도를 동시에 개선합니다.
6월 2일0
arXiv논문
SimSD: 확산 언어 모델(Diffusion Language Models)을 위한 단순한 투기적 디코딩(Speculative Decoding)
확산 언어 모델(dLLM)의 추론 속도를 높이기 위해 제안된 SimSD 알고리즘을 소개합니다. 이 방식은 별도의 학습 없이도 dLLM에 시간적 문맥을 제공하여 투기적 디코딩을 가능하게 하며, 처리량을 최대 7.46배 향상시킵니다.
6월 2일0
arXiv논문
SkillHarm: 자동 구축을 통한 생애주기 인식 기술 기반 공격
에이전트 기술(Agent skills)의 생애주기 전반을 공격하는 새로운 벤치마크 SkillHarm을 소개합니다. 고정 페이로드 오염(FPP)과 자기 변이 오염(SMP) 시나리오를 통해 현재 에이전트 시스템의 보안 취약성을 체계적으로 분석합니다.
6월 2일0
arXiv논문
ClinEnv: 에이전트를 위한 대화형 다단계 장기 EHR 환경
ClinEnv는 LLM이 실제 입원 사례와 유사한 환경에서 주치의 역할을 수행하며 의사결정을 내리는 과정을 평가하는 대화형 벤치마크입니다. 기존 정적 벤치마크와 달리 정보 수집 과정과 결정의 품질을 동시에 측정하여 모델의 임상 추론 능력을 정밀하게 분석합니다.
6월 2일0
arXiv논문
HERO'S JOURNEY: 텍스트 게임을 통한 복잡한 규칙 유도 (Rule Induction) 테스트
목표 지향적 에피소드 작업에서 규칙 유도 능력을 평가하는 새로운 벤치마크인 HERO'S JOURNEY를 소개합니다. LLM이 시연을 통해 숨겨진 규칙을 추론하고 실행하는 능력을 분석하며, 특히 절차적 유도에서의 한계를 지적합니다.
6월 2일0
arXiv논문
검색 학습하기: Text-to-SQL 에이전트를 위한 이중 수준 장기 메모리
Text-to-SQL 에이전트의 성능 향상을 위해 에피소드와 턴 수준의 메모리를 결합한 MERIT 프레임워크를 제안합니다. 강화학습과 프로세스 보상 모델을 활용하여 상호작용 단계에 최적화된 메모리 검색을 수행합니다.
6월 2일0
arXiv논문
동일한 페이로드, 다른 채널: 도구 사용 언어 모델의 신뢰 비대칭성 측정
도구 사용 언어 모델이 악의적인 지침을 전달받는 채널(사용자 메시지, 도구 메타데이터, 도구 출력)에 따라 취약성이 달라지는 '안전 비대칭성'을 연구했습니다. 실험 결과, 에이전트 특화 모델과 범용 모델 간의 취약성 패턴이 다르게 나타남을 확인했습니다.
6월 2일0
arXiv논문
시각-언어 추론을 위한 분해된 On-Policy 증류: Visual Grounding을 위한 그래디언트 조향 (Steering
본 연구는 VLM 증류 과정에서 언어 사전 지식과 시각적 접지 간의 그래디언트 직교성을 발견하고, 이를 수학적으로 분해하여 제안합니다. 시각적 접지 성능을 높이기 위해 업데이트 벡터를 동적으로 재정렬하는 Visual Gradient Steering(VGS) 기법을 통해 기존 방식보다 뛰어난 성능을 입증했습니다.
6월 2일0
arXiv논문
PsyDefDetect에서의 LinguIUTics: 심리적 방어 기제 분류를 위한 Qwen3-8B의 반복적 불균형 인식 미세 조정
LinguIUTics 팀은 PsyDefDetect 2026 태스크에서 Qwen3-8B를 활용해 심리적 방어 기제 탐지 성능을 크게 향상시켰습니다. 클래스 불균형 문제를 해결하기 위해 QLoRA 미세 조정과 어휘 증강, 로짓 편향 튜닝 등의 전략을 사용했습니다.
6월 2일0
arXiv논문
대규모 언어 모델의 파라미터 기반 지식 편집 재고: 이론적 한계와 실증적 증거
파라미터 기반 지식 편집이 LLM의 추론 능력을 저해하는 이론적 한계를 분석합니다. 차원 붕괴 가설을 통해 국소적 수정이 전역적 간섭을 일으키는 과정을 설명하며, 검색 기반 방식이 파라미터 편집보다 우수함을 입증합니다.
6월 2일0
arXiv논문
샌드박스 환경의 코딩 에이전트는 경쟁력 있는 옴니모달 (Omni-modal) 작업 해결사이다
텍스트와 이미지, 샌드박스 도구 사용 능력을 갖춘 코딩 에이전트가 네이티브 옴니모달 모델만큼 강력한 성능을 낼 수 있음을 입증했습니다. 이들은 미디어 스트림을 직접 처리하는 대신 코드를 통해 정보를 검색하고 처리하는 방식으로 문제를 해결합니다.
6월 2일0
arXiv논문
SPADER: 다중 정답 질의응답(Multi-Answer QA)을 위한 다양성 인지 탐색 보상을 갖춘 단계별 동료 이점(Step-wise
다중 정답 질의응답(Multi-Answer QA) 환경에서 도구 사용 에이전트의 성능을 높이기 위한 강화학습 프레임워크 SPADER를 제안합니다. 단계별 신용 할당과 다양성 인지 탐색 보상을 통해 롱테일 엔티티 발견 능력을 강화했습니다.
6월 2일0
arXiv논문
언어학적 인지 기반의 비왜곡 LLM 워터마킹 (Linguistics-Aware Non-Distortionary LLM Watermarking)
LUNA는 언어학적 인지 기반의 비왜곡 LLM 워터마킹 기술을 제안합니다. 형태론과 품사 문맥을 활용하여 모델의 출력 품질 저하를 최소화하면서도 다국어 환경에서 효과적인 워터마크 탐지가 가능함을 입증했습니다.
6월 2일0
arXiv논문
계산 사회 과학 및 인문학을 위한 책임감 있고 인식론적 근거를 갖춘 다국어 LLM을 향하여
본 논문은 다국어 LLM을 사회 과학 및 인문학 연구를 위한 해석학적 도구로 재개념화하며, 기존 NLP 벤치마크의 한계를 극복하기 위한 새로운 평가 프레임워크를 제안합니다. 문화적 정렬과 교차 언어적 안정성을 포함한 이론적 근거를 바탕으로 책임감 있는 LLM 통합 방법론을 다룹니다.
6월 2일0
arXiv논문
MemPro: 진화 가능한 프로그램으로서의 에이전트 메모리 시스템
MemPro는 자율 에이전트의 메모리 구축-검색(MCR) 파이프라인 전체를 진화 가능한 프로그램으로 취급하는 새로운 프레임워크입니다. 기존의 고정된 파이프라인 한계를 극복하기 위해 버전 트리를 통해 실패 모드를 진단하고 시스템을 지속적으로 개선합니다.
6월 2일0
arXiv논문
분포 정렬 자기 증류(Distribution-Aligned Self-Distillation)를 통한 동적 토큰 선택 기반의 강건한 추론
자기 증류 과정에서 발생하는 스타일 편향과 노이즈를 해결하기 위해 분포 정렬 자기 증류(DASD) 기법을 제안합니다. 답변 인지 참조 모델을 통해 유용한 논리적 지식은 보존하고, 분포에 맞지 않는 스타일 노이즈는 동적으로 필터링하여 추론 성능을 높입니다.
6월 2일0