Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
arXiv cs.CL (NLP) 1799건필터 해제
arXiv논문
인컨텍스트 러닝 (In-Context Learning) 시대의 부정 표현에 대한 체계성 재고
LLM의 인컨텍스트 러닝(ICL) 환경에서 부정 표현에 대한 행동적 및 표현적 체계성을 분석한 연구입니다. 모델이 부정문의 범위(scope)를 인식하는 데 있어 출력 형식의 영향을 받으며, 특정 작업에 대한 함수 벡터 구축의 한계를 밝힙니다.
6월 16일0
arXiv논문
Reddit 자기 공개 서사(Self-Disclosure Narratives)를 통한 사기 트렌드 및 경로 분석 이해
Reddit의 자기 공개 서사를 활용하여 2023~2025년 사이의 사기 트렌드와 경로를 분석한 연구입니다. LLM 지원 방식을 통해 사기 체인을 라벨링하고, 사기 프로세스가 다중 경로 형태를 띠며 연도별로 변화함을 밝혀냈습니다.
6월 16일0
arXiv논문
구성적 추론 깊이가 임상 AI의 실패를 예측한다: 전자 건강 기록(EHR) 질의응답에서 Transformer의 구성성 한계와 일치하는 실증적
LLM이 전자 건강 기록(EHR) 질의응답 시 추론 단계(hop count)가 늘어날수록 정확도가 급격히 하락하는 현상을 분석한 연구입니다. Transformer의 구성성 한계로 인해 복잡한 추론이 요구될수록 모델의 실패 가능성이 높아짐을 입증했습니다.
6월 16일0
arXiv논문
기호적 비형식화 (Symbolic Informalization): 유창하고 생산적이며 다국어적인 방식
기호적 비형식화(Symbolic Informalization)는 형식 수학을 정밀도 손실 없이 자연어로 변환하는 기술입니다. Informath 프로젝트는 Dedukti와 GF를 활용해 다양한 증명 시스템과 자연어 간의 상호 운용성을 제공합니다.
6월 16일0
arXiv논문
Contrastive-Difference CKA를 통한 언어 모델 아키텍처 간 개념 특이적 구조적 정렬(Structural Alignment)
Contrastive-Difference CKA(CKA_Delta)를 통해 서로 다른 LLM 아키텍처 간의 개념적 구조 정렬을 분석한 연구입니다. 기하학적 수렴과 기능적 전이 사이의 해리 현상을 규명하며, 훈련이 필요 없는 새로운 진단 도구를 제안합니다.
6월 16일0
arXiv논문
과학의 언어를 말하다: 자연과학을 위한 범용 생성 파운데이션 모델을 향하여
자연과학 전반의 이질적인 작업을 통합하는 범용 생성 파운데이션 모델인 LOGOS를 제안합니다. 과학적 객체와 상호작용을 공통 어휘로 인코딩하여, 별도의 기하학적 신경망 없이도 복잡한 구조를 순차적으로 예측할 수 있습니다.
6월 16일0
arXiv논문
적을수록 더 많다: 확산 언어 모델(Diffusion Language Models)을 위한 상호 안정성 샘플링 (Mutual-Stability
확산 언어 모델(dLLM)의 디코딩 효율성을 높이기 위해, 토큰 확정 시점을 동적으로 결정하는 적응형 샘플러 LESS를 제안합니다. LESS는 상호 안정성 샘플링을 통해 불필요한 계산을 줄이면서도 정확도를 향상시킵니다.
6월 16일0
arXiv논문
IMPACTeen: 청소년 의사소통에서의 의도, 조작, 설득, 주석 및 결과 데이터셋
IMPACTeen은 청소년의 디지털 및 사회적 상호작용 내 의도, 조작, 설득 기법을 다루는 텍스트 데이터셋입니다. LLM 생성과 인간의 검증을 거쳐 구축되었으며, 다양한 전문가 관점의 다차원적 주석을 포함합니다.
6월 16일0
arXiv논문
효과적인 추론을 위한 코드 인터프리터(Code Interpreter)의 외재적 및 내재적 특성 탐구
본 연구는 코드 인터프리터(CI)를 활용한 LLM의 추론 능력을 외재적 특성(핵심 토큰)과 내재적 특성(인지 행동) 관점에서 분석합니다. 연구 결과, 강력한 모델일수록 검증 및 백트래킹과 같은 행동이 빈번하며, 이를 추론과 학습 과정에 활용할 때 성능 향상이 가능함을 입증했습니다.
6월 16일0
arXiv논문
AgentSpec: 통제된 구성을 통한 체화된 에이전트 스캐폴드(Scaffold)의 이해
AgentSpec은 체화된 에이전트의 구성 요소를 표준화된 인터페이스로 모듈화하여 분석할 수 있는 프레임워크입니다. 추론, 메모리, 성찰 등 각 모듈 간의 상호작용과 스캐폴드 호환성이 에이전트 성능에 미치는 영향을 연구합니다.
6월 15일0
arXiv논문
해석 가능한 워크플로로의 교차 도메인 액션 시퀀스 추상화
사용자의 저수준 액션 로그를 상위 수준의 의미 있는 워크플로로 추상화하는 LLM 기반 프레임워크 WorkflowView를 제안합니다. 브라우저 로그 재구성, 학생 중도 탈락 예측 등 다양한 도메인에서 높은 성능과 일반화 능력을 입증했습니다.
6월 15일0
arXiv논문
LLM-Agent 워크플로우의 병렬 브랜치를 위한 직접적인 잠재 공간 합성(Direct Latent-Space Synthesis)을 향하여
LLM 에이전트 워크플로우의 병렬 브랜치를 효율적으로 통합하기 위한 Parallel-Synthesis 프레임워크를 제안합니다. 텍스트 연결 방식 대신 KV 캐시를 직접 소비하는 방식을 통해 추론 속도를 획기적으로 개선하고 성능을 유지합니다.
6월 15일0
arXiv논문
범람과 수확: 극한 언어 생성의 관점에서 가치 있는 수학을 생성하기 위한 트라이비아(Trivia)의 증명 가능한 필요성
AI가 생성하는 형식 수학에서 검증 가능한 결과물과 수학적 가치 사이의 간극을 '극한에서의 중첩된 언어 생성' 모델로 분석합니다. 검증기가 가치 있는 수학을 찾는 과정에서 발생하는 트라이비아(trivial)의 역할과 생성 모델의 커버리지 한계를 수학적으로 규명합니다.
6월 15일0
arXiv논문
CORA: 멀티모달 RLVR에서의 사고-답변 간극 분석 및 일관성 중심 추론 정렬을 통한 간극 해소
멀티모달 RLVR 과정에서 발생하는 사고-답변 간의 의미론적 불일치 문제를 분석하고, 이를 해결하기 위한 CORA 방법론을 제안합니다. CORA는 일관성 중심의 추론 정렬을 통해 LVLM의 추론 과정과 최종 답변 사이의 간극을 효과적으로 완화합니다.
6월 15일0
arXiv논문
AdaSR: 계층적 상대적 정책 최적화를 통한 적응형 스트리밍 추론
AdaSR은 연속적인 데이터 스트림 환경에서 모델이 실시간으로 추론하고 계산 자원을 적응적으로 할당할 수 있게 하는 프레임워크입니다. 계층적 상대적 정책 최적화(HRPO)를 통해 추론 정확도와 지연 시간 사이의 최적의 균형을 달성합니다.
6월 15일0
arXiv논문
Persona-Pruner: 역할 수행을 위한 경량 모델 조각하기
Persona-Pruner는 특정 페르소나를 수행하는 데 필요한 모델의 서브 네트워크를 효율적으로 추출하는 프레임워크입니다. 기존의 단순 가지치기 방식과 달리 캐릭터 특성을 보존하며 계산 비용을 획기적으로 줄여줍니다.
6월 15일0
arXiv논문
ClinHallu: 의료 MLLM 추론 과정의 단계별 환각 진단을 위한 벤치마크
의료 MLLM의 추론 과정에서 발생하는 환각을 단계별로 진단하기 위한 새로운 벤치마크인 ClinHallu를 소개합니다. 시각적 인식, 지식 회상, 추론 통합의 세 단계로 오류 원인을 분석하며, 흔적 지도 미세 조정을 통해 환각을 완화하는 방법을 제시합니다.
6월 15일0
arXiv논문
Gaze Heads: 시각-언어 모델(VLM)이 설명하는 대상을 바라보는 방식
시각-언어 모델(VLM) 내에서 이미지의 특정 영역을 추적하는 '게이즈 헤드(gaze heads)'의 존재를 발견했습니다. 이 헤드들을 제어함으로써 재학습 없이도 모델이 설명하는 대상을 원하는 영역으로 유도할 수 있음을 증명했습니다.
6월 15일0
arXiv논문
BayLing-Duplex: 단일 자기회귀(Autoregressive) LLM을 이용한 네이티브 전이중(Full-Duplex) 음성 대화
BayLing-Duplex는 별도의 VAD 모듈 없이 단일 자기회귀 LLM만으로 실시간 전이중(Full-Duplex) 음성 대화를 구현한 모델입니다. 특수 토큰을 활용해 기존 아키텍처를 유지하면서도 자연스러운 끼어들기와 턴 테이킹을 가능하게 합니다.
6월 15일0
arXiv논문
Gefen: 최적화된 확률적 옵티마이저 (Optimized Stochastic Optimizer)
Gefen은 AdamW의 메모리 사용량을 약 8배 줄이는 새로운 확률적 옵티마이저입니다. 2차 모멘트 공유와 1차 모멘트 양자화 기술을 통해 성능 저하 없이 메모리 효율성을 극대화했습니다.
6월 15일0