Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
arXiv cs.CL (NLP) 1795건필터 해제
arXiv논문
DistilledGemma: 다국어 역사적 기사에서의 인물-장소 관계 추출을 위한 균형 잡힌 효율성-정확성
DistilledGemma는 다국어 역사적 기사에서 인물-장소 관계를 추출하기 위한 효율적인 지식 증류 시스템입니다. Gemma 4 26B 모델의 추론 능력을 2.3B 소형 모델로 전이하여 정확도와 계산 효율성 사이의 최적의 균형을 달성했습니다.
6일 전0
arXiv논문
OCR-VLMs는 데바나가리(Devanagari) 문자를 읽을 수 있는가? 스트레스 테스트 벤치마크 및 사후 교정 연구
데바나가리 문자에 대한 OCR-VLMs의 성능을 벤치마킹하고 스트레스 테스트를 수행한 연구입니다. 합성 데이터와 실제 스캔본 간의 성능 격차를 분석하고, 특정 모델의 치명적 오류 패턴과 사후 교정 효과를 규명했습니다.
6일 전0
arXiv논문
PolicyGuard: LLM 에이전트의 정책 준수를 위한 대화 기반 서브 에이전트 검증기
LLM 에이전트가 기업 정책을 준수하도록 돕는 대화 기반 서브 에이전트 검증기인 PolicyGuard를 소개합니다. 기존의 단순 차단 방식과 달리 전체 대화 문맥을 파악하고 실행 가능한 피드백을 제공하여 정책 준수 성능을 높였습니다.
6일 전0
arXiv논문
도메인 특화 지식 그래프를 통한 여행 중심 추론 거대 언어 모델 (LLM)
여행 도메인의 전문 지식 그래프(KG)를 활용하여 LLM의 추론 정확도와 신뢰성을 높이는 모듈형 파이프라인을 제안합니다. 지식 그래프 기반의 지도 미세 조정(SFT)을 통해 Qwen3-4B 모델의 성능을 크게 향상시켰습니다.
6일 전0
arXiv논문
제조된 확신: 메모리 공고화가 어떻게 소문을 확신에 찬 사실로 바꾸는가
LLM 에이전트의 메모리 공고화 과정에서 유보적인 표현이 확신에 찬 단언으로 변하며 발생하는 보안 취약점을 분석합니다. 메모리에 저장된 문구의 확신도가 에이전트의 판단에 미치는 영향을 규명하고, 이를 방지하기 위한 설계적 교훈을 제시합니다.
6일 전0
arXiv논문
Complexity Ceiling Benchmark: 깊이 확장(Depth Scaling)에 따른 순차적 추론의 다중 도메인 평가
언어 모델의 추론 단계가 증가함에 따라 성능이 저하되는 양상을 평가하는 Complexity Ceiling Benchmark(CCB)를 제안합니다. 실험 결과, 모델들은 도메인에 따라 서로 다른 성능 한계치를 보이며 기하급수적인 성능 저하 패턴을 나타냅니다.
6일 전0
arXiv논문
MIThinker: 동기 면담 (Motivational Interviewing) 상담을 위한 플러그 앤 플레이 방식의 정책 최적화 사고 모델
동기 면담(MI) 상담 에이전트의 효과를 높이기 위해 치료적 사고 과정을 생성하는 경량 사고 모델 MIThinker를 제안합니다. AugR1-MI 파이프라인을 통해 상담사의 사고를 역설계하여 학습하며, 기존 모델 대비 적은 계산량으로도 뛰어난 상담 역량을 보여줍니다.
6일 전0
arXiv논문
인간-LLM 정렬에 기반한 노래 가사 주석 작성을 위한 하이브리드 프레임워크
노래 가사의 감정 인식을 위해 인간과 LLM 간의 정렬을 조사하는 새로운 하이브리드 프레임워크를 제안합니다. 문장 수준의 가사 데이터셋을 통해 주석 작성 시 발생하는 불일치를 예측하고 최적화하는 방법을 다룹니다.
6일 전0
arXiv논문
자동차 정비 지침으로부터 상보적 동작 모델링(Complementary Action Modeling) 학습하기
자동차 정비 지침에서 미세한 어휘 변화가 절차적 의미를 어떻게 바꾸는지 연구하는 상보적 동작 모델링(CAM)을 제안합니다. 문맥은 유지하되 동작 구절을 수정하여 대응하는 절차적 상보 대상을 식별하거나 생성하는 방법론을 다룹니다.
6월 29일0
arXiv논문
발달적 접근법을 통해 밝혀진 신경 언어 모델(NLM)의 통계적 학습: Transformer는 가장 추상적인 통계적 패턴으로부터 일반화한다
Transformer 모델이 합성 문법을 학습하는 과정을 발달적 관점에서 분석한 연구입니다. 모델이 초기에는 추상적인 전역적 통계 지식을 먼저 습득하고, 이후 국소적 의존성을 학습한다는 사실을 밝혀냈습니다.
6월 29일0
arXiv논문
Supersede: LLM 에이전트의 메모리 업데이트 격차 진단 및 학습
LLM 에이전트가 변화하는 사실을 반영하여 메모리를 업데이트하는 능력이 부족함을 진단하고, 이를 해결하기 위한 새로운 강화학습 환경인 Supersede를 제안합니다. 실험 결과, GRPO 미세 조정을 통해 소형 모델의 메모리 업데이트 정확도를 크게 향상시킬 수 있음을 입증했습니다.
6월 29일0
arXiv논문
DMV-Bench: 부수적 단서 주입을 통한 장기 시계열 멀티모달 에이전트의 시각적 메모리 진단
멀티모달 에이전트의 시각적 메모리 능력을 진단하기 위한 최초의 상호작용형 벤치마크인 DMV-Bench를 소개합니다. 이 벤치마크는 텍스트가 아닌 픽셀 기반의 단서를 통해 시각적 회상 능력을 측정하며, 제안된 DualMem 아키텍처는 기존 모델보다 뛰어난 성능을 입증했습니다.
6월 29일0
arXiv논문
Aloe-Vision: 의료 분야를 위한 강건한 시각-언어 모델 (Vision-Language Models)
의료 분야에 특화된 강건한 시각-언어 모델(LVLM)인 Aloe-Vision을 소개합니다. 고품질 데이터셋인 Aloe-Vision-Data와 새로운 시각 벤치마크인 CareQA-Vision을 통해 의료 AI의 신뢰성과 성능을 입증했습니다.
6월 29일0
arXiv논문
다중 매개변수의 저주: 활성화 패칭(Activation Patching)에서의 숨겨진 상호작용 효과
활성화 패칭(Activation Patching) 과정에서 발생하는 상호작용 효과(Interaction Effects)의 존재를 규명합니다. NIE가 구성 요소 간의 의존성을 포함하고 있음을 증명하며, 이를 통해 기존 해석 가능성 연구의 불안정성을 설명합니다.
6월 29일0
arXiv논문
컨텍스트 준비형 트랜스포머 (The Context-Ready Transformer)
토큰이 블록에 진입하기 전 사전 컨텍스트화를 수행하는 새로운 순환 신경망 아키텍처인 'Context-Ready Transformer'를 제안합니다. 수정 네트워크를 통해 이전 컨텍스트 요약을 현재 임베딩과 결합하여 추론 효율성과 성능을 동시에 높였습니다.
6월 29일0
arXiv논문
EntMTP: 엔트로피 가이드 기반 다중 토큰 예측을 통한 LLM 추론 가속화
EntMTP는 로컬 생성 엔트로피에 따라 트리 기반 어텐션 토폴로지를 동적으로 전환하는 새로운 다중 토큰 예측(MTP) 스케줄러를 제안합니다. 컨텍스트의 예측 가능성에 맞춰 투기 깊이를 조절함으로써 생성 품질을 유지하면서도 추론 속도를 극대화합니다.
6월 29일0
arXiv논문
Ko-WideSearch: 웹 에이전트의 철저한 집합 열거를 위한 한국어 너비 탐색 (Breadth-Search) 벤치마크
웹 에이전트의 집합 열거 능력을 평가하기 위한 한국어 너비 탐색 벤치마크인 Ko-WideSearch를 제안합니다. 기존의 깊이 중심 평가에서 벗어나, 특정 엔티티의 전체 구성원과 속성을 정확히 채우는 능력을 측정합니다.
6월 29일0
arXiv논문
Narrative-UFET: 초미세 개체 유형 분류 (Ultra-Fine Entity Typing)를 위한 서사 생성
초미세 개체 유형 분류(UFET)의 롱테일 문제 해결을 위해 서사 문맥을 활용하는 Narrative-UFET를 제안합니다. 문장 수준을 넘어 여러 문장에 걸친 서사를 통해 개체 유형의 중의성을 해소하고 성능을 향상시킵니다.
6월 29일0
arXiv논문
마스크 언어 흐름 모델 (Masked Language Flow Models)
마스크 언어 흐름 모델(MLFM)은 기존 흐름 언어 모델(FLM)의 다단계 추론 한계를 극복하기 위해 마스킹 메커니즘을 통합한 새로운 연구입니다. 연속적 확률 보간법을 통해 조건부 생성을 가능하게 하며, 사전 학습된 MDM을 효율적으로 변환할 수 있습니다.
6월 29일0
arXiv논문
DysLexLens: 온라인 포럼의 통찰을 통해 난독증 학습자의 경험을 분석하는 저자원 LLM 프레임워크
DysLexLens는 온라인 포럼의 데이터를 활용해 난독증 학습자의 AI 사용 경험을 분석하는 저자원 LLM 프레임워크입니다. 지식 그래프 기반의 질문 추론과 검증 가능한 질의응답 아키텍처를 통해 노이즈가 많은 소셜 미디어 데이터에서 유의미한 통찰을 추출합니다.
6월 29일0