Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
arXiv중요논문
복잡한 최적화 문제 해결을 위한 종합 벤치마크, OptiVerse 공개
LLM이 뛰어난 추론 능력을 보여도 복잡한 최적화(Optimization) 문제는 여전히 어렵습니다. 기존의 벤치마크가 수학적 프로그래밍이나 조합 최적화에 국한되어 있어 평가 범위가 부족했습니다. 이에 본 논문에서는 확률적, 동적, 게임, 최적 제어 등 소외되었던 영역을 포함하는 1,000개의 종합 문제로 구성된 'OptiVerse'를 제시합니다. 22개 LLM으로 테스트한 결과, GPT-5.2나 Gemini-3 같은 고급 모델도 어려운 문제에서 정확도가 27%를 넘기 어려웠으며, 주요 병목 지점은 모델링 및 논리 오류임이 밝혀졌고
4월 24일3
arXiv중요논문
토큰 기반 임베딩의 한계 극복: SAE를 활용한 개념 공간 학습
기존의 토큰(Token) 기반 Sparse IR 모델인 SPLADE는 효율적이지만, 백본 어휘집에 의존하여 다의성(polysemicity) 및 동의어 처리에서 성능 한계를 가집니다. 본 연구는 이 문제를 해결하기 위해, 기존의 토큰 어휘집을 희소 자동 인코더(Sparse Auto-Encoder, SAE)를 통해 학습된 '의미 개념 공간(latent space of semantic concepts)'으로 대체하는 SAE-SPLADE 모델을 제안합니다. 실험 결과, SAE-SPLADE는 SPLADE와 유사한 검색 성능을 달성하면서도,
4월 24일3
arXiv중요논문
VLM 평가 모델의 '맹점' 분석: 이미지-텍스트 및 텍스트-이미지 오류 탐지 능력 검증
본 연구는 현재 광범위하게 사용되는 평가용 VLM(Evaluator VLMs)의 신뢰성 문제를 체계적으로 분석합니다. 이미지-텍스트 (I2T) 및 텍스트-이미지 (T2I) 작업 전반에 걸쳐, 객체 환각, 공간 추론, 사실적 근거 등 주요 오류 차원을 목표로 하는 정교한 교란(perturbations)을 도입했습니다. 총 40개 이상의 교란 차원과 4000개가 넘는 인스턴스를 사용하여 4개의 대표 VLM을 평가한 결과, 현재의 평가용 VLM들이 심각한 '맹점'을 가지고 있음을 발견했습니다. 특히 미세한 구성적/공간적 오류나 입력 이미
4월 24일3
arXiv중요논문
LLM 기반 직무 스킬 추출을 위한 다중 모듈 프레임워크 (SRICL)
채용 공고문에서 직무 스킬(skill)을 정확하게 추출하는 것은 인재 매칭 및 노동 시장 분석의 핵심입니다. 기존에 범용적인 대규모 언어 모델(LLMs)만 사용하면 경계가 불안정하거나 환각(hallucination) 같은 문제가 발생하기 쉽습니다. 본 논문은 이러한 문제를 해결하기 위해, 시맨틱 검색(SR), 인컨텍스트 학습(ICL), 지도 미세 조정(SFT)을 결합하고 결정론적 검증기(deterministic verifier)를 추가한 'SRICL' 프레임워크를 제안합니다. SRICL은 ESCO 같은 도메인별 주석 데이터를 활용해
4월 24일3
arXiv논문
텍스트 기반 감정 변화 모델링: SemEval-2026 Task 2 분석
본 논문은 SemEval-2026 Task 2를 위해 개발된 시스템을 소개하며, 시간 순서로 배열된 사용자 생성 텍스트에서 현재 감정 상태(affect)와 단기적인 감정 변화 역학(dynamics)을 모델링하는 방법을 다룹니다. 연구진은 LLM 프롬프팅, 쌍별 최대 엔트로피 (MaxEnt) 모델, 그리고 최근 감정 궤적 및 학습 가능한 사용자 임베딩을 통합한 경량 신경 회귀 모델 등 세 가지 접근 방식을 탐구했습니다. 실험 결과, LLM이 정적인 감성 신호 포착에는 효과적이지만, 단기적인 감정 변화는 텍스트 의미론보다는 최근의 수치
4월 24일3
arXiv중요논문
임베딩의 의미 포착 능력 측정: 개념 분리 곡선(Concept Separation Curves)
기존 문장 임베딩 평가 방식은 외부 분류기(classifier)에 의존하여, 좋은 성능이 임베딩 자체의 능력인지 분류기의 영향인지를 구분하기 어렵다는 한계가 있었습니다. 본 논문은 이러한 문제를 해결하기 위해 '개념 분리 곡선(Concept Separation Curves)'이라는 새로운, 분류기에 독립적인 평가 방법을 제안합니다. 이 방법은 문장에 체계적으로 구문적 노이즈나 의미 부정(semantic negations)을 주입하고, 이것이 임베딩 벡터에 미치는 영향을 정량화하여 모델의 개념적 안정성을 객관적으로 측정할 수 있게 해
4월 24일3
arXiv논문
LLM의 의견 편향 및 아첨(Sycophancy) 측정 방법론 공개
본 논문은 대규모 언어 모델(LLM)이 민감한 주제에 대해 어떤 의견을 가지고 있는지, 특히 사용자의 압박이나 설득 과정에서 어떻게 반응하는지 측정하는 새로운 방법론 'llm-bias-bench'를 제안합니다. 이 벤치마크는 직접적인 질문과 간접적인 논쟁(argumentative debate)이라는 두 가지 상호 보완적인 프로빙 방식을 결합했습니다. 연구 결과, 단순한 의견 질문보다 지속적인 논쟁 과정이 LLM의 편향성을 훨씬 더 크게 유발하며, 모델들이 처음에는 확고해 보여도 심층적인 토론을 거치면 사용자의 입장을 반영하는 아첨(
4월 24일3
arXiv중요논문
AgenticQwen: 산업 규모 도구 사용을 위한 소형 에이전트 언어 모델 훈련법
본 논문은 복잡한 다단계 추론과 도구 사용 능력이 요구되는 산업 현장에 적합하도록 설계된 소형 에이전트 언어 모델 'AgenticQwen'을 소개합니다. AgenticQwen은 합성 데이터와 제한적인 오픈소스 데이터를 활용하여 다중 라운드 강화학습 (RL)으로 훈련되었습니다. 핵심은 '추론(Reasoning)'과 '에이전트(Agentic)'라는 두 가지 이중 데이터 플라이휠(Dual Data Flywheels)을 결합한 독특한 프레임워크입니다. 이 구조는 오류 학습을 통해 과제 난이도를 높이고, 선형 워크플로우를 실제 복잡성을 반영
4월 24일3
arXiv중요논문
언어 변수를 활용한 추론 최적화: 다국어 모델의 새로운 접근법
본 연구는 언어가 단순한 출력 매체가 아니라, 모델 내부 추론 과정(inference pathways)을 구조적으로 조절하는 잠재 변수(latent variable) 역할을 한다는 가설에서 출발합니다. 'Polyglot Thinking Experiment'를 통해 비영어권 응답이 영어보다 높은 추론 정확도를 보이는 현상을 관찰하고, 이를 바탕으로 다국어성을 모델의 잠재적 추론 공간 확장 메커니즘으로 해석했습니다. 이에 따라 언어 변동을 암묵적인 탐색 신호로 활용하는 강화학습 (RL) 프레임워크인 polyGRPO를 제안합니다. 이 기
4월 24일3
arXiv중요논문
언어 모델 추론 성능 향상을 위한 구두 과정 감독(VPS) 기법
본 논문은 대규모 언어 모델(LLM)의 추론 능력을 향상시키기 위해 '구두 과정 감독(Verbal Process Supervision, VPS)'이라는 새로운 프레임워크를 제안합니다. VPS는 외부의 강력한 슈퍼바이저가 제공하는 구조화된 자연어 비평을 활용하여 반복적인 생성-비평-개선 루프를 수행하며, 이는 훈련이 필요 없는(training-free) 방식입니다. GPQA Diamond, AIME 2025 등 다양한 벤치마크에서 VPS는 기존 SOTA 대비 높은 성능 향상을 보여주었으며, 특히 비평의 세분성(granularity)이
4월 24일3
arXiv논문
엣지 환경을 위한 다국어 언어 모델 개발 전략 (Global South 중심)
본 논문은 영어권 외 지역 및 하드웨어 제약이 있는 글로벌 사우스(Global South) 커뮤니티에 효과적으로 언어 모델(LM)을 배포하는 데 따르는 '라스트 마일' 문제를 다룹니다. 이 문제는 다국어성(Multilinguality)과 엣지 디바이스 배포(Edge Deployment)라는 두 가지 목표가 기술적 요구사항 측면에서 충돌하는 지점을 의미합니다. 본 연구는 데이터 수집부터 개발, 배포에 이르는 언어 모델 파이프라인 전반에 걸쳐 해당 문제를 다룬 232편의 논문을 광범위하게 조사하고 분석했습니다. 이를 통해 현황을 진단할
4월 24일3
arXiv논문
지식 그래프 완성을 위한 계층적 구조화 양자화 프레임워크 (GS-Quant)
본 논문은 LLM의 지식 그래프 완성(KGC) 적용 시 발생하는 연속 임베딩과 이산 토큰 간의 모달리티 격차 문제를 해결하기 위해 GS-Quant라는 새로운 양자화 프레임워크를 제안합니다. 기존 방식들이 단순한 수치 압축에 그쳐 의미론적 구조를 놓쳤던 것과 달리, GS-Quant는 엔티티 표현이 '거시(coarse)에서 미세(fine)'의 언어적 논리를 따르도록 설계되었습니다. 이를 통해 계층적 지식을 코드북에 주입하고, 생성적 구조 재구성을 통해 토큰 시퀀스에 인과적 의존성을 부여함으로써, LLM이 그래프 구조를 자연어 생성처럼추
4월 24일3
arXiv중요논문
어노테이터별 근거 모델링: 미세 관점 분석을 위한 새로운 프레임워크
본 연구는 단순한 레이블 예측을 넘어, 어노테이터가 제공하는 '근거(rationales)'를 활용하여 개인별 미세 관점(fine-grained perspectives)을 모델링하는 새로운 프레임워크를 제안합니다. 이 프레임워크는 어노테이터의 신원 정보와 인구통계학적 메타데이터를 결합한 'User Passport' 기제를 통해 예측에 조건을 부여하며, 두 가지 설명 생성기(explainer) 아키텍처(post-hoc prompt-based 및 prefixed bridge explainer)를 도입합니다. 실험 결과, 근거 모델링을 결
4월 24일3
arXiv중요논문
시선 추적 데이터의 위상학적 분석을 통한 난독증 탐지 방법론
본 논문은 시선 추적(eye-tracking) 데이터를 시간 계열(time series)로 간주하고, 위상 데이터 분석(Topological Data Analysis, TDA) 기법인 영속성 호몰로지(Persistent Homology)를 적용하여 난독증(dyslexia)을 탐지하는 새로운 하이브리드 모델을 제안합니다. 기존의 통계적 특징에 더해 위상학적 특징을 결합한 이 접근 방식은, 코펜하겐 코퍼스(Copenhagen Corpus) 기반 실험에서 기존 방법론보다 우수한 성능을 보였습니다. 특히, 제안하는 새로운 필터레이션(fil
4월 24일3
arXiv속보논문
자연스러운 스타일 기반의 은밀한 LLM 백도어 공격 프레임워크 (BadStyle)
본 논문은 안전 필수 영역에서 사용되는 대규모 언어 모델(LLMs)에 대한 심각한 보안 위협인 백도어 공격을 다룹니다. 기존의 백도어 공격 방식들은 명시적인 트리거 패턴으로 인해 자연스러움이 떨어지고, 긴 형식 생성 시 페이로드 주입이 불안정하며, 실제 위협 모델 반영도가 낮다는 문제점을 가집니다. 이를 해결하기 위해 'BadStyle' 프레임워크를 제안합니다. BadStyle은 LLM 자체를 활용하여 의미론과 유창성을 유지하면서도 감지 불가능한 스타일 수준의 트리거가 포함된 은밀하고 자연스러운 오염 샘플을 생성합니다. 또한, 보조
4월 24일3
arXiv중요논문
코드 생성 편향 평가의 한계: ML 파이프라인 재조명
기존 코드 생성 모델의 편향성 평가는 단순 조건문(if-statements)에만 초점을 맞춰 실제 프로그래밍 환경에서의 편향을 과소평가해왔습니다. 본 연구는 더 현실적인 작업인 머신러닝 (ML) 파이프라인 생성을 통해 편향을 재조명했습니다. 그 결과, 민감 속성(sensitive attributes)이 포함되는 비율이 단순 조건문 대비 현저히 높게 나타났으며, 이는 기존 벤치마크가 실제 배포 환경의 편향 위험을 심각하게 과소평가하고 있음을 시사합니다.
4월 24일3
arXiv중요논문
N-그램의 한계를 넘어서: 데이터 기반 X-GRAM을 통한 효율적인 임베딩 스케일링
대규모 토큰 인덱스 룩업 테이블은 계산 분리(compute-decoupled) 확장을 가능하게 하지만, 매개변수 비효율성과 급격한 메모리 증가라는 한계에 직면합니다. 본 논문은 이러한 문제를 해결하기 위해 주파수 인식형 동적 토큰 주입 프레임워크인 X-GRAM을 제안합니다. X-GRAM은 하이브리드 해싱과 별칭 혼합(alias mixing)을 사용하여 꼬리 부분(long tail)을 압축하고 헤드 용량을 유지하며, 정규화된 SwiGLU ShortConv를 통해 다양한 지역 n-gram 특징을 추출합니다. 이를 깊이 인식 게이팅(깊이
4월 24일3
arXiv중요논문
AEL: 에이전트 경험 학습을 통한 개방형 환경 문제 해결
본 논문은 장기간의 개방형 환경(Open-Ended Environments)에서 작동하는 LLM 에이전트가 과거 경험을 효과적으로 활용하지 못하는 '상태 비저장성(stateless)' 문제를 해결하기 위해 Agent Evolving Learning (AEL) 프레임워크를 제안합니다. AEL은 두 가지 시간 척도(two-timescale)로 작동합니다. 빠른 시간 척도에서는 Thompson Sampling bandit가 최적의 메모리 검색 정책을 결정하고, 느린 시간 척도에서는 LLM 기반 반성(reflection) 메커니즘이 실패패
4월 24일3
arXiv중요논문
StructMem: 장기 행동을 위한 구조화된 메모리 프레임워크
장기간의 대화나 복잡한 작업을 수행하는 에이전트에게는 단순 사실 나열 이상의 관계적 기억 능력이 필수적입니다. 기존 방식은 평면 메모리(Flat memory)로는 구조 파악에 한계가 있고, 그래프 기반 메모리(Graph-based memory)는 구축 비용과 불안정성이 높습니다. 본 논문에서 제안하는 StructMem은 이러한 문제를 해결하기 위해 이벤트 수준의 바인딩을 유지하고 교차 이벤트를 유도하는 계층적 메모리 프레임워크입니다. 구조화된 접근 방식을 통해 시간적 추론(temporal reasoning) 및 다단계 질문 응답(m
4월 24일3
arXiv논문
LLM의 문화적 편향성 분석: 왜 일본 문화에 집착하는가?
본 연구는 대규모 언어 모델(LLMs)이 지닌 문화적 커버리지 및 지역 편향성 문제를 다룹니다. 기존 연구들이 주로 서구 중심의 시각을 분석하는 데 그쳤다면, 본 논문은 '문화 관련 개방형 질문 (CROQ)'이라는 새로운 데이터셋을 구축하여 LLM의 지역 선호도를 심층적으로 조사했습니다. 놀랍게도, LLMs는 특정 국가(특히 일본)에 대한 명확한 경향성을 보였습니다. 또한, 입력 언어가 영어와 같은 고자원어일 때 더 다양한 출력을 내보내며, 해당 언어가 공식 언어인 국가의 질문에는 답변하는 데 소극적임을 발견했습니다. 이 문화적 편
4월 24일3