Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
arXiv cs.CL (NLP) 1801건필터 해제
arXiv논문
MADS: 지시어 튜닝 (Instruction Tuning)을 위한 모델 인지적 다양 코어 세트 선택 방법
LLM의 지시어 미세 조정 시 데이터 효율성을 높이기 위해 모델의 신경 활성화 상태를 활용하는 MADS 방법론을 제안합니다. 텍스트 특징 대신 모델 고유의 활성화 특징을 기반으로 코어 세트를 선택하여 데이터 요구량을 줄이면서도 성능을 향상시킵니다.
6월 1일0
arXiv논문
dMoE: 학습 가능한 블록 전문가를 활용한 dLLM
dLLM의 블록 병렬 디코딩과 토큰 수준 MoE 간의 불일치 문제를 해결하기 위한 dMoE 프레임워크를 제안합니다. 블록 단위로 전문가 분포를 집계하여 활성화되는 전문가 수를 줄임으로써 메모리 병목을 완화하고 추론 속도를 가속화합니다.
6월 1일0
arXiv논문
PatchWorld: 실행 가능한 월드 모델의 그래디언트 프리 (Gradient-Free) 최적화
PatchWorld는 오프라인 궤적을 실행 가능한 Python 월드 모델로 변환하는 그래디언트 프리 프레임워크입니다. 블랙박스 예측 대신 상징적 믿음 상태 프로그램을 유도하여 에이전트의 계획 능력을 향상시킵니다. 실험 결과, LLM 호출 없이도 높은 계획 성공률을 기록하며 관측 충실도와 의사결정 효용 간의 트레이드오프를 발견했습니다.
6월 1일0
arXiv논문
RLHF의 이면: 보상 모델의 자기 지도 개선을 위한 온폴리시 (On-Policy) 피드백
언어 모델 정렬 시 발생하는 데이터 확보 병목 현상을 해결하기 위해, 가치 함수를 활용한 온폴리시 RM 학습 프레임워크인 SAVE를 제안합니다. SAVE는 적응형 앵커를 통해 온폴리시 응답을 지도 학습 데이터로 변환하여 보상 모델의 성능을 효과적으로 개선합니다.
6월 1일0
arXiv논문
UniScale: 모델 라우팅과 테스트 시간 스케일링의 온라인 공동 최적화를 통한 적응형 통합 추론 스케일링
UniScale은 모델 라우팅과 테스트 시간 스케일링(TTS)을 단일 최적화 공간으로 통합한 새로운 추론 프레임워크입니다. LinUCB 알고리즘을 활용해 동적인 환경에서 추론 품질과 계산 비용 사이의 최적의 균형을 온라인으로 학습합니다.
6월 1일0
arXiv논문
BlueFin: 금융 스프레드시트에서의 LLM 에이전트 벤치마킹
금융 스프레드시트 작업에 특화된 LLM 에이전트 성능 평가 벤치마크인 BlueFin을 소개합니다. 131개의 복잡한 과업과 정교한 루브릭을 통해 기존 최첨단 모델들의 한계를 분석하고 평가 프레임워크를 제공합니다.
6월 1일0
arXiv논문
증거에 주목하라: 멀티모달 RLVR을 위한 증거 기반 공간 어텐션 감독 (Evidence-Anchored Spatial Attention
EASE는 멀티모달 RLVR 모델의 성능을 높이기 위해 시각적 증거 과정 감독을 도입한 새로운 방법론입니다. 높은 보상을 받은 궤적에 대해 응답-이미지 어텐션을 가이드함으로써, 모델이 언어적 사전 지식에 의존하지 않고 실제 시각적 증거에 기반해 답변하도록 유도합니다.
6월 1일0
arXiv논문
독성 환각 (Toxic HallucinAItions): 프롬프트 섭동 및 LLM 회로 추적
프롬프트의 어조와 독성 수준이 LLM의 사실적 신뢰성에 미치는 영향을 연구한 논문입니다. 독성 어휘가 포함된 프롬프트는 모델의 정확도를 낮추고 불확실성을 높이며, 내부 활성화 분석을 통해 특정 노드가 선택적으로 증폭됨을 확인했습니다.
6월 1일0
arXiv논문
EMBGuard: Embodied Agents의 안전한 계획 수립을 위한 위험 인지 가드레일 구축
EMBGuard는 MLLM 기반 체화된 에이전트(Embodied Agents)의 물리적 위험을 식별하기 위한 안전 가드레일 프레임워크입니다. 에이전트 정책과 위험 추론을 분리하여 시각적 관찰과 행동 쌍을 평가하며, 소형 모델로도 고성능 모델에 필적하는 위험 인지 능력을 보여줍니다.
6월 1일0
arXiv논문
TUX: 인간과 AI 사이의 암묵적 이해(Tacit Understanding) 측정
인간과 AI 사이의 암묵적 이해를 측정하기 위한 새로운 지표인 TUX를 제안합니다. Wavelength 게임에서 영감을 얻은 과업을 통해 인간의 주관적 판단과 AI의 판단 사이의 유사성을 정량화하고, 개인적 특성이 암묵적 정렬에 미치는 영향을 분석했습니다.
6월 1일0
arXiv논문
MineExplorer: Minecraft 내 MLLM 에이전트의 오픈 월드 탐사 능력 평가
Minecraft 환경에서 MLLM 에이전트의 오픈 월드 탐사 능력을 평가하기 위한 새로운 벤치마크인 MineExplorer를 제안합니다. 멀티 에이전트 합성 워크플로를 통해 신뢰도 높은 멀티홉 과업을 생성하며, 기존 모델들이 긴 궤적의 복잡한 과업 수행에서 한계를 보임을 입증했습니다.
6월 1일0
arXiv논문
인문학 연구를 위한 AI 확장: 증거 기반 학술 활동을 위한 멀티 에이전트 프레임워크
인문학적 연구의 특성인 증거 기반 해석과 정독을 지원하기 위한 멀티 에이전트 프레임워크 SPIRE를 제안합니다. SPIRE는 출처 발견부터 논증적 합성까지의 과정을 에이전트 역할로 분담하여 기존 RAG 방식보다 높은 신뢰도의 학술적 추론을 수행합니다.
6월 1일0
arXiv논문
대규모 언어 모델(LLMs)은 제도적 경험을 인코딩하는가? 모호성 하에서의 교차 언어적 도덕적 추론을 통한 증거
LLM이 언어에 내재된 제도적 경험을 인코딩하여 도덕적 추론에 반영하는지 연구했습니다. 실험 결과, 명시적 프레이밍보다 제도적 모호성이 존재할 때 언어별 제도적 차이가 도덕적 판단의 차이로 더 뚜렷하게 나타남을 확인했습니다.
6월 1일0
arXiv논문
EvoGens: 과학적 아이디어 생성을 위한 인구 기반 휴리스틱 탐색 프레임워크
EvoGens는 LLM의 의미론적 수렴 문제를 해결하기 위해 진화적 탐색 메커니즘을 도입한 새로운 프레임워크입니다. 순위 기반 변이와 의미론적 인지 교차를 통해 과학적 아이디어의 참신함과 다양성을 획기적으로 높였습니다.
6월 1일0
arXiv논문
ImmersiveTTS: 멀티모달 Diffusion Transformer와 도메인 특화 표현 정렬을 이용한 환경 인지형 텍스트 음성 변환
ImmersiveTTS는 멀티모달 Diffusion Transformer를 활용하여 환경 맥락에 자연스럽게 통합된 음성을 생성하는 모델입니다. 음성과 환경 오디오의 차이를 극복하기 위해 도메인 특화 표현 정렬 기술을 도입하여 자연스러움과 명료도를 높였습니다.
6월 1일0
arXiv논문
자기회귀 트랜스포머(Autoregressive Transformers)에서의 인지적 피로: 정식화 및 측정
자기회귀 언어 모델의 생성 과정 중 발생하는 성능 저하 현상을 '인지적 피로(cognitive fatigue)'로 정의하고 이를 측정하는 Fatigue Index(FI)를 제안합니다. 연구 결과, FI는 모델의 성능 저하와 반복성을 높은 정확도로 예측하며 모델 크기에 따른 독특한 스케일링 특성을 보여줍니다.
6월 1일0
arXiv논문
인용 사이의 행간 읽기: 과학 문헌을 위한 유형화된 주장 네트워크 (A Typed Claim Network for Scientific
기존 지식 그래프가 놓치던 문서 간의 입장(Stance)을 포착하기 위해 '유형화된 주장 네트워크(Typed Claim Network)'를 제안합니다. 인용 의도를 포함한 4개 클래스의 레이블을 통해 문서 간 관계를 구체화하며, RAG 성능 향상과 위상 분석에 효과적임을 입증했습니다.
6월 1일0
arXiv논문
보고서를 생성하는가, 아니면 템플릿을 반복하는가? 3D CT 보고서 생성에서의 템플릿 붕괴(Template Collapse) 측정 및 완화
3D 의료 영상 모델이 유창하지만 정확도가 낮은 템플릿을 반복하는 '템플릿 붕괴' 현상을 정의하고 이를 진단하는 체계적인 방법을 제시합니다. 이를 해결하기 위해 임상적 탐지와 언어 합성을 분리한 CLarGen 프레임워크를 제안하여 보고서의 정확도를 크게 향상시켰습니다.
6월 1일0
arXiv논문
설계 단계부터 추적 가능하도록: EU 규제 협의 분석을 위한 LLM 파이프라인 및 대시보드
EU 규제 협의 데이터를 분석하기 위해 LLM 기반의 엔드 투 엔드 파이프라인과 대시보드를 제안합니다. 이 시스템은 PDF와 웹 양식 데이터를 처리하여 축자적 인용구에 근거한 주제 주석을 생성하며, 높은 투명성과 추적성을 제공합니다.
6월 1일0
arXiv논문
MoG: 그래프 기반 검색 증강 생성(RAG)을 위한 전문가 혼합(Mixture of Experts) 방식
MoG는 그래프 기반 RAG를 위해 MoE(Mixture of Experts) 방식을 도입한 새로운 프레임워크입니다. 허브 그래프와 도메인 특화 전문가 그래프를 활용하여 검색 범위를 최적화하고 추론 성능을 높입니다.
6월 1일0