Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
arXiv cs.CL (NLP) 1795건필터 해제
arXiv논문
잘못된 방식의 올바름: LLM에서의 미스파이어드 얼라인먼트(Misfired Alignment) 정량화 및 국소화
LLM이 안전을 위해 학습된 얼라인먼트로 인해 명시적 증거를 무시하고 정당한 결론을 거부하는 '미스파이어드 얼라인먼트' 현상을 분석합니다. 새로운 벤치마크 VETO와 지표 MAR을 통해 최신 모델들이 고정관념 관련 질문에서 증거를 무시하는 경향을 정량화했습니다.
6월 18일0
arXiv논문
EARS: 대규모 멀티 에이전트 시스템(MAS)에서 신뢰할 수 있는 서브 에이전트 모델링을 위한 설명 가능한 기권 (Explanatory
대규모 멀티 에이전트 시스템(MAS)에서 서브 에이전트의 신뢰성을 높이기 위한 EARS 프레임워크를 제안합니다. 서브 에이전트가 단순히 답변을 거부하는 대신, 실패 원인과 근거를 코디네이터에게 전달하여 시스템의 전체 응답 통과율을 향상시킵니다.
6월 18일0
arXiv논문
RegMix-D: 프록시 학습 궤적(Proxy Training Trajectories)을 통한 동적 데이터 믹싱
RegMix-D는 LLM 사전 학습 시 데이터 믹스를 동적으로 조정하는 새로운 방법론을 제안합니다. 기존의 정적 믹스 방식과 달리, 프록시 실행의 전체 손실 궤적을 활용하여 학습 단계별 최적의 데이터 비율을 예측합니다.
6월 18일0
arXiv논문
좌절된 동기화로서의 어텐션 (Attention as Frustrated Synchronization)
어텐션 메커니즘을 진동자 네트워크의 '좌절된 동기화(Frustrated Synchronization)' 관점에서 재해석한 FSN 아키텍처를 제안합니다. FSN은 기존 Transformer보다 적은 파라미터와 학습 예산으로도 더 낮은 검증 손실을 기록하며 우수한 성능을 입증했습니다.
6월 18일0
arXiv논문
ForecastBench-Sim: 시뮬레이션 세계 기반의 예측 벤치마크
시뮬레이션 세계를 기반으로 한 새로운 예측 벤치마크인 ForecastBench-Sim을 소개합니다. Freeciv 게임 엔진을 활용하여 현실 세계의 제약을 극복하고, 인과적 질문과 희귀 사건을 포함한 다양한 예측 과제를 제공합니다.
6월 18일0
arXiv논문
Morpheus: 터키어를 위한 형태소 인식 신경망 토크나이저 및 워드 임베더
교착어인 터키어의 특성을 반영하여 형태소 경계를 인식하는 신경망 토크나이저 및 임베더인 Morpheus를 제안합니다. 이 모델은 손실 없는 토큰화와 효율적인 워드 임베딩 생성을 동시에 수행하며, 기존 서브워드 방식보다 높은 형태소 정렬 성능과 낮은 메모리 사용량을 보여줍니다.
6월 18일0
arXiv논문
TW-LegalBench: 대만 법률 이해도 측정
대만 법률 시스템에 특화된 LLM 성능 측정 벤치마크인 TW-LegalBench를 제안합니다. 객관식, 주관식 에세이, 판결 예측 등 세 가지 유형의 과제를 통해 13개 모델을 평가했습니다.
6월 18일0
arXiv논문
LLM은 서로 다른 숙련도를 가진 학생들을 구분하는 요소를 측정하는 데 어려움을 겪는다: 독해 평가에서의 문항 변별도에 관한 연구
LLM이 독해 평가에서 학생의 숙련도를 구분하는 '문항 변별도'를 얼마나 정확히 측정할 수 있는지 연구했습니다. 42개의 모델을 평가한 결과, 직접 예측과 응답 기반 방식 모두 인간의 변별도와 낮은 상관관계를 보여 LLM 기반 심리측정의 한계를 드러냈습니다.
6월 18일0
arXiv논문
LegalWorld: 법률 에이전트를 위한 생애 주기 상호작용 환경
민사 소송의 인과적 의존성을 모델링하기 위해 개발된 생애 주기 상호작용 환경인 LegalWorld를 소개합니다. 기존 벤치마크의 한계를 넘어 5단계의 연결된 시나리오와 LongJud-Bench를 통해 법률 에이전트의 일관성과 능력을 평가합니다.
6월 18일0
arXiv논문
대규모 언어 모델(LLM)의 암기 완화를 위한 출력 벡터 편집 (Output Vector Editing)
LLM의 데이터 암기 문제를 해결하기 위해 뉴런 활성화 대신 출력 벡터를 수정하는 새로운 편집 방식을 제안합니다. MLP 뉴런의 출력 벡터를 최소한으로 수정하여 잔차 스트림에 대한 기여도를 재지정함으로써, 모델 성능 저하 없이 암기된 시퀀스를 효과적으로 억제합니다.
6월 18일0
arXiv논문
SAMA: 통합된 저자원 멀티모달 정보 추출을 위한 의미론적 앵커 정렬 증강 (Semantic Anchor-aligned
SAMA는 데이터 부족 문제를 해결하기 위해 의미론적 앵커를 활용한 통합 멀티모달 정보 추출(MIE) 증강 프레임워크입니다. CME-MLLM과 앵커 보존 확산 메커니즘을 통해 고충실도의 합성 데이터를 생성하며, 기존 방식보다 뛰어난 성능을 입증했습니다.
6월 18일0
arXiv논문
RedactionBench
LLM의 개인정보(PII) 비식별화 성능을 맥락적 무결성 관점에서 평가하기 위한 새로운 벤치마크인 RedactionBench를 소개합니다. 기존 NER 방식의 한계를 극복하기 위해 문자 수준 지표인 R-Score를 도입하였으며, 다양한 모델의 맥락적 비식별화 성능을 분석했습니다.
6월 18일0
arXiv논문
단일 벡터에서의 손실: 청크 증거 집계(Chunk Evidence Aggregation)를 통한 긴 문서 검색(Long-Document
긴 문서 검색 시 단일 벡터 인코딩으로 인해 결정적인 정보가 희석되는 문제를 해결하기 위해 DICE(Document Inference via Chunk Evidence)를 제안합니다. DICE는 문서를 청크 단위로 인코딩한 후 이를 집계하는 training-free 전략으로, 긴 문맥에서도 높은 검색 성능을 유지합니다.
6월 18일0
arXiv논문
스칼라 점수를 넘어: 방사선 보고서의 임상적 유의성 평가를 위한 LLM 기반 지표 탐색
방사선 보고서의 임상적 정확성을 평가하기 위해 LLM 기반의 새로운 지표를 연구합니다. 기존 모델들이 무해한 표현 변화에 과도한 벌점을 주는 판별 편향을 확인하였으며, 이를 해결하기 위해 경량화된 해석 가능한 지표를 제안합니다.
6월 18일0
arXiv논문
HandwritingAgent: 확장 가능한 벡터 공간에서의 언어 기반 필기 합성
HandwritingAgent는 대규모 추론 모델을 활용하여 SVG 형식의 자연스러운 필기 시퀀스를 합성하는 언어 기반 에이전트입니다. 기존 모델의 높은 계산 비용과 제어 능력 부족을 해결하며, 텍스트와 참조 이미지를 통해 정교한 필기 스타일 제어가 가능합니다.
6월 18일0
arXiv논문
GateMem: 다중 주체 공유 메모리 에이전트의 메모리 거버넌스 벤치마킹
다중 주체 공유 메모리 환경을 위한 새로운 벤치마크인 GateMem을 소개합니다. 이 연구는 에이전트의 메모리 유용성, 권한 기반 액세스 제어, 그리고 능동적 망각 능력을 의료, 사무 등 다양한 도메인에서 평가합니다.
6월 18일0
arXiv논문
보상 엔지니어링을 넘어: 긴 문맥 강화학습 (Long-Context Reinforcement Learning)을 위한 데이터 레시피
긴 문맥 추론 능력을 향상시키기 위해 보상 엔지니어링 대신 데이터 중심의 접근 방식을 제안합니다. 검색, 증거 합성, 추론 작업을 포함한 8개의 데이터셋 레시피를 통해 Qwen 모델의 벤치마크 성능과 에이전트 작업 수행 능력을 크게 개선했습니다.
6월 18일0
arXiv논문
ScholarSum: 지식 그래프 추론 및 성찰적 정교화를 통한 학생-교사 방식의 생성적 요약
ScholarSum은 지식 그래프와 학생-교사 방식의 상호작용을 활용하여 과학 문헌의 생성적 요약을 수행하는 프레임워크입니다. 지식 그래프를 통해 전역적 논리를 포착하고, 교사 역할을 하는 검토자가 초안을 반복적으로 정교화하여 사실적 충실성을 높입니다.
6월 18일0
arXiv논문
시퀀스 레이블링(Sequence Labelling)을 위한 근사 구조적 확산(Approximate Structured Diffusion)
시퀀스 레이블링의 표현력 한계를 극복하기 위해 확산 모델(Diffusion)을 활용하는 새로운 연구를 소개합니다. 기존 CRF 방식의 장거리 의존성 문제를 해결하여 품사 태깅(POS-tagging) 오류를 16.5% 감소시켰습니다.
6월 18일0
arXiv논문
합성 데이터를 활용한 증류를 통한 효율적인 금융 언어 이해
금융 분야의 데이터 부족 문제를 해결하기 위해 합성 데이터를 활용한 지식 증류(distillation) 프레임워크를 제안합니다. 클러스터링 기반의 시드 선택을 통해 소형 모델이 최소한의 라벨링만으로도 높은 금융 감성 분석 성능을 달성할 수 있음을 입증했습니다.
6월 18일0