Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
arXiv cs.CL (NLP) 1801건필터 해제
arXiv논문
복잡한 임상 의사결정에서 AI 평가자의 차별성은 채점 프로토콜에 따라 달라진다
임상 의사결정 평가에서 AI 평가자의 채점 행동이 채점 프로토콜에 따라 어떻게 달라지는지 분석한 연구입니다. 루브릭(Rubric) 유무가 AI 평가자의 변별력과 점수 산출 방식에 미치는 영향을 정량적으로 규명했습니다.
6월 3일0
arXiv논문
WebRISE: MLLM 생성 웹 아티팩트를 위한 요구사항 유도 상태 평가
MLLM이 생성한 웹 아티팩트의 상호작용 능력을 평가하기 위한 새로운 벤치마크인 WebRISE를 제안합니다. 요구사항 유도 상태와 전이를 기반으로 한 상호작용 계약 그래프(ICG)를 통해 기존 방식보다 정밀한 평가가 가능함을 입증했습니다.
6월 3일0
arXiv논문
독아론적 초지능은 협력적이지 않을 가능성이 높다
현재의 AI 연구가 강력한 에이전트 개발에만 집중하는 '독아론적' 방식에서 벗어나, 상호 의존성을 고려한 '비독아론적' 패러다임으로 전환해야 한다고 주장합니다. AI 배포 시 발생하는 환경 변화와 불일치를 해결하기 위해 협력적 설계와 제도적 접근이 필수적임을 강조합니다.
6월 3일0
arXiv논문
ARBOR: 검색 에이전트를 위한 재사용 가능한 루브릭 버퍼 기반의 온라인 프로세스 보상 (Online Process Rewards)
ARBOR은 검색 에이전트의 학습 효율을 높이기 위해 재사용 가능한 루브릭 버퍼를 활용하는 온라인 프로세스 보상 프레임워크입니다. 기존의 결과 중심 보상 방식이 가진 그래디언트 소실 문제를 해결하며, 쿼리 간 공통 루브릭을 통해 프로세스 수준의 정교한 보상을 제공합니다.
6월 3일0
arXiv논문
고정된 문장 임베딩(Frozen Sentence Embedding)에서 복잡도 조건화(Complexity Conditioning)가 도움이
고정된 문장 임베딩 모델에 복잡도 조건화(Complexity Conditioning)를 적용하여 성능 향상을 연구했습니다. 문장 단위가 아닌 문장 쌍(Pair) 단위의 난이도 신호를 활용할 때 성능이 개선됨을 확인했습니다.
6월 3일0
arXiv논문
구조를 통한 검색(Retrieve), 재순위화(Rerank), 생성(Generate)의 촉진
문서 기반 대화 시스템(DGDS)에서 문서의 구조적 정보를 활용하여 검색, 재순위화, 생성 성능을 높이는 SF-Re2G 방법론을 제안합니다. 기존의 독립적 구절 단위 접근 방식이 가진 문맥 부족 문제를 해결하기 위해 섹션 내 대조 학습과 서브그래프 기반 재순위화를 도입했습니다.
6월 3일0
arXiv논문
단어와 길: 독일어 의료 NLP를 위한 도메인 특화 BERT 사전 학습 전략
독일어 의료 분야에 특화된 RoBERTa 기반 언어 모델인 ChristBERT를 제안합니다. 다양한 도메인 적응 전략을 비교 분석하여 독일어 임상 NLP 분야에서 새로운 SOTA를 달성했습니다.
6월 3일0
arXiv논문
“관계자 귀하”를 넘어: 청중과 의도에 맞춘 기계 번역 (Machine Translation) 맞춤화
사용자의 의도와 청중에 맞춘 목적 기반 기계 번역(Purpose-driven MT)의 성능을 체계적으로 평가한 연구입니다. LLM을 활용한 명시적 지시문이 기존의 퓨샷 예시나 문맥보다 번역 적응성을 높이며, 기존 평가지표가 이러한 맞춤화 품질을 제대로 측정하지 못함을 밝혀냈습니다.
6월 3일0
arXiv논문
VistaHop: Visual DeepSearch를 위한 멀티홉 시각적 추론 벤치마킹
멀티모달 대규모 추론 모델(MLRM)의 복잡한 시각적 추론 능력을 평가하기 위한 새로운 벤치마크 VistaHop을 소개합니다. 기존 벤치마크가 놓치고 있는 반복적 이미지 조사와 멀티홉 근거 통합 능력을 측정하며, 실험 결과 현재 모델들의 성능이 매우 낮음을 확인했습니다.
6월 3일0
arXiv논문
SEA-NLI: 동남아시아 문화적 이해를 들여다보는 렌즈로서의 자연어 추론 (Natural Language Inference)
동남아시아 문화권의 이해도를 측정하기 위한 새로운 NLI 벤치마크인 SEA-NLI를 소개합니다. 8개국 언어를 대상으로 실험한 결과, 기존 모델들이 문화적 지식 부족으로 인해 지식 집약적 분야에서 낮은 성능을 보임을 확인했습니다.
6월 3일0
arXiv논문
LLM에서의 다국어 언러닝 (Multilingual Unlearning): 전이, 역학 및 가역성
본 연구는 영어 중심의 언러닝 연구를 넘어 5개 언어로 확장된 다국어 언러닝의 전이성과 역학을 분석합니다. 언러닝이 주로 후기 디코딩 레이어에서 표면적 억제를 유도한다는 점을 발견했으며, 이를 통해 언러닝된 지식을 상당 부분 복구할 수 있음을 입증했습니다.
6월 3일0
arXiv논문
SagaQA: TV 시리즈의 장편 서사 이해를 위한 멀티홉 추론 (Multi-hop Reasoning) 벤치마크
TV 시리즈의 장편 서사를 이해하기 위한 멀티홉 추론 벤치마크인 SagaQA를 소개합니다. 기존의 국소적 이해를 넘어 에피소드 간 정보를 연결하는 장거리 추론 능력을 평가하며, 다양한 에이전트 계획 전략의 성능을 분석합니다.
6월 3일0
arXiv논문
스크립트에서 의미론까지: 아프리카 NLI를 위한 프롬프팅 전략
저자원 아프리카 언어의 자연어 추론(NLI) 성능을 높이기 위한 다양한 프롬프팅 전략을 연구했습니다. Llama3.2와 Gemma 모델을 대상으로 실험한 결과, 대조적(Contrastive) 프롬프팅이 가장 안정적인 성능 향상을 보였습니다.
6월 3일0
arXiv논문
이상적인 지시를 넘어: 실제 상호작용 환경에서의 LLM 평가를 위한 포괄적 프레임워크
기존 LLM 벤치마크가 실제 사용자의 모호함과 비협조적 행동을 반영하지 못하는 한계를 극복하기 위해 RUT-Bench를 제안합니다. 19개 모델을 테스트한 결과, 복잡한 비이상적 시나리오에서 모든 모델의 성공률이 40% 미만으로 나타났습니다.
6월 3일0
arXiv논문
CAPER: Text-to-SQL을 위한 절(Clause) 정렬 프로세스 감독
CAPER은 Text-to-SQL 시스템의 성능 향상을 위해 SQL 추상 구문 트리(AST)를 활용한 절(Clause) 수준의 감독 프로세스를 제안합니다. 이를 통해 오류의 근본 원인을 파악하고 보상 모델링을 최적화하여 실행 정확도를 크게 개선했습니다.
6월 3일0
arXiv논문
실제 소비자 기기 수리 질문에 대한 LLM의 효과성 평가
소비자 기기 수리 질문에 대한 LLM의 성능을 평가하기 위해 Reddit 데이터를 기반으로 한 새로운 벤치마크를 제안합니다. 정확성, 완전성, 실용성, 안전성 기준을 통해 6개 모델을 분석한 결과, LLM이 유용할 수 있으나 고위험 수리 작업에는 여전히 신뢰도가 낮음을 확인했습니다.
6월 3일0
arXiv논문
SemEval-2026 Task 9: 양극화 탐지를 위한 프롬프트 변체 평가를 수행한 Lingo_Research_Group
SemEval-2026 Task 9를 위해 Lingo_Research_Group이 제안한 양극화 탐지 연구입니다. 12개의 다양한 프롬프트 설계를 통해 aya-101 및 Gemma3-27B 모델의 성능을 다국어 환경에서 평가했습니다.
6월 3일0
arXiv논문
의미론을 넘어: 시각-언어 데이터로부터 사실적 및 정서적 지각 경험 모델링하기
이미지의 객관적 사실과 주관적 정서적 측면을 모델링하는 P-Topics 개념과 이를 구현하는 PercepT 아키텍처를 제안합니다. 비지도 학습을 통해 시각-텍스트 클러스터를 동적으로 발견하고 이미지를 관련 지각 경험에 매핑하는 2단계 구조를 가집니다.
6월 3일0
arXiv논문
샘플링되지 않은 진실: SLM의 심리측정학은 심리적 구성 개념이 아닌 프롬프트 아티팩트를 측정한다
SLM(소형 언어 모델)의 심리측정 평가 시 모델의 출력이 실제 추론 능력이 아닌 프롬프트 구성 요소에 의한 아티팩트를 측정할 위험이 있음을 밝힙니다. 연구팀은 프롬프트 변형 프레임워크를 통해 모델이 심리적 특성보다 프롬프트 준수 여부에 더 크게 반응함을 증명했습니다.
6월 3일0
arXiv논문
잔차 연결 (Residual Connection)을 결합한 어텐션 기반 LSTM 네트워크를 이용한 음성 감정 인식 (Speech Emotion
잔차 연결(Residual Connection)과 소프트 어텐션(Soft Attention)을 결합한 경량 LSTM 아키텍처인 ResLSTM-SA를 제안합니다. 이 모델은 매우 적은 파라미터로도 기존 대규모 모델에 필적하는 음성 감정 인식 성능을 보여줍니다.
6월 3일0