Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
arXiv cs.CL (NLP) 1795건필터 해제
arXiv논문
설명 가능한 판결 변동성을 향하여: 게이트형 멀티태스크 학습(Gated Multi-Task Learning)을 통한 사법적 재량의 정량화
사법적 재량을 정량화하기 위해 게이트형 멀티태스크 학습(Gated Multi-Task Learning) 아키텍처를 제안합니다. Gemma-4 26B-A4B를 기반으로 판사 정체성과 판결 맥락을 분리하여 모델링함으로써, 기존 SFT 방식보다 적은 파라미터로 SOTA 성능을 달성했습니다.
6월 26일0
arXiv논문
수수께끼 수수께끼: 대규모 언어 모델(LLM)과 인간의 유연한 추론 테스트
LLM이 패턴 매칭을 통해 정답을 맞히는지 아니면 유연한 추론을 하는지 검증하기 위해 '수수께끼 수수께끼' 패러다임을 제안합니다. 실험 결과, LLM은 실제 수수께끼보다 문자 그대로의 해석을 요구하는 변형 문제에서 성능이 크게 저하되어, 기존의 높은 성능이 유연한 추론보다는 기억 회상에 의존할 가능성을 시사합니다.
6월 26일0
arXiv논문
HarmVideoBench: 대규모 멀티모달 모델(LMMs)의 유해 비디오 이해 능력 벤치마킹
LMM의 유해 비디오 이해 능력을 다각도로 평가하기 위한 새로운 벤치마크인 HarmVideoBench를 제안합니다. 기존의 이진 분류 방식에서 벗어나 세 가지 계층적 차원을 통해 모델의 깊은 맥락 이해도를 측정하며, BCR 방식을 통해 성능을 크게 향상시켰습니다.
6월 26일0
arXiv논문
LLM을 이용한 예측: 피처 스티어링 (Feature Steering)을 통한 일반화 성능 향상
LLM의 예측 성능 향상을 위해 희소 오토인코더(SAE)를 사용하여 내부 피처를 분석하고 제어하는 연구입니다. 시간 인지적 피처를 증폭함으로써 모델의 앞서 보기 편향(Look-ahead bias)을 줄이고 일반화 성능을 높일 수 있음을 입증했습니다.
6월 26일0
arXiv논문
진정한 의도로 포장하다: 의도 인식 학습(Intent-Aware Training)을 통한 다양한 학습 체계에서의 LLM 안전성 분류 성능 향상
사용자의 의도를 모델링하여 LLM 안전성 분류기의 성능을 높이는 '의도 인식 학습(Intent-Aware Training)' 방법론을 제안합니다. 새로운 데이터셋 AIMS를 통해 SFT, DPO, GRPO 등 다양한 학습 체계에서 의도 모델링의 효과를 입증했습니다.
6월 26일0
arXiv논문
정원 경로 처리 난이도의 동인으로서의 구문적 신념 업데이트 (Syntactic Belief Update)
정원 경로 문장의 처리 난이도를 예측하기 위해 어휘적 놀라움 대신 '구문적 신념 업데이트'라는 새로운 지표를 제안합니다. 구문 트리 확률 분포의 업데이트 크기를 측정함으로써 인간의 언어 처리 데이터를 더 정확하게 설명할 수 있습니다.
6월 26일0
arXiv논문
파싱 표현 문법 (Parsing Expression Grammars)을 사용하여 아랍어-영어 기계 가독형 사전 구조화하기
본 논문은 아랍어-영어 Al-Mawrid 사전을 기계 가독형 구조로 변환하는 방법을 제안합니다. 파싱 표현 문법(PEG)을 활용하여 단어와 문장 부호 스트림을 계층적 구조로 변환하는 단계별 캐스케이드 방식을 설계했습니다.
6월 25일0
arXiv논문
다국어 혈액학 시각적 질의응답 (Visual Question Answering) 데이터셋
의료 영상 분석을 위한 다국어(영어, 우르두어) 혈액학 VQA 벤치마크인 WBCMor VQA를 소개합니다. 기존 영어 중심 모델의 한계를 극복하기 위해 임상적으로 검증된 이중 언어 데이터셋을 구축하였습니다.
6월 25일0
arXiv논문
Dziri Voicebot: 알제리 방언을 위한 엔드투엔드(End-to-End) 저자원 음성-대-음성(Speech-to-Speech) 대화
알제리 방언과 같은 저자원 언어를 위한 엔드투엔드 음성-대-음성(Speech-to-Speech) 대화 시스템을 제안합니다. ASR, NLU, RAG, TTS를 통합한 모듈형 파이프라인을 통해 언어적 한계를 극복하고 통신 도메인에서의 성능을 입증했습니다.
6월 25일0
arXiv논문
탐지, 언러닝(Unlearn), 복구: 데이터 포이즈닝(Data Poisoning)으로부터 텍스트 요약 모델을 방어하기
LLM의 파인튜닝 단계에서 발생하는 데이터 포이즈닝 공격을 탐지하고 복구하는 통합 방어 프레임워크를 제안합니다. 영향력 함수 분석과 행동 감사를 통해 공격을 식별하며, 언러닝 기법을 통해 모델 성능 저하를 최소화하면서 오염된 동작을 복구할 수 있음을 입증했습니다.
6월 25일0
arXiv논문
저자원 언어를 위한 텍스트 정화(Text Detoxification) 시스템 Tatoxa: 타타르어 사례 연구
저자원 언어인 타타르어를 위한 텍스트 정화 시스템 Tatoxa를 제안하는 연구입니다. 기존 LLM보다 뛰어난 성능을 보였으며, 타타르어 전용 데이터셋과 교차 언어 전이 실험 결과를 포함합니다.
6월 25일0
arXiv논문
왜 다단계 도구 사용 강화학습 (Multi-Step Tool-Use RL)이 붕괴되는가, 그리고 감독 신호 (Supervisory
다단계 도구 사용 강화학습(RL) 과정에서 발생하는 성능 붕괴 현상의 원인을 분석하고, 이를 해결하기 위한 다양한 감독 신호(supervisory signals)의 효과를 연구했습니다. 특정 제어 토큰의 확률 급증이 구조적 실패를 유발함을 밝히고, SFT와 RL의 인터리빙을 통한 안정성 개선 방안을 제시합니다.
6월 25일0
arXiv논문
문학 텍스트의 AI 번역은 "괜찮지만", 독자들은 여전히 인간의 번역을 선호한다
LLM 기반 문학 번역과 인간 번역을 비교 연구한 결과, 독자들은 유창성 측면에서 AI 번역을 '괜찮다'고 평가하면서도 몰입감과 문학적 효과 측면에서는 인간의 번역을 선호함을 확인했습니다. 또한 자동 평가 지표가 실제 독자의 선호도를 정확히 반영하지 못한다는 점을 지적하며, 새로운 평가 데이터셋인 LAIT를 공개했습니다.
6월 25일0
arXiv논문
확신이 인위적 산물일 때: 키워드 어휘 목록의 맹점과 수사적 태도 (Mis)측정
키워드 기반 어휘 목록을 활용한 통계 분석이 측정 도구의 인위적 산물(artifact)로 인해 왜곡될 수 있음을 경고합니다. LLM 기반의 의미론적 분류를 통해 기존 키워드 카운팅 방식이 가진 통사적·다의적 맹점을 증명하고 분석의 정확성을 높이는 방안을 제시합니다.
6월 25일0
arXiv논문
OCR-Reasoning은 얼마나 견고한가? 시각적 섭동(Visual Perturbations) 하에서의 시각-언어
시각-언어 모델(VLM)의 OCR 추론 견고성을 평가하기 위한 새로운 벤치마크인 OCR-Robust를 제안합니다. 시각적 섭동이 OCR 성능과 추론에 미치는 영향을 체계적으로 분석하여 모델의 취약점을 규명합니다.
6월 25일0
arXiv논문
동일한 증거, 다른 답변: 멀티모달 거대 언어 모델(MLLM)의 순서 민감도 감사
멀티모달 거대 언어 모델(MLLM)의 입력 순서 변화에 따른 답변 불안정성을 분석한 연구입니다. 18개의 모델을 대상으로 Facet-Probe를 통해 감사한 결과, 모든 모델이 순서 민감성을 보였으며 프롬프트 수정만으로는 이를 해결하기 어렵다는 점을 밝혀냈습니다.
6월 25일0
arXiv논문
실시간 음성 AI는 듣지만 경청하지는 않는다
OpenAI, Google, Alibaba의 실시간 음성 AI 모델들을 평가한 결과, 시스템들이 음성의 어조나 감정을 무시하고 텍스트 정보에만 의존하는 '정서적 지능 격차'를 발견했습니다. 모델들은 감정을 인지할 수 있음에도 불구하고 실제 의사결정 과정에서는 음향적 특성을 반영하지 못하는 한계를 보였습니다.
6월 25일0
arXiv논문
프롬프트 기반 학습을 통한 학술 논문 하이라이트의 자동 생성
본 연구는 대량의 라벨링 데이터 없이 프롬프트 기반 학습을 통해 학술 논문의 하이라이트를 자동 생성하는 방법을 제안합니다. ChatGPT와 같은 언어 모델이 작업 특화형 프롬프트 템플릿을 사용할 때 기존 지도 학습 방식과 유사하거나 이를 능가하는 성능을 보임을 입증했습니다.
6월 25일0
arXiv논문
학술 논문의 연구 난이도 측정: 자연어 처리 (NLP) 사례 연구
학술 논문의 연구 난이도와 학술적 영향력 사이의 관계를 정량적으로 평가하는 새로운 시스템을 제안합니다. NLP 분야를 사례로 엔트로피 가중치 방법을 적용하여 난이도를 산출했으며, 연구 난이도와 영향력 사이의 역 U자형 관계를 발견했습니다.
6월 25일0
arXiv논문
개선된 대규모 언어 확산 모델 (Improved Large Language Diffusion Models)
양방향 어텐션을 사용하는 마스크 확산 언어 모델인 iLLaDA를 소개합니다. 12T 토큰 사전 학습과 대규모 미세 조정을 통해 기존 LLaDA 대비 수학, 코드 등 다양한 벤치마크에서 성능을 크게 향상시켰습니다.
6월 25일0