Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
arXiv cs.CL (NLP) 1801건필터 해제
arXiv논문
병리적 음성 인식을 위한 SpeechLLM의 FiLM 기반 화자 조건화 (Speaker Conditioning)
병리적 음성 인식을 개선하기 위해 FiLM 기반의 화자 조건화 기술을 제안합니다. 고정된 ASR 인코더의 레이어에 x-vector 정보를 주입하여 모델 가중치 수정 없이도 개별 화자에게 적응시키는 방식을 연구했습니다.
6월 5일0
arXiv논문
자아에서 타자로: LLM의 혐오 표현 주석 작업 시 인구통계학적 관점 수용 평가
LLM이 페르소나 프롬프팅을 통해 다양한 인구통계학적 관점의 혐오 표현 주석을 인간처럼 시뮬레이션할 수 있는지 평가한 연구입니다. 실험 결과, 세 가지 사회적 판단 측면을 모두 완벽히 포착하는 모델은 없었으나 Llama 3.1 기반의 대리 프롬프팅이 가장 높은 성능을 보였습니다.
6월 5일0
arXiv논문
기관 문서의 데이터 스냅샷 추출을 위한 오픈 소스 레이아웃 탐지 모델 벤치마킹
기관 문서 내 그림과 표에서 의미 있는 데이터를 추출하기 위한 새로운 벤치마크 데이터셋과 평가 프레임워크를 제안합니다. 기존 레이아웃 탐지 모델들이 운영 목적의 문서에서 겪는 한계를 분석하고, 이를 해결하기 위한 연구 자원을 공개합니다.
6월 5일0
arXiv논문
많은 회로, 하나의 메커니즘: 회로 발견에서의 입력 변동성과 평가 세분성
회로 발견 방법론에서 나타나는 구조적 차이가 실제 기능적 차이와 일치하지 않을 수 있다는 '환상 특성화' 현상을 규명합니다. Pythia 모델 실험을 통해 입력 통계 변화에 따른 회로의 구조적 변동이 동일한 계산 메커니즘을 공유함을 증명했습니다.
6월 5일0
arXiv논문
언어 모델의 사실적 아첨(Factual Sycophancy) 분해: 모델 크기와 지시어 튜닝(Instruction Tuning)이 강건성에
언어 모델이 사회적 압박에 의해 사실을 왜곡하는 '사실적 아첨' 현상을 진실 마진과 조작 민감도라는 두 가지 메커니즘으로 분해하여 분석했습니다. 모델 크기와 지시어 튜닝이 모델의 강건성에 미치는 영향을 56개 오픈 웨이트 모델을 통해 검증했습니다.
6월 5일0
arXiv논문
"Chi nas dal soch el sent de legn" -- 롬바르드어(Lombard)를 위한 텍스트 코퍼스(Text Corpora)
본 연구는 저자원 언어인 롬바르드어의 텍스트 코퍼스를 수동 감사하여 데이터 품질 문제를 분석합니다. 웹 스크래핑 데이터의 오식별 및 노이즈 문제를 지적하며, 특정 방언에 치우친 데이터 편향성을 밝혀냈습니다.
6월 5일0
arXiv논문
FOXGLOVE: 논증적 에세이에 대한 전문가 및 LLM의 목표 지향적이고 고정된 글쓰기 피드백 이해
LLM과 전문가의 논증적 에세이 피드백을 체계적으로 비교하기 위한 데이터셋 FOXGLOVE를 소개합니다. 연구 결과, LLM은 피드백 배분 방식은 전문가와 유사하나 특정 문장에 대한 고정(anchoring) 측면에서 차이를 보였습니다.
6월 5일0
arXiv논문
EDIT: 규칙 준수형 LLM 채점을 위한 증거 진단 기반 개입 학습
LLM이 루브릭(채점 기준)을 충실히 따르도록 돕는 2단계 프레임워크 EDIT를 제안합니다. 모델 내부 신호를 통해 잘못된 추론 단계를 진단하고, 신념 유도형 보상을 통해 채점 성능을 강화합니다.
6월 5일0
arXiv논문
과학자로서의 성인 인간과 LLM: 능동적 탐색(Active Exploration)의 수혜자는 누구인가?
성인의 인과 추론 능력과 LLM의 성능을 능동적 탐색 관점에서 비교 분석한 연구입니다. 능동적 탐색이 성인의 논리곱 인과 추론을 향상시키지만, LLM은 인간과 유사한 성능 격차를 보이면서도 탐색 효율성은 떨어지는 경향을 보입니다.
6월 5일0
arXiv논문
CollabSim: 통제된 멀티 에이전트 실험을 통해 LLM 에이전트의 협업 역량을 조사하기 위한 CSCW 기반 방법론
LLM 기반 멀티 에이전트 시스템(MAS)의 협업 역량을 체계적으로 분석하기 위한 새로운 시뮬레이션 프레임워크 CollabSim을 제안합니다. CSCW 이론을 바탕으로 에이전트 간의 공통 기반 구축 및 상호작용 불일치 복구 능력을 측정합니다.
6월 5일0
arXiv논문
문맥 수정 및 시뮬레이션 태도 변화: 온라인 토론에서의 LLM 기반 태도 시뮬레이션 감사
LLM이 온라인 토론에서 사용자의 태도를 얼마나 정확하게 시뮬레이션하는지 검증하기 위한 반사실적 문맥 수정 프레임워크를 제안합니다. 텍스트 및 멀티모달 전략을 통해 문맥 변화에 따른 태도 전환율을 분석하며, LLM 기반 여론 시뮬레이션의 가능성과 위험성을 동시에 탐구합니다.
6월 5일0
arXiv논문
어휘인가, 스캐폴드(Scaffold)인가? Popper식 코드 생성 기술에 대한 통제된 2단계 사전 등록 연구
LLM의 코드 생성 성능 향상이 Popper식 추론 기술의 내용 때문인지, 아니면 단순한 구조적 스캐폴드(scaffold) 때문인지 분석한 연구입니다. 실험 결과, 성능 향상의 주요 원인은 추론 내용이 아닌 스캐폴드 구조에 있음이 밝혀졌습니다.
6월 5일0
arXiv논문
Zero-shot 및 Few-shot LLM 번역을 위한 Komi-Yazva--Russian 병렬 코퍼스 및 평가 프로토콜
멸종 위기 언어인 Komi-Yazva와 러시아어 간의 번역을 위한 최초의 병렬 코퍼스와 평가 프로토콜을 제안합니다. 저자원 환경에서 LLM의 Zero-shot 및 Few-shot 번역 성능을 비교 분석하며, 재현 가능한 평가 테스트베드를 구축하는 데 목적이 있습니다.
6월 5일0
arXiv논문
강화학습(RL)을 통한 미학습 언어 번역의 문맥적 학습 유도
본 논문은 LLM이 미학습 언어를 번역할 때 특정 언어에 과적합되지 않고 문맥 내 지식을 활용하는 메타 기술을 습득하도록 하는 강화학습(RL) 방식을 제안합니다. chrF 지표를 보상으로 사용하여 인컨텍스트 학습이나 지도 미세 조정보다 뛰어난 제로샷 전이 성능을 입증했습니다.
6월 5일0
arXiv논문
USAD 2.0: 범용 오디오 이해를 위한 표현 증류 (Representation Distillation) 확장
USAD 2.0은 SSL과 지도 학습 기반 파운데이션 모델의 지식을 통합한 범용 오디오 인코더입니다. 도메인 인식 증류와 2단계 지도 학습 증류를 통해 음악 도메인까지 범위를 확장하고 10억 파라미터 규모로 모델을 확장했습니다.
6월 5일0
arXiv논문
자기 진화형 LLM 에이전트를 위한 지속적 경험 내재화의 재고
LLM 에이전트의 지속적 학습을 위한 경험 내재화 과정을 분석한 연구입니다. 다중 반복 학습 시 발생하는 능력 붕괴 문제를 해결하기 위해 경험의 입도, 주입 패턴, 내재화 체계라는 세 가지 핵심 차원을 제시합니다.
6월 4일0
arXiv논문
쿼리 기반 교차 모달 프로젝터(Query-based Cross-Modal Projector)를 통한 Mamba 멀티모달 LLM 강화
Transformer의 이차 복잡도 문제를 해결하기 위해 Mamba 구조를 활용한 멀티모달 LLM 강화 연구를 소개합니다. 쿼리 기반 교차 모달 프로젝터를 통해 시각적 토큰을 효율적으로 압축하고 2D 스캔 설계의 번거로움을 제거했습니다.
6월 4일0
arXiv논문
다국어 장문 음성 지시 이행 (Multilingual Long-Form Speech Instruction Following): IWSLT
IWSLT의 지시 이행 트랙을 위해 KIT 모델의 장문 음성 지시 이행 성능을 제시합니다. 데이터 증강 파이프라인을 통해 100만 개 이상의 장문 학습 데이터를 생성했으며, 가능도 기반 재순위화의 한계를 MBR 디코딩으로 해결하는 방법을 제안합니다.
6월 4일0
arXiv논문
TIDE: 템플릿 가이드 반복을 통한 선제적 다중 문제 발견
TIDE는 사용자 요청 없이도 컨텍스트 내 숨겨진 다중 문제를 선제적으로 발견하는 반복적 프레임워크입니다. 사고 템플릿과 반복적 발견 메커니즘을 통해 문제 커버리지를 확장하고 구체적인 해결책을 제시합니다.
6월 4일0
arXiv논문
NextMotionQA: 시각-언어 모델(VLMs)의 인간 동작 이해 벤치마킹 및 평가
인간 동작 이해를 평가하기 위한 새로운 벤치마크인 NextMotionQA를 소개합니다. VLMs를 활용해 정교한 데이터셋을 구축하고, 기존 모델들의 미세한 동작 인식 능력과 평가 도구로서의 한계를 분석했습니다.
6월 4일0