Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
arXiv cs.CL (NLP) 1801건필터 해제
arXiv논문
생성형 AI의 다원적 정렬을 위한 페르소나 기반 평가 프레임워크
단일 벤치마킹의 한계를 극복하기 위해 다양한 인간의 관점을 반영하는 페르소나 기반 평가 프레임워크를 제안합니다. 합성 인지 프로필을 활용해 다원적 정렬을 시도하며, 평가 과정에서의 일관성 유지와 동적 규제 메커니즘의 필요성을 논합니다.
6월 1일0
arXiv논문
TRACE: 적응 인식 프로빙을 통한 지속적 미세 조정(Continual Fine-Tuning)용 작업별 파라미터 발견
지속적 미세 조정 시 발생하는 치명적 망각 문제를 해결하기 위해, 적응 인식 프로빙을 통해 작업별 핵심 파라미터를 식별하는 TRACE 방법론을 제안합니다. 짧은 웜스타트 프로브를 활용해 각 작업에 필수적인 파라미터 서브셋을 찾아내어 이전 지식을 보존하면서도 효율적인 학습을 가능하게 합니다.
6월 1일0
arXiv논문
프롬프트 인젝션에서 지속적인 제어까지: 에이전트 하네스(Agentic Harness)를 트로이 목마 백도어로부터 방어하기
LLM 에이전트가 파일 읽기/쓰기 및 도구 호출을 수행할 때 발생하는 다단계 트로이 목마 공격 위협을 분석합니다. 새로운 벤치마크 ClawTrojan을 통해 공격 성공률을 입증하고, 이를 방어하기 위한 동적 방어 체계인 DASGuard를 제안합니다.
6월 1일0
arXiv논문
LLM은 중국어 영생략(Zero Pronouns)에 대해 얼마나 알고 있는가?
본 연구는 중국어의 영생략(Zero Pronouns) 현상에 대한 LLM의 처리 능력을 체계적으로 조사합니다. 식별부터 번역까지 다양한 언어학적 과제를 통해 평가한 결과, 최신 추론 중심 모델조차 영생략 처리에서 낮은 성능을 보임을 확인했습니다.
6월 1일0
arXiv논문
조합적 합성: 원자적 분해 및 재결합을 통한 코드 RLVR 스케일링
RLVR(검증 가능한 보상을 활용한 강화학습)의 확장성 문제를 해결하기 위해 ADR(원자적 분해 및 재결합) 프레임워크를 제안합니다. 코드를 원자적 요소로 분해하고 재결합하여 참신하고 도전적인 데이터셋을 생성함으로써 모델의 코딩 능력을 효과적으로 향상시킵니다.
6월 1일0
arXiv논문
AdaptR1: 멀티홉 질의응답(Multi-hop QA)에서의 강화학습(RL) 기반 적응형 인터리브 사고(Adaptive Interleaved
AdaptR1은 멀티홉 질의응답 시 발생하는 과잉 사고 문제를 해결하기 위해 강화학습 기반의 적응형 인터리브 사고 프레임워크를 제안합니다. 각 단계마다 추론 예산을 동적으로 할당하여 성능을 유지하면서도 불필요한 사고 토큰을 획기적으로 줄입니다.
6월 1일0
arXiv논문
다층적 이벤트 의미론 마이닝을 통한 효과적인 긴 영상 이벤트 예측 연구
긴 영상의 복잡한 서사를 이해하고 미래 이벤트를 예측하기 위한 VISTA 프레임워크를 제안합니다. 캐릭터 중심의 시각적 프롬프트와 지식 강화 반복 검색 전략을 통해 세부 의미론과 서사적 일관성을 동시에 강화합니다.
6월 1일0
arXiv논문
정적인 대화를 넘어: 현실적이고 이질적이며 진화하는 장기 기억 벤치마킹
기존 LLM 메모리 벤치마크의 정적이고 단조로운 한계를 극복하기 위해 새로운 벤치마크인 RHELM을 제안합니다. RHELM은 동적인 페르소나 진화와 이질적인 데이터 스트림을 통합하여 실제와 유사한 장기 기억 능력을 평가합니다.
6월 1일0
arXiv논문
ConsisGuard: LLM 가드레일에서 안전성 숙의와 정책 집행의 정렬
LLM 가드레일에서 추론 과정과 실제 결정 사이의 불일치인 '숙의-집행 격차'를 해결하기 위한 ConsisGuard 프레임워크를 제안합니다. 정책-결정 궤적 증류와 기능적 결합 정렬을 통해 안전 정책의 충실한 실행을 보장합니다.
6월 1일0
arXiv논문
GRKV: 긴 컨텍스트 LLM을 위한 학습 불필요 KV 캐시 압축용 전역 회귀 (Global Regression)
GRKV는 긴 컨텍스트 LLM의 메모리 오버헤드를 줄이기 위한 학습 불필요(training-free) KV 캐시 압축 방법론입니다. 리지 회귀를 활용해 제거된 토큰의 정보를 유지된 토큰에 분산시켜, 기존 스팬 기반 방식의 과도한 병합 문제를 해결합니다.
6월 1일0
arXiv논문
TSM-Bench: 실제 Wikipedia 편집 관행에서의 LLM 생성 텍스트 탐지
Wikipedia의 실제 편집 사례를 반영한 새로운 LLM 생성 텍스트 탐지 벤치마크인 TSM-Bench를 소개합니다. 기존 탐지기들이 특정 작업 중심의 기계 생성 텍스트를 식별하는 데 어려움을 겪으며 정확도가 크게 하락함을 입증했습니다.
6월 1일0
arXiv논문
저자원 언어를 위한 위키피디아 기반 다국어 및 교차 언어 인용 필요성 탐지
저자원 언어를 위한 다국어 인용 필요성 탐지(CND) 코퍼스인 MCN을 소개합니다. 연구 결과, 특정 작업에 미세 조정된 소형 언어 모델(SLM)이 프롬프트를 사용하는 대규모 언어 모델(LLM)보다 저자원 언어 환경에서 더 우수한 성능을 보였습니다.
6월 1일0
arXiv논문
EvoDefense: 대규모 언어 모델(LLM)을 활용한 공동 진화형 블랙박스 방어 기법
EvoDefense는 블랙박스 환경에서 LLM을 보호하기 위한 경험 유도형 공동 진화 방어 기법입니다. 가드 LLM과 경험 메모리 모듈을 통해 공격과 방어 전략을 지속적으로 개선하며, 재학습 없이도 미지의 공격에 효과적으로 대응합니다.
6월 1일0
arXiv논문
누구를 신뢰할 것인가를 학습하기: 이벤트 기반 금융 RAG를 위한 Frozen LLM의 시장 피드백 적응형 검색
금융 RAG 시스템에서 LLM을 동결한 상태로 외부 베이지안 소스 메모리를 활용해 검색 성능을 최적화하는 연구를 소개합니다. 시장 피드백을 통해 검색 계층을 적응시킴으로써 뉴스 및 공시 데이터 기반의 수익률 예측 성능과 샤프 지수를 크게 향상시켰습니다.
6월 1일0
arXiv논문
Mellum2 기술 보고서
Mellum 2는 소프트웨어 엔지니어링에 특화된 12B 규모의 오픈 웨이트 MoE 언어 모델입니다. 2.5B의 활성 파라미터만 사용하여 효율적인 추론이 가능하며, 코드 생성, 다단계 추론, 도구 사용 능력이 뛰어납니다.
6월 1일0
arXiv논문
풍력 터빈 유지보수 로그 레이블링 프레임워크: 신뢰성 인텔리전스의 의미론적 추출을 통한 LLM 기반 데이터 교정 및 강화
풍력 터빈의 비정형 유지보수 로그를 LLM을 활용해 체계적으로 구조화하는 새로운 방법론을 제시합니다. 9년간의 데이터를 바탕으로 모델 불가지론적 프레임워크를 통해 고장 모드와 조치 사항을 자동 분류하고 데이터 품질을 강화합니다.
6월 1일0
arXiv논문
원칙적인 샘플 선택을 통한 효율적인 LLM 어닐링(Annealing)을 향하여
LLM 사전 학습의 최종 단계인 어닐링 과정에서 효율적인 데이터 선택을 위한 새로운 프레임워크 DiReCT를 제안합니다. 손실 경관의 스펙트럼 기하학을 활용하여 그래디언트 업데이트의 방향성 제약 조건을 충족하는 샘플을 식별함으로써 모델 성능을 최적화합니다.
6월 1일0
arXiv논문
MuPHI: 의미론적으로 근거를 둔 보상 최적화를 통한 암시적 멀티모달 유해성 추론 학습
기존 VLM이 놓치기 쉬운 암시적 멀티모달 유해성을 탐지하기 위한 새로운 데이터셋 MuPHI와 학습 프레임워크 MuPHIRM을 제안합니다. 다각적 보상 최적화를 통해 모델의 추론 능력과 분포 외 강건성을 동시에 향상시킵니다.
5월 29일1
arXiv논문
연속 변수에 대한 인과적 개입: 인컨텍스트 러닝 (In-Context Learning)을 위한 스티어링 벡터 (Steering
언어 모델의 이산적 특징을 넘어 연속 변수에 대한 인과적 개입 방법을 제안합니다. 스티어링 벡터를 통해 동사 편향과 같은 등급이 매겨진 특징을 편집할 수 있음을 입증하며, 인컨텍스트 러닝과의 연관성을 분석합니다.
5월 29일0
arXiv논문
교차 언어 토크나이저 수술 및 오프라인 증류를 통한 다국어 임베딩 모델의 터키어 적응
터키어 특화 문장 임베딩 모델인 embeddingmagibu-200m을 제안하는 논문입니다. 교차 언어 토크나이저 수술과 오프라인 증류를 활용한 3단계 파이프라인을 통해 효율적인 적응 방식을 선보입니다.
5월 29일0