Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
arXiv cs.CL (NLP) 1799건필터 해제
arXiv논문
정리 후 검색: 효율적인 에이전트를 위한 계층적 메모리 탐색
LLM 에이전트의 장기 과업 수행 시 발생하는 컨텍스트 과부하 문제를 해결하기 위해 계층적 메모리 구조인 HORMA를 제안합니다. 경험을 파일 시스템처럼 구조화하여 상세 정보를 유지하면서도 효율적인 탐색과 검색이 가능하도록 설계되었습니다.
6월 14일0
arXiv논문
계층 격리 평가: No-LLM, 회귀 고정 테스트 하네스를 통한 프로덕션 LLM 에이전트의 결정론적 스캐폴드 게이팅
LLM 에이전트의 성능 저하 원인을 정확히 파악하기 위해 계층별로 격리하여 평가하는 '계층 격리 평가' 방법론을 제안합니다. No-LLM 방식의 결정론적 테스트 하네스를 통해 각 구성 요소의 결함을 빠르게 국지화하고 CI 환경에서 검증할 수 있습니다.
6월 14일0
arXiv논문
UR-BERT: 보편적 로마자 표기 및 음성 토큰 예측을 통한 대규모 다국어 TTS용 텍스트 인코더 확장
UR-BERT는 로마자 전사 기반의 텍text-to-speech(TTS) 인코더로, 기존 G2P 방식의 언어 제한을 극복하여 495개 언어까지 확장이 가능합니다. 음성 토큰 예측 목적 함수를 도입하여 음성 인지적 음소 표현을 학습함으로써 음성 충실도와 정렬 성능을 높였습니다.
6월 14일0
arXiv논문
Goal-Autopilot: 무인 장기 계획 에이전트를 위한 검증 가능한 조작 방지 방화벽
무인 상태로 실행되는 장기 계획 LLM 에이전트의 신뢰성 문제를 해결하기 위한 'Autopilot' 실행 모델을 제안합니다. 에이전트가 검증되지 않은 성공을 허위로 보고하는 것을 방지하기 위해 유한 상태 머신(FSM)을 활용하여 작업 상태를 구조적으로 관리합니다.
6월 14일0
arXiv논문
MedCTA: 임상 도구 에이전트를 위한 벤치마크
의료 AI 에이전트의 도구 사용 및 실행 능력을 평가하기 위한 새로운 벤치마크인 MedCTA를 소개합니다. 멀티모달 임상 데이터를 기반으로 도구 선택부터 실행 안정성까지 프로세스 전반을 엄격하게 평가합니다.
6월 14일0
arXiv논문
RLCSD: 대조적 온폴리시 자기 증류를 이용한 강화학습 (Reinforcement Learning with Contrastive
RLCSD는 온폴리시 자기 증류 과정에서 발생하는 '특권 유도 스타일 드리프트' 문제를 해결하기 위한 새로운 강화학습 방법론입니다. 정답과 오답 힌트 간의 간극을 대조함으로써 모델이 스타일 변화 대신 작업 수행 토큰에 집중하도록 유도합니다.
6월 14일0
arXiv논문
ICA Lens: 별도의 사전(Dictionary) 학습 없이 언어 모델을 해석하기
ICA Lens는 별도의 사전(Dictionary) 학습 없이 독립 성분 분석(ICA)을 활용해 언어 모델의 해석 가능한 방향을 찾는 새로운 방법론을 제안합니다. SAE와 달리 추가적인 신경망 학습 없이도 효율적이고 신뢰할 수 있는 계층별 분석을 가능하게 합니다.
6월 14일0
arXiv논문
사용자 측 메모리의 기질 비대칭성: 진단 프레임워크
LLM의 사용자 측 메모리를 행동 일관성, 사실적 존재, 사실적 부재의 세 가지 축으로 분해하여 분석한 연구입니다. gamma-LoRA와 RAG의 성능 차이를 규명하고, RLHF가 이러한 비대칭성을 강화하는 '정렬 세금' 현상을 진단 프레임워크를 통해 제시합니다.
6월 14일0
arXiv논문
UniReason-Med: 의료 VQA의 2D-to-3D 전이를 위한 공유된 접지된 추론 인터페이스 (Shared Grounded
UniReason-Med는 2D 의료 이미지의 접지된 추론 능력을 3D 의료 VQA로 전이하기 위한 단일 체크포인트 프레임워크입니다. 공유된 박스 구문과 영역 토큰 주입을 통해 텍토 텍스트 추론과 시각적 증거를 정렬하며, 새로운 데이터셋인 UniMed-CoT를 통해 성능을 입증했습니다.
6월 14일0
arXiv논문
헤이 챗, 나를 가르쳐 줄 수 있니? 실제 학습 환경에서의 인간 학습을 위한 소크라테스식 대화 구조화
LLM을 활용한 교육 환경에서 커리큘럼 구성, 소크라테스식 대화, 지식 상태 추론을 분리하여 수행하는 새로운 프레임워크를 제안합니다. 선수 지식 그래프와 PPO 정책을 결합하여 학생의 학습 속도와 효율성을 기존 모델보다 크게 향상시켰습니다.
6월 14일0
arXiv논문
개방형 작업 전반에 걸친 언어 모델의 자동화된 창의성 평가
LLM의 창의성을 다양한 작업에 걸쳐 정량화할 수 있는 도메인 불가지론적 자동화 프레임워크를 제안합니다. 의미론적 엔트로피와 멀티 에이전트 판사 프레임워크를 통해 참신성, 다양성, 작업 완수 능력을 체계적으로 평가합니다.
6월 14일0
arXiv논문
Interleaved Stacking을 이용한 빠른 음성 기초 모델 (Speech Foundation Model) 증류
음성 기초 모델(SFM)의 증류 과정을 가속화하기 위한 새로운 스태킹 방법인 'Interleaved Stacking'을 제안합니다. 기존 스태킹 방식의 성능 저하 문제를 해결하기 위해 레이어 위치를 일관되게 유지하며, SUPERB 데이터셋을 통해 그 효과를 검증했습니다.
6월 14일0
arXiv논문
Lius: Kupang Malay를 위한 지속적 지시어 튜닝 (Continual Instruction Tuning) 기반의 번역 모델 기반
저자원 언어인 Kupang Malay 번역 성능을 높이기 위해 지속적 지시어 튜닝(CIT) 방식을 제안합니다. 이중 언어 사전을 활용한 지시어 설계로 기존 모델 대비 뛰어난 번역 성능을 입증했습니다.
6월 14일0
arXiv논문
MultiToP: 비디오 거대 멀티모달 모델(Video Large Multimodal Models)의 환각 현상을 완화하기 위한 시각적 토큰
비디오 거대 멀티모달 모델(Video LMM)의 환각 현상을 완화하기 위한 새로운 프레임워크 MultiToP를 제안합니다. 신뢰할 수 없는 시각적 토큰을 동적인 전역 패치 토큰으로 교체하여 비디오 이해의 정확도를 높입니다.
6월 14일0
arXiv논문
프로덕션 LLM 시스템에서의 외부 경험 서빙: 품질-비용 트레이드오프에 관한 배포 지향적 연구
프로덕션 LLM 시스템에서 외부 경험을 주입할 때 발생하는 품질과 비용 간의 트레이드오프를 분석한 연구입니다. 무조건적인 프롬프트 주입보다 검색 기반의 선택적 주입이 운영 효율성 측면에서 더 우수함을 입증했습니다.
6월 14일0
arXiv논문
WorldReasoner: 언어 모델 에이전트가 타당한 추론을 통해 사건을 예측하는지 평가하기
언어 모델 에이전트가 불완전한 정보로 사건을 예측할 때, 단순 정답률을 넘어 추론의 타당성을 평가하는 프레임워크 WorldReasoner를 제안합니다. 이 벤치마크는 결과, 증거, 추론 품질의 세 가지 축을 통해 에이전트의 예측 능력을 다각도로 검증합니다.
6월 14일0
arXiv논문
문법 제약 디코딩 (Grammar-Constrained Decoding)이 LLM을 악성 코드 생성으로 유도하는 탈옥(Jailbreak)
문법 제약 디코딩(GCD)을 악용하여 LLM이 악성 코드를 생성하도록 유도하는 새로운 탈옥 공격 방식인 CodeSpear를 소개합니다. 이에 대응하여 문법 제약 하에서도 안전한 동작을 유지하는 방어 기법인 CodeShield를 제안합니다.
6월 14일0
arXiv논문
ART를 이용한 멀티모달 LLM 미세 조정: 예술 기반 강화 학습 (Art-based Reinforcement Training)
ART(Art-based Reinforcement Training)는 동결된 MLLM의 시각적 입력만을 최적화하여 미세 조정을 수행하는 새로운 PEFT 기술입니다. 기존 LoRA나 소프트 프롬프팅과 달리 계산 그래프를 수정하지 않아 vLLM 같은 고처리량 엔진에서도 활용이 가능합니다.
6월 14일0
arXiv논문
당신의 감정을 이해합니다: 대화 시스템의 다국어 감정 검증을 통한 심층적인 정서적 지원 강화
본 연구는 대화 시스템의 정서적 지원 강화를 위해 감정적 검증(Emotional validation)에 초점을 맞췄습니다. 이를 위해 120k 규모의 영어-일본어 다국어 코퍼스 M-EDESConv와 음성 테스트 세트 M-TESC를 공개했습니다. 또한, 다국어 감정 인식 게이트 유닛 MEGUMI 및 EmoValidBench 벤치마크를 제안하며 LLM의 정서 이해 개선 필요성을 제시합니다.
6월 14일0
arXiv논문
강건한 추론을 위한 뇌 유도 언어 모델을 통한 표현 정렬 그 이상
LLM의 내부 표현과 인간의 뇌 신경 신호 간의 대응 관계를 분석하고, 뇌 유도 프레임워크를 통해 모델의 추론 능력을 향상시키는 연구입니다. fMRI 신호를 활용해 모델 표현을 조종함으로써 다양한 LLM에서 추론 정확도를 크게 개선했습니다.
6월 14일0