Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
arXivAI 번역논문
영어 품질 분류기를 다국어 대규모 언어 모델(LLM) 사전 학습 데이터 선택에 적용하는 방법
본 연구는 기존 영어 품질 분류기를 다국어 변형으로 확장하여 100개 이상의 언어로 LLM 사전 학습 데이터의 품질 필터링을 수행하는 방법을 제안합니다. 트랜스포머 인코더 임베딩과 MLP를 사용하여 다국어 텍스트에 적용하고, 그 성능이 기존 기준선 대비 우수함을 입증했습니다.
10월 9일1
arXivAI 번역논문
UXBench Pro: 다중 턴 대화 상호작용에서 개인화된 사용자 경험 평가
본 논문은 다중 턴 대화 상호작용에서 사용자 경험(UX) 평가의 한계를 극복하기 위해 UXBench Pro를 제안합니다. 이는 실제 사용자 데이터를 기반으로 하며, 개인화된 사용자 보상 모델(URM)과 사용자 시뮬레이터 Sim4Eval을 결합한 이중 관점 패러다임을 도입했습니다. 이를 통해 사용자의 개별적인 기대치와 복잡한 상호작용 맥락에서의 평가가 가능해졌습니다.
10월 9일1
arXivAI 번역논문
대규모 언어 모델에서 프롬프트된 거짓 응답 시 추론 토큰 스파이크 모니터링
본 연구는 LLM의 사고 과정 모니터링이 어려워지자, 추론 토큰 개수라는 낮은 대역폭 신호를 활용하여 모델의 거짓 응답을 탐지하는 방법을 제안합니다. 세 가지 능력을 가진 모델에 대해 진실/거짓 응답 시 추론 토큰 사용량을 비교한 결과, 명시적으로 프롬프트된 비진실 응답이 더 많은 토큰을 유발함을 확인했습니다.
10월 8일1
arXivAI 번역논문
직접 기대 디코딩 라운드를 최소화하여 병렬 추측 초안 모델 훈련하기
본 연구는 LLM 추론 속도 가속화 기술인 추측 디코딩(Speculative decoding)의 초안기 훈련 문제를 다룹니다. 기존 방법들이 전역 효율성을 최적화하지 못하는 한계를 지니자, 본 논문은 이를 마르코프 보상 과정으로 공식화하여 기대 디코딩 라운드(EDR) 목표를 도출했습니다. 이 EDR 프레임워크는 편향되지 않은 확률적 최적화와 정확한 오프라인 평가기를 제공하며, 실제 벤치마크에서 기존 방법보다 우수한 성능을 입증했습니다.
10월 8일1
arXivAI 번역논문
CoTrace: Harness-Model 공동 진화를 통한 터미널 에이전트 학습 데이터 레시피
본 논문은 터미널 에이전트 학습 데이터의 효율성을 높이기 위해 'CoTrace'라는 새로운 프레임워크를 제안합니다. CoTrace는 하네스 검색과 정책 학습을 분리하는 교대 공동 진화 방식을 도입하여, 궤적의 출처와 가치를 명시적으로 관리합니다. 이를 통해 적은 컴퓨팅 자원으로도 모델 성능 향상을 달성하고, 다양한 환경에서의 전이 성능을 개선할 수 있음을 입증했습니다.
10월 8일1
arXivAI 번역논문
어떤 롤아웃이 그것을 가르쳤는가? BehaviorTrace와 온라인 RL에서 학습 데이터 귀속의 한계
본 논문은 강화학습(RL)이 언어 모델에게 가르친 행동의 훈련 출처를 추적하는 문제에 대해 연구합니다. 'BehaviorTrace'라는 오픈 평가 하네스를 공개하고, 그래디언트 스케칭과 유창성 같은 다양한 방법론을 사용하여 온라인 RL 파인튜닝 과정에서 데이터 귀속의 한계를 탐구했습니다.
10월 8일1
arXivAI 번역논문
RunningTab: 환경 측 탭을 이용한 직접 워크스페이스 상호작용
본 글은 LLM 에이전트가 워크스페이스 파일과 상호작용하는 과정에서 발생하는 정보 누락 문제를 해결하기 위한 RunningTab 프레임워크를 소개합니다. 이 프레임워크는 환경 측 탭을 추가하여, 작업의 요구사항, 읽힌 파일 출처(provenance), 미개봉 후보군 등을 에이전트와 함께 기록하고 추적할 수 있게 합니다.
10월 8일1
arXivAI 번역논문
PHRBench: 대규모 언어 모델(LLM)의 환각 후 추론에 대한 행동적 평가
본 연구는 LLM의 환각된 정보가 이후 추론 과정에 미치는 영향을 분석하기 위해 PHRBench라는 통제된 벤치마크를 제안합니다. 이 벤치마크는 환각 준수도, 회피, 휴리스틱 수정 등 행동적 관점에서 추론 과정을 특징지어 LLM의 오류 해결 능력을 평가합니다.
10월 8일1
arXivAI 번역논문
행동하기 전에 재구성하기: 비전-언어-행동 모델의 언어 민감도 특성화 및 완화
본 연구는 비전-언어-행동 모델(VLAs)이 지침 구문에 극도로 민감하다는 문제를 다룹니다. 단어 수정만으로 성공률이 크게 변하는 현상을 특성화하고, 이를 완화하기 위해 재구성 규칙을 추출하여 모든 입력 지침을 다시 작성하는 방법을 제안합니다. 이 방법은 추가 훈련 없이도 성능 향상과 일반화 능력을 높입니다.
10월 8일1
arXivAI 번역논문
EngramEdit: 조건부 메모리를 통한 LLM의 분리된 지식 업데이트
EngramEdit은 조건부 메모리를 활용하여 LLM의 사실적 지식을 독립적으로 업데이트하는 새로운 아키텍처입니다. 이 방법은 목표 메모리 표현을 계산하고, 이를 기반으로 공유되는 n-gram 임베딩을 공동 업데이트합니다. 실험 결과, EngramEdit은 높은 편집 성공률과 함께 다단계 추론 및 CoT 프롬프팅에서 강력한 성능 향상을 입증했습니다.
10월 8일1
arXivAI 번역논문
전문가 안내 기반 증명 탐색에서 자동화된 미해결 문제 해결까지
본 글은 LLM이 수학 연구에 기여하는 방식을 다루며, 다중 에이전트 오픈 소스 시스템인 Bolzano을 소개합니다. 이 시스템은 verifier agent와 병렬 prover agents를 활용하여 사람이 읽기 쉬운 연구 상태를 유지합니다. 초기 전문가 안내 기반 사용 이후, 3,800개의 미해결 문제 중 약 200개를 성공적으로 해결하는 성과를 보여주었습니다.
10월 8일1
arXivAI 번역논문
잠재 공간에서의 평가: 의미 보존 압축을 통한 효율적인 생성적 보상 모델링
본 논문은 의미 보존 압축을 통해 효율적인 생성적 보상 모델링 프레임워크인 LatentGRM을 제안합니다. LatentGRM은 텍스트 평가를 직접 생성하지 않고도 자율적인 쌍별 판단을 지원하는 연속 궤적을 학습하여, 추론 비용을 크게 절감합니다. 이는 경쟁력 있는 판단 품질을 유지하면서 효율성을 높이는 방법을 제시합니다.
10월 8일1
arXivAI 번역논문
귀를 먹먹하게 하는 침묵: 데이터가 말하지 않은 토큰의 출력 임베딩에 남아있는 치명적 망각
본 논문은 LLM의 지속적인 사전 학습 및 미세 조정 과정에서 발생하는 '치명적 망각' 현상을 분석했습니다. 연구진은 망각이 특정 토큰의 출력 임베딩에 국소적으로 집중됨을 밝혀냈으며, 이는 코퍼스의 어휘 부족과 관련 깊습니다. 이를 해결하기 위해 훈련 중 출력 투영(output projection)에 대한 Adam의 $\epsilon$ 값을 높이는 개입을 제안했고, 이 방법이 다양한 모델에서 높은 망각 제거율을 보였습니다.
10월 8일1
arXivAI 번역논문
MIRROR: 모방에서 내재화로의 LLM 개인화
본 논문은 LLM 개인화가 단순한 스타일 모방을 넘어 사용자 선호도 내재화로 진화해야 한다고 주장합니다. 이를 위해 MIRROR라는 새로운 자체 증류 프레임워크를 제안하며, 참조 토큰 모방을 온정책 자체 증류로 대체하여 사용자의 고유 표현과 선호도를 모델에 깊이 내재화하는 방법을 제시했습니다.
10월 8일1
arXivAI 번역논문
작업 결과로부터 LLM 에이전트를 위한 어드바이저 훈련
본 논문은 LLM 에이전트의 성능 향상을 위해 'Caddie'라는 비평가(critic) 훈련 방법을 제안합니다. Caddie는 작업 진행 중 자연어 분석과 조언을 제공하는 비평가를, 최종 성공 여부로부터 학습하도록 강화학습으로 최적화합니다. 이 방법은 다양한 기본 모델에 적용 가능하며, MuSiQue 벤치마크에서 기존 대비 높은 성능 향상을 입증했습니다.
10월 8일1
arXivAI 번역논문
LiveMACE: 진화하는 시장에서 LLM 에이전트 역량의 프로세스 기반 평가
본 글은 LLM 에이전트를 단순히 최종 결과로만 평가하는 한계를 지적하며, 실시간 금융 시장을 활용한 프로세스 기반 벤치마크 'LiveMACEBench'를 제안합니다. 이 벤치마크는 도구 사용, 메모리, 규칙 준수 등 여러 메커니즘별 진단을 통해 에이전트의 실제 역량을 측정할 수 있게 합니다.
10월 8일1
arXivAI 번역논문
다중 벡터 시각 문서 인덱스 역변환 공격
본 연구는 다중 벡터 시각 문서 검색기(retriever)가 저장된 패치 벡터 인덱스만으로도 원본 페이지를 재현할 수 있는 '역변환 공격'의 가능성을 제시합니다. ViDoRe v3 벤치마크에서 이 공격은 높은 복구율과 검색 정확도를 보였으며, 기존 보호 방법으로는 충분하지 않음을 입증했습니다.
10월 8일1
arXivAI 번역논문
Argo-Bench: 기업 규모 워크플로우에서 데이터 에이전트 평가
Argo-Bench는 기존의 텍스트-투-SQL 한계를 넘어선 데이터 에이전트 평가 프레임워크입니다. 뉴욕시 푸드 배달 플랫폼을 시뮬레이션한 대규모 ERP 웨어하우스를 기반으로, 단순 쿼리 생성을 넘어 탐색과 행동(사기 차단, 인센티브 할당 등)까지 요구합니다. 이를 통해 실제 엔터프라이즈 데이터 사이언스 워크플로우에 적합한 에이전트 성능을 측정할 수 있습니다.
10월 7일1
arXivAI 번역논문
PhantomEnvironments: 가상의 세계에서 LLM 에이전트 훈련하기
본 논문은 기존의 고비용 데이터나 위험한 환경에 의존하던 LLM 에이전트 훈련 방식을 개선했습니다. 'PhantomEnvironments'라는 가상의 합성 환경을 구축하여, LLMs를 규칙만으로 생성된 다중 턴 RL 환경에서 훈련시킬 수 있음을 제시합니다. 이 단순하고 저렴한 환경은 실제 세계의 복잡한 검색 및 추론 작업에 높은 전이 성능을 보였습니다.
10월 7일1
arXivAI 번역논문
AI 토큰의 가치는 얼마인가? 야생 AI 생성 웹 텍스트에 대한 스케일링 법칙
본 연구는 웹 데이터에 AI 생성 텍스트(야생 AI 텍스트)가 증가함에 따라 언어 모델 사전 학습에 미치는 영향을 분석했습니다. 추가된 AI 토큰 비율 변화에 따른 보류 손실을 측정하고, 기존 스케일링 법칙으로는 예측할 수 없는 새로운 이점 및 해로움 항을 가진 스케일링 법칙을 제안합니다.
10월 7일1