Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
arXivAI 번역논문
SimOPD: 온-정책 증류를 위한 관계적 지식 전이
본 논문은 온-정책 증류(OPD)의 한계를 극복하기 위해 SimOPD를 제안합니다. 기존 방식이 가진 지도 추출 및 전이의 복잡성을 해결하고자, 응답 유사성 기반의 대조 학습을 활용하여 교사의 내부 지식을 효과적으로 학생 모델에 전달하는 방법론입니다.
4일 전0
arXivAI 번역논문
동등한 CER, 불균등한 손상: OCR을 위한 심각도 가중치 문자 오류율 (Severity-Weighted Character Error
본 논문은 기존 OCR 및 VLM의 표준 지표인 CER이 모든 오류에 동일한 비용을 부과하는 한계를 지적하며, '심각도 가중치 문자 오류율(semCER)'을 제안합니다. semCER는 LLM 심사관이 각 편집 단위에 부여하는 심각도를 반영하여, 어느 부분이 더 중요한지 세분화된 평가를 가능하게 합니다.
10월 15일1
arXivAI 번역논문
번역에 실패한 이유: 낮은 편향 점수가 더 공정한 모델을 의미하지 않는 이유
본 연구는 다국어 언어 모델의 편향 감사 방식에 의문을 제기하며, 단순히 영어 평균 고정관념 점수와 다른 언어에서의 차이를 공정성의 지표로 해석하는 것이 부정확할 수 있음을 보여줍니다. 8개 언어로 10개의 오픈 모델을 테스트한 결과, 낮은 평균 편향 점수가 곧 높은 공정성을 의미하지 않으며, 번역 과정에서 발생하는 노이즈와 파이프라인 오류가 주요 원인임을 분석했습니다.
10월 15일1
arXivAI 번역논문
AdaRSI: 체화 에이전트를 위한 온디맨드 재귀적 자기 개선
본 논문은 체화 에이전트의 한계점인 장기 지평선 작업 실패 문제를 해결하기 위해 온디맨드 재귀적 자기 개선(AdaRSI) 프레임워크를 제안합니다. AdaRSI는 실행기의 가중치를 필요할 때만 변경하고, 코딩 에이전트가 스스로 수집한 경험을 바탕으로 신뢰도가 낮은 하위 단계만을 미세 조정하는 방식입니다. GR00T N1.5와 RoboCasa365 환경에서 테스트 결과, 기존 VLA 대비 복합 작업 성공률을 크게 향상시켰습니다.
10월 15일1
arXivAI 번역논문
ReaDy: 하이브리드 선형 어텐션 대규모 언어 모델의 추측적 초안 작성을 위한 동적 컨텍스트로서의 순환 상태
ReaDy는 하이브리드 선형 어텐션(HLA) 모델의 순환 상태를 활용하여 추측적 디코딩(Speculative decoding)을 수행하는 새로운 방법을 제안합니다. 이 방법은 초안 작성 과정에서 위치별 컨텍스트 검색을 통해 효율적인 보충 컨텍스트 소스를 제공하며, 기존 방식 대비 높은 성능 향상을 입증했습니다.
10월 15일1
arXivAI 번역논문
ChronoCulture: 대규모 언어 모델(LLMs)의 시간 경과에 따른 문화 인식 평가
본 논문은 LLMs의 한계점을 지적하며, 기존 벤치마크가 문화를 정적인 속성으로 취급하는 문제를 제기합니다. 이를 해결하기 위해 72개국에서 수집된 종단적 설문조사 데이터를 기반으로 'ChronoCulture'라는 시간적 변화를 측정하는 새로운 벤치마크를 제시했습니다.
10월 15일1
arXivAI 번역논문
PrismaCoder: 분해된 루브릭 합성을 통해 개방형 멀티모달 코드 인텔리전스 경계를 확장하다
본 논문은 멀티모달 코드 인텔리전스의 개방형 발전을 위해 PrismaForge라는 계층적 데이터 파이프라인을 제안합니다. 이 파이프라인은 합성된 루브릭에 초점을 맞춰 데이터를 검증 가능한 기준으로 분해하며, 이를 통해 방대한 오픈 데이터셋인 PrismaCoder-2M을 구축했습니다. 또한, 이 데이터를 활용하여 성능 높은 모델인 PrismaCoder-9B와 PrismaCoder-35B를 공개합니다.
10월 15일0
arXivAI 번역논문
VASPO: 특권 가치 추정 기반의 자기 증류
본 논문은 특권 가치 추정 기반의 자기 증류(VASPO) 방법을 제안합니다. 이 방법은 온-폴리시 자기 교사를 활용하여 모델에 밀도 높은 감독을 제공하며, PPO 프레임워크 내에서 효과적으로 통합됩니다. VASPO는 비평가와 자기 교사가 학생이 생성한 접두사에서 특권 정보를 평가함으로써 성능을 향상시키고, 여러 수학 추론 벤치마크에서 우수한 정확도를 입증했습니다.
10월 15일0
arXivAI 번역논문
Manacá-1B-Instruct-2: 네이티브 브라질 포르투갈어 LLM의 재현 가능한 안전 정렬에 대한 연구. Negative DPO 결과
본 논문은 브라질 포르투갈어에 특화된 LLM인 Manacá-1B-Instruct-2를 제시하며, 안전 정렬(safety alignment)의 재현 가능한 연구 결과를 제공합니다. 특히 DPO 시도와 전용 안전 SFT 과정을 문서화하고, 외부 모델 대비 높은 안전성 구간 하한을 입증했습니다.
10월 15일0
arXivAI 번역논문
발견 확장을 위해서는 망각이 필요하다
LLM 에이전트를 활용한 자동화된 연구는 유망하지만, 에이전트가 과거의 경험에 고정되어 정체되는 한계가 있습니다. 본 논문은 이러한 발견 확장의 핵심 열쇠로 '망각(forgetting)'을 제시합니다. 검색 상태와 이력을 주기적으로 폐기하고 최고의 후보부터 재시작하는 것이 성능 향상에 효과적임을 입증했습니다.
10월 15일1
arXivAI 번역논문
PerSo: 실제 설득 시나리오에서 거대 언어 모델(LLMs)의 사회 지능 측면 조사
본 논문은 LLM의 사회 지능을 평가하기 위해 실제 설득 시나리오를 활용한 새로운 벤치마크 PerSo를 제안합니다. 이 벤치마크는 타인의 정신 상태 추론(인지적 지능)과 적절한 행동 선택(행동적 지능) 두 측면을 모두 다룹니다. 평가 결과, LLM은 모델 크기에 따라 성능이 확장되지만, 최고의 인간 참가자는 인지적 작업에서 여전히 우위를 보였습니다.
10월 15일1
arXivAI 번역논문
테스트 시간 학습을 통한 잠재적 압축 (Latent Compaction with Test-Time Training)
본 논문은 긴 컨텍스트 처리 시 발생하는 KV 캐시의 메모리 및 어텐션 비용 문제를 해결하기 위해 'Latent Compaction'이라는 테스트 시간 학습 기법을 제안합니다. 이 방법은 재구성 중요도, 교사 어텐션 등을 활용하여 간결한 캐시를 학습하고, 엔드투엔드 증류를 통해 공동 최적화함으로써 압축 환경에서도 높은 검색 정확도를 유지함을 입증했습니다.
10월 15일1
arXivAI 번역논문
하나의 태스크, 여러 인터페이스: 간단한 크로스-인터페이스 일관성 학습이 LLM 에이전트 강건성을 향상시킨다
본 논문은 LLM 에이전트가 특정 인터페이스에 과도하게 의존하는 문제를 지적하고, 이를 해결하기 위해 Cross-Interface Policy Regularization (CIPR)을 제안합니다. CIPR은 두 개의 다른 인터페이스 하에서 훈련 샘플을 제시하며, 유도된 액션 분포 간의 KL 발산을 최소화하여 에이전트 정책의 강건성을 높입니다.
10월 15일1
arXivAI 번역논문
SEAR: 자체 진화하는 에이전트 로보틱스
SEAR (Self-Evolving Agentic Robotics)는 언어 모델 기반 에이전트가 스스로 로봇을 개선하는 과정을 연구하기 위한 새로운 프레임워크이자 벤치마크입니다. 이 프레임워크는 코드 작성, 실시간 작동, 자동 연구 등 세 가지 모드를 제공하며, 다양한 조건에서 에이전트의 학습 메커니즘과 성능 한계를 분석했습니다.
10월 14일2
arXivAI 번역논문
SkillScaffold: 정책 적응형 스킬 크레딧 할당 및 선택적 주입을 통한 에이전트 강화학습 (RL)의 비계 제공
본 논문은 에이전트 강화학습(RL)의 효율성을 높이기 위해 정책 적응형 스킬 비계(scaffold)인 SkillScaffold를 제안합니다. 기존 방식의 높은 비용과 불안정성 문제를 해결하기 위해, SkillScaffold는 결과 인지적 가능도 비교를 통해 저비용으로 스킬 효용성을 추정하고 선택적으로 주입하는 방법을 제시했습니다.
10월 14일1
arXivAI 번역논문
LLM 앙상블 이득은 어디에서 오는가? 후보 가치, 다양성 및 집계 분해
본 논문은 LLM 앙상블의 이득이 어디에서 오는지 분석하며, 후보 가치(Candidate Value), 다양성(Diversity), 그리고 집계 분해(Aggregation Decomposition) 관점에서 접근합니다. 네 가지 조건 하에 LLM 애그리게이터를 연구하고, 전체 후보 이득을 추가 후보 대비와 후보-문맥 대비로 분할하여 앙상블 평가의 기준점을 명확히 할 필요성을 제시합니다.
10월 14일1
arXivAI 번역논문
자가 진화 에이전트 하네스(Self-Evolving Agent Harness)
본 기사는 모델 가중치를 고정하고 프롬프트, 메모리, 워크플로우 등 소프트웨어 스캐폴딩을 수정하는 '자가 진화 에이전트 하네스(Self-Evolving Agent Harness)'를 제안합니다. 이 프레임워크는 피드백 기반 프로세스를 통해 업데이트와 수용 메커니즘을 분리하고, 지속적인 PAC-학습 및 탐색 최적화를 통해 신뢰성을 검증하는 방법을 제시합니다.
10월 14일1
arXivAI 번역논문
백투트랜슬레이션(Back-Translation)은 여전히 중요하다: LLM을 활용한 저자원 기계 번역을 위한 단일 언어 데이터 활용
본 논문은 저자원 언어의 기계 번역 성능 향상을 위해 백투트랜슬레이션(BT) 기술을 제안합니다. LLM에 적당량의 단일 언어 데이터를 활용하여 BT를 수행하는 것이, 지속적인 사전 학습이나 소규모 병렬 데이터셋으로 파인튜닝하는 것보다 훨씬 효과적임을 보여줍니다.
10월 14일1
arXivAI 번역논문
OmniCompass: 전방위 모달 비디오 접지 및 이해를 위한 종합 벤치마크
OmniCompass는 멀티모달 대규모 언어 모델(MLLMs)의 비디오 이해 능력을 종합적으로 평가하기 위해 개발된 벤치마크입니다. 이 벤치마크는 시각적 증거를 다루는 OmniCompass-VL과 오디오-비주얼 증거가 필요한 OmniCompass-AV 두 가지 트랙으로 구성됩니다. 이를 통해 시간적/공간적 접지 및 질의응답 능력을 체계적으로 진단합니다.
10월 14일0
arXivAI 번역논문
모델이 생성하기 전에 상황을 읽어라
본 논문은 LLM의 디코딩 온도를 상황적 특성에 맞춰 조정하는 새로운 프레임워크인 Scenario-Actor를 제안합니다. 이 방법은 트랜스포머 은닉 상태에서 시나리오 구조를 추출하고, 이를 기반으로 온도 값을 결정하여 모델 성능을 향상시킵니다.
10월 14일0