Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
arXivAI 번역논문
ReaDy: 하이브리드 선형 어텐션 대규모 언어 모델의 추측적 초안 작성을 위한 동적 컨텍스트로서의 순환 상태
ReaDy는 하이브리드 선형 어텐션(HLA) 모델의 순환 상태를 활용하여 추측적 디코딩(Speculative decoding)을 수행하는 새로운 방법을 제안합니다. 이 방법은 초안 작성 과정에서 위치별 컨텍스트 검색을 통해 효율적인 보충 컨텍스트 소스를 제공하며, 기존 방식 대비 높은 성능 향상을 입증했습니다.
10월 15일1
arXivAI 번역논문
ChronoCulture: 대규모 언어 모델(LLMs)의 시간 경과에 따른 문화 인식 평가
본 논문은 LLMs의 한계점을 지적하며, 기존 벤치마크가 문화를 정적인 속성으로 취급하는 문제를 제기합니다. 이를 해결하기 위해 72개국에서 수집된 종단적 설문조사 데이터를 기반으로 'ChronoCulture'라는 시간적 변화를 측정하는 새로운 벤치마크를 제시했습니다.
10월 15일1
arXivAI 번역논문
PrismaCoder: 분해된 루브릭 합성을 통해 개방형 멀티모달 코드 인텔리전스 경계를 확장하다
본 논문은 멀티모달 코드 인텔리전스의 개방형 발전을 위해 PrismaForge라는 계층적 데이터 파이프라인을 제안합니다. 이 파이프라인은 합성된 루브릭에 초점을 맞춰 데이터를 검증 가능한 기준으로 분해하며, 이를 통해 방대한 오픈 데이터셋인 PrismaCoder-2M을 구축했습니다. 또한, 이 데이터를 활용하여 성능 높은 모델인 PrismaCoder-9B와 PrismaCoder-35B를 공개합니다.
10월 15일0
arXivAI 번역논문
VASPO: 특권 가치 추정 기반의 자기 증류
본 논문은 특권 가치 추정 기반의 자기 증류(VASPO) 방법을 제안합니다. 이 방법은 온-폴리시 자기 교사를 활용하여 모델에 밀도 높은 감독을 제공하며, PPO 프레임워크 내에서 효과적으로 통합됩니다. VASPO는 비평가와 자기 교사가 학생이 생성한 접두사에서 특권 정보를 평가함으로써 성능을 향상시키고, 여러 수학 추론 벤치마크에서 우수한 정확도를 입증했습니다.
10월 15일0
arXivAI 번역논문
Manacá-1B-Instruct-2: 네이티브 브라질 포르투갈어 LLM의 재현 가능한 안전 정렬에 대한 연구. Negative DPO 결과
본 논문은 브라질 포르투갈어에 특화된 LLM인 Manacá-1B-Instruct-2를 제시하며, 안전 정렬(safety alignment)의 재현 가능한 연구 결과를 제공합니다. 특히 DPO 시도와 전용 안전 SFT 과정을 문서화하고, 외부 모델 대비 높은 안전성 구간 하한을 입증했습니다.
10월 15일0
arXivAI 번역논문
발견 확장을 위해서는 망각이 필요하다
LLM 에이전트를 활용한 자동화된 연구는 유망하지만, 에이전트가 과거의 경험에 고정되어 정체되는 한계가 있습니다. 본 논문은 이러한 발견 확장의 핵심 열쇠로 '망각(forgetting)'을 제시합니다. 검색 상태와 이력을 주기적으로 폐기하고 최고의 후보부터 재시작하는 것이 성능 향상에 효과적임을 입증했습니다.
10월 15일1
arXivAI 번역논문
PerSo: 실제 설득 시나리오에서 거대 언어 모델(LLMs)의 사회 지능 측면 조사
본 논문은 LLM의 사회 지능을 평가하기 위해 실제 설득 시나리오를 활용한 새로운 벤치마크 PerSo를 제안합니다. 이 벤치마크는 타인의 정신 상태 추론(인지적 지능)과 적절한 행동 선택(행동적 지능) 두 측면을 모두 다룹니다. 평가 결과, LLM은 모델 크기에 따라 성능이 확장되지만, 최고의 인간 참가자는 인지적 작업에서 여전히 우위를 보였습니다.
10월 15일1
arXivAI 번역논문
테스트 시간 학습을 통한 잠재적 압축 (Latent Compaction with Test-Time Training)
본 논문은 긴 컨텍스트 처리 시 발생하는 KV 캐시의 메모리 및 어텐션 비용 문제를 해결하기 위해 'Latent Compaction'이라는 테스트 시간 학습 기법을 제안합니다. 이 방법은 재구성 중요도, 교사 어텐션 등을 활용하여 간결한 캐시를 학습하고, 엔드투엔드 증류를 통해 공동 최적화함으로써 압축 환경에서도 높은 검색 정확도를 유지함을 입증했습니다.
10월 15일1
arXivAI 번역논문
하나의 태스크, 여러 인터페이스: 간단한 크로스-인터페이스 일관성 학습이 LLM 에이전트 강건성을 향상시킨다
본 논문은 LLM 에이전트가 특정 인터페이스에 과도하게 의존하는 문제를 지적하고, 이를 해결하기 위해 Cross-Interface Policy Regularization (CIPR)을 제안합니다. CIPR은 두 개의 다른 인터페이스 하에서 훈련 샘플을 제시하며, 유도된 액션 분포 간의 KL 발산을 최소화하여 에이전트 정책의 강건성을 높입니다.
10월 15일1
arXivAI 번역논문
SEAR: 자체 진화하는 에이전트 로보틱스
SEAR (Self-Evolving Agentic Robotics)는 언어 모델 기반 에이전트가 스스로 로봇을 개선하는 과정을 연구하기 위한 새로운 프레임워크이자 벤치마크입니다. 이 프레임워크는 코드 작성, 실시간 작동, 자동 연구 등 세 가지 모드를 제공하며, 다양한 조건에서 에이전트의 학습 메커니즘과 성능 한계를 분석했습니다.
10월 14일2
arXivAI 번역논문
SkillScaffold: 정책 적응형 스킬 크레딧 할당 및 선택적 주입을 통한 에이전트 강화학습 (RL)의 비계 제공
본 논문은 에이전트 강화학습(RL)의 효율성을 높이기 위해 정책 적응형 스킬 비계(scaffold)인 SkillScaffold를 제안합니다. 기존 방식의 높은 비용과 불안정성 문제를 해결하기 위해, SkillScaffold는 결과 인지적 가능도 비교를 통해 저비용으로 스킬 효용성을 추정하고 선택적으로 주입하는 방법을 제시했습니다.
10월 14일1
arXivAI 번역논문
LLM 앙상블 이득은 어디에서 오는가? 후보 가치, 다양성 및 집계 분해
본 논문은 LLM 앙상블의 이득이 어디에서 오는지 분석하며, 후보 가치(Candidate Value), 다양성(Diversity), 그리고 집계 분해(Aggregation Decomposition) 관점에서 접근합니다. 네 가지 조건 하에 LLM 애그리게이터를 연구하고, 전체 후보 이득을 추가 후보 대비와 후보-문맥 대비로 분할하여 앙상블 평가의 기준점을 명확히 할 필요성을 제시합니다.
10월 14일1
arXivAI 번역논문
자가 진화 에이전트 하네스(Self-Evolving Agent Harness)
본 기사는 모델 가중치를 고정하고 프롬프트, 메모리, 워크플로우 등 소프트웨어 스캐폴딩을 수정하는 '자가 진화 에이전트 하네스(Self-Evolving Agent Harness)'를 제안합니다. 이 프레임워크는 피드백 기반 프로세스를 통해 업데이트와 수용 메커니즘을 분리하고, 지속적인 PAC-학습 및 탐색 최적화를 통해 신뢰성을 검증하는 방법을 제시합니다.
10월 14일1
arXivAI 번역논문
백투트랜슬레이션(Back-Translation)은 여전히 중요하다: LLM을 활용한 저자원 기계 번역을 위한 단일 언어 데이터 활용
본 논문은 저자원 언어의 기계 번역 성능 향상을 위해 백투트랜슬레이션(BT) 기술을 제안합니다. LLM에 적당량의 단일 언어 데이터를 활용하여 BT를 수행하는 것이, 지속적인 사전 학습이나 소규모 병렬 데이터셋으로 파인튜닝하는 것보다 훨씬 효과적임을 보여줍니다.
10월 14일1
arXivAI 번역논문
OmniCompass: 전방위 모달 비디오 접지 및 이해를 위한 종합 벤치마크
OmniCompass는 멀티모달 대규모 언어 모델(MLLMs)의 비디오 이해 능력을 종합적으로 평가하기 위해 개발된 벤치마크입니다. 이 벤치마크는 시각적 증거를 다루는 OmniCompass-VL과 오디오-비주얼 증거가 필요한 OmniCompass-AV 두 가지 트랙으로 구성됩니다. 이를 통해 시간적/공간적 접지 및 질의응답 능력을 체계적으로 진단합니다.
10월 14일0
arXivAI 번역논문
모델이 생성하기 전에 상황을 읽어라
본 논문은 LLM의 디코딩 온도를 상황적 특성에 맞춰 조정하는 새로운 프레임워크인 Scenario-Actor를 제안합니다. 이 방법은 트랜스포머 은닉 상태에서 시나리오 구조를 추출하고, 이를 기반으로 온도 값을 결정하여 모델 성능을 향상시킵니다.
10월 14일0
arXivAI 번역논문
인간이 만든 마지막 원격 감지 모델? 모든 지구 관측 작업을 재귀적 자체 개선으로 구성하기
기존의 지구 관측(EO) 모델 구축 방식은 수동적이었으나, 본 연구는 에이전트에게 이 과정을 맡겨 자동화할 수 있음을 제시합니다. 모든 검증 가능한 EO 작업은 '하네스'와 '검증기'로 구성되며, 이를 통해 일반 목적 코딩 에이전트가 모델을 구축하고 자체적으로 재귀 개선하는 새로운 패러다임을 확립했습니다.
10월 14일0
arXivAI 번역논문
HiPAD: 우울증 탐지를 위한 통합된 보행, 오디오-비주얼, 성격 융합 네트워크 및 계층적 성격 제거와 도메인 적응 LLM의 교정 한계
본 논문은 보행, 오디오-비주얼, 성격 정보를 통합한 HiPAD라는 단일 융합 네트워크를 제안합니다. 이 모델은 우울증 탐지 챌린지에 제출되었으며, 특히 피험자의 성격 설명이 다른 모달리티보다 더 많은 우울증 신호를 담고 있음을 발견했습니다. 또한, 임상 특징을 사용하거나 특정 방식으로 성격 인코더를 도메인 적응시키는 것이 성능에 미치는 영향을 분석합니다.
10월 14일1
arXivAI 번역논문
HodgePhaseNet: 트랜스포머 어텐션 내 시맨틱 플로우의 이산 호지 분해
HodgePhaseNet은 트랜스포머 어텐션 내 시맨틱 플로우를 이산 호지 분해(discrete Hodge decomposition)로 표현하여, 기존 모델들이 해결하지 못했던 전역적 일관성을 확보합니다. 이는 반대칭 실수값 1-코체인을 사용하여 방향성 심플렉시 복합체 위에서 필드를 정의하고, 고유한 직교 분해를 통해 세 가지 구성 요소 필드의 독립적인 분석을 가능하게 합니다.
10월 14일1
arXivAI 번역논문
활성화 스티어링을 메모리로 사용할 때 생존하는 것
본 연구는 에이전트의 과거 경험을 활성화 메모리(Activation memory)로 저장하고 검색하는 방식을 테스트했습니다. 이 방식은 대화의 핵심 내용만 효율적으로 파일링하며, 질문과 무관한 콘텐츠가 생존할 수 있음을 보여줍니다. 그러나 사실이나 선호도 같은 정보는 실제로 사용되는 비율이 매우 낮다는 점을 발견했습니다.
10월 14일1