Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
arXiv cs.AI 2086건필터 해제
DOA: SpeechLLM을 활용한 장문 동시 번역을 위한 학습이 필요 없는 디코더 전용 어텐션 (Decoder-Only Attention)
SpeechLLM의 디코더 전용 아키텍처를 활용하여 별도의 학습 없이 장문 동시 음성-텍스트 번역을 수행하는 DOA(Decoder-Only Attention) 기술을 제안합니다. 셀프 어텐션에서 프록시 정렬 신호를 도출하여 저지연 스트리밍 번역을 가능하게 합니다.
속성 감성 삼중항 추출(ASTE)을 위한 진단적 추론 감독 기반의 세밀한 검증
본 논문은 속성 감성 삼중항 추출(ASTE)의 신뢰성을 높이기 위해 진단적 추론 감독 기반의 검증 프레임워크인 FiVeD를 제안합니다. FiVeD는 유효성 분류와 품질 점수 추정을 통해 추출된 삼중항을 검증하며, 기존 모델의 성능을 최대 3.53 F1 포인트 향상시킵니다.
강화학습 (RL)을 위한 Answer-Set Programming 기반의 추상화
강화학습의 거대한 상태 공간 문제를 해결하기 위해 Answer-Set Programming(ASP)을 활용한 CARCASS 프레임워크의 추상화 방식을 제안합니다. Blocks World와 Minigrid 사례 연구를 통해 ASP 기반 구현이 도메인 지식을 활용한 효과적인 추상화 도구임을 입증했습니다.
중고차 판매 봇? 부분 정보 상황에서 협상 에이전트로서 LLM의 정직성과 신뢰성
정보 비대칭 상황에서 LLM 에이전트의 협상 능력과 정직성, 신뢰성을 게임 이론 관점에서 분석한 연구입니다. 미세 조정이 협상력은 높이지만 부정직함을 유발하여 에이전트 안전성에 위협이 될 수 있음을 경고합니다.
PithTrain: 컴팩트하고 에이전트 친화적인(Agent-Native) MoE 학습 시스템
PithTrain은 에이전트 친화적(Agent-Native) 설계를 통해 MoE 학습 프레임워크의 효율성을 높인 시스템입니다. 기존 프레임워크의 높은 운영 비용을 해결하기 위해 에이전트-태스크 효율성(ATE) 개념을 도입하고, ATE-Bench를 통해 성능을 검증했습니다.
GPU Forecasters: 커널 실행 시간 최적화를 위한 선택적 대리 모델로서의 언어 모델
GPU 커널 최적화 과정에서 발생하는 반복적인 하드웨어 측정 비용을 줄이기 위해 LLM을 선택적 대리 모델로 활용하는 연구를 소개합니다. LLM이 커널 성능을 예측하고 스스로의 불확실성을 판단함으로써, 제한된 GPU 예산 내에서 더 효율적인 커널 탐색을 가능하게 합니다.
AutoSci: 전체 과학 연구 라이프사이클을 위한 메모리 중심 에이전트 시스템
AutoSci는 과학 연구의 전 과정을 자동화하기 위해 설계된 메모리 중심 에이전트 시스템입니다. 장기 지식과 활성 연구 메모리를 분리하여 관리하며, 피드백을 통해 연구 절차를 스스로 개선하는 구조를 갖추고 있습니다.
대화형 헝가리어 ASR 확장: BEA-Dialogue+ 코퍼스
헝가리어 대화형 ASR 성능 향상을 위해 기존 85시간 규모의 BEA-Dialogue 코퍼스를 200시간으로 확장한 BEA-Dialogue+를 제안합니다. 화자 분리 기준을 완화하여 데이터 양을 늘렸으며, Whisper 및 FastConformer 모델을 통해 SOT 기반 미세 조정의 효과를 검증했습니다.
LinTree: 명시적으로 구조화된 탐색 이력을 통한 LLM 추론 능력 향상
LLM의 추론 능력을 높이기 위해 탐색 이력을 명시적인 트리 구조로 표현하는 LinTree 방법론을 제안합니다. 기존의 선형화된 추적 방식이 가진 한계를 극복하여 백트래킹과 분기 전환 시 탐색 효율성을 크게 향상시켰습니다.
I/O 인지형 레이어 구현을 통한 GNN의 효율적인 스케일링에 관하여
GNN의 메모리 병목 현상을 해결하기 위해 I/O 및 연산 강도 중심의 새로운 GPU 커널을 제안합니다. SpMM, 리덕션, 어텐션 기반 레이어를 최적화하여 데이터 이동을 줄이고 그래프 확장성을 크게 개선했습니다.
에이전트 강화학습 (Agentic RL)에서의 압축으로서의 기술 재사용 (Skill Reuse)
에이전트 강화학습(Agentic RL)에서 성공적인 궤적을 추상적 패턴으로 압축하여 일반화 성능을 높이는 ReuseRL 방법론을 제안합니다. MDL 원칙을 기반으로 기술 사전을 추출하고 특이 행동에 페널티를 부여하여 성능을 개선합니다.
LLM에 인간과 유사한 속성이 있다면, Age of Empires II에도 그러하다
LLM의 의인화된 속성이 모델 고유의 특성이 아닐 수 있음을 Age of Empires II 환경의 신경망 실험을 통해 지적합니다. 특정 속성은 기질(substrate)에 따라 달라질 수 있으므로, 실험 시 의인화된 속성을 가정하는 대신 비유일성을 가정하는 '귀무 가설'을 제안합니다.
적응형 3D 장면 재구성(3D Scene Reconstruction)을 위한 특징 최적화 비전
3D 장면 재구성 시 계산 자원을 효율적으로 배분하기 위한 적응형 특징 최적화 프런트엔드 기술을 제안합니다. 질감, 재현성, 판별력 등을 기준으로 특징 점수를 매겨 뷰별로 예산을 할당함으로써 재구성 품질을 높입니다.
RayDer: 실제 세계 비디오를 활용한 확장 가능한 자기지도 학습 기반 신규 시점 합성 (Novel View Synthesis)
RayDer는 카메라 추정, 장면 재구성, 렌더링을 하나의 백본으로 통합한 피드포워드 트랜스포머 모델입니다. 실제 비디오의 동적 요소를 학습 신호로 활용하여, 정적 장면의 신규 시점 합성(NVS) 성능을 데이터 규모에 따라 멱법칙으로 확장합니다.
위치 기반 대 상 기호 기반 어텐션 헤드: 학습 역학, RoPE 기하학, 그리고 길이 일반화
Transformer 모델의 어텐션 헤드가 위치 기반 또는 기호 기반으로 학습되는 역학을 연구합니다. 숫자와 문자 작업의 구조적 차이에 따른 메커니즘을 분석하고, RoPE 기하학을 통해 긴 시퀀스에 대한 외삽 성능 차이를 규명합니다.
모호한 입력 상황에서 시각-언어 모델(VLMs)의 여성 재현 억제 현상
시각-언어 모델(VLMs)이 모호한 입력 상황에서 직업-성별 스테레오타입을 어떻게 출력하는지 분석한 연구입니다. 모델이 내부적으로는 여성 연관성을 인코딩하더라도, 출력 단계에서 남성 신호가 증폭되고 여성 신호가 억제되는 현상을 발견했습니다.
SPECTRA: 관련성 오라클(Relevance Oracles) 및 제어된 방해 요소 진단(Controlled Distractor
SPECTRA는 합성 텍스트 코퍼스와 검색 테스트 컬렉션을 생성하는 재현 가능한 프레임워크입니다. 인간의 평가를 보완하는 진단 도구로서, 대규모 데이터셋 구축 비용을 절감하고 검색 시스템의 확장성과 실패 모드를 효과적으로 테스트할 수 있습니다.
언어 모델은 구문론뿐만 아니라 구성 의미론(Constructional Semantics)을 학습하는가: Paired-Focus 구문에 대한
LLM이 희귀한 Paired-Focus 구문의 구성 의미론을 학습하는지 분석한 연구입니다. 새로운 데이터셋을 통해 모델 규모와 학습 역학을 테스트한 결과, 특정 규모의 오픈 소스 모델은 구문론보다 의미론을 나중에 습득하며 세상 지식과 상관관계가 있음을 발견했습니다.
Lumos-Nexus: 비디오 통합 모델을 위한 균질한 잠재 공간 기반의 효율적인 주파수 브릿징
Lumos-Nexus는 비디오 통합 모델의 훈련 효율성과 시각적 품질을 동시에 개선하는 새로운 프레임워크입니다. 2단계 설계를 통해 경량 생성기로 의미론적 제어를 학습한 뒤, 추론 시 UPFB 기술로 고용량 생성기의 성능을 점진적으로 활용합니다.
무엇이 가장 먼저 언마스킹되는가? 그래프-텍스트 생성(Graph-to-Text Generation)을 위한 확산 모델(Diffusion
그래프-텍스트 생성(Graph-to-Text)을 위한 마스크 확산 언어 모델(MDLM)의 생성 궤적을 분석한 연구입니다. MDLM이 엔티티를 우선 생성하는 특성을 발견하고, SFT의 실패 모드를 해결하기 위한 람다 스케일 구조적 디코딩 기법을 제안합니다.
이 피드 구독하기
본 페이지의 콘텐츠는 AI가 공개된 소스를 기반으로 자동 수집·요약·번역한 것입니다. 원 저작권은 각 원저작자에게 있으며, 각 게시물의 “원문 바로가기” 링크를 통해 원문을 확인할 수 있습니다. 저작권자의 삭제 요청이 있을 경우 신속히 조치합니다.