오늘의 트렌드
최근 24시간최근 글과 출처가 충분히 쌓이면 근거를 확인한 코멘트를 표시합니다.
Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
arXivAI 번역논문
크로네커 델타 규칙을 이용한 장문맥 선형 어텐션
본 논문은 연관 행렬 메모리에 크로네커 델타 규칙을 적용한 새로운 선형 어텐션 아키텍처인 KronLSTM을 제안합니다. 이 모델은 최소 침습적 메모리 재검토 메커니즘을 통해 장문맥 언어 모델링에서 정보 간섭을 줄이고 안정적인 메모리 동역학을 보장합니다.
10월 20일0
arXivAI 번역논문
CoopUQ: 불확실성 인식 협력 예측을 통한 강건한 다중 로봇 사회 내비게이션
본 논문은 다중 로봇 환경에서의 안전하고 효율적인 내비게이션을 위해 CoopUQ라는 프레임워크를 제안합니다. CoopUQ는 불확실성을 인식하는 협력 점유 예측과 강건한 의사결정 메커니즘을 결합하여, 가려짐이나 분포 외 시나리오에서도 로봇의 안전성과 성능을 높입니다.
10월 20일0
arXivAI 번역논문
언어 사전 학습 없이 텍스트-이미지 생성 모델링
본 논문은 강력한 텍스트-이미지(T2I) 생성이 인터넷 규모의 언어 사전 학습을 필수로 요구하는지에 대한 의문을 제기하며, 이를 검증합니다. 연구진은 GPIC라는 초기 융합 멀티모달 오토회귀 모델인 Halcyon 패밀리를 소개했습니다. 이 모델은 적은 컴퓨팅 자원으로 기존 최고 성능 모델들을 능가하는 T2I 생성 품질을 보여주었습니다.
10월 20일0
arXivAI 번역논문
ETF 목표 기하학에 대한 불가능성 결과와 불균형 분석적 지속 학습을 위한 등노름 해결책
본 논문은 분석적 지속 학습(ACL)과 Progressive Neural Collapse (ProNC)의 아이디어를 결합하려 했으나, 이 융합이 단순 원-핫 ACIL과 동일함을 보여줍니다. 대신, ETF의 두 속성인 등각성과 등노름성을 분리하여 가중치에 각각 적용하는 '등노름 후처리'를 제안했습니다. 이는 장꼬리 영역에서 테일 클래스 및 전체 평균 정확도를 크게 복구하는 효과가 입증되었습니다.
10월 20일1
arXivAI 번역논문
이종 최적화(Heterogeneous Optimization)를 위한 LLM 기반 평가 계획 수립
본 연구는 이종 최적화(Heterogeneous Optimization) 문제에서 평가 계획 수립 과정을 LLM 기반으로 대체한 REP-HO를 제안합니다. 기존의 방법들이 수동 설계된 휴리스틱 규칙에 의존했던 것과 달리, REP-HO는 원시 최적화 상태 정보를 받아 유연하고 적응적인 평가 계획을 수립할 수 있습니다. 이는 다양한 이종 영역에서 우수한 성능을 보여주며 LLM이 강력한 플래너 역할을 할 수 있음을 입증합니다.
10월 20일1
arXivAI 번역논문
Adam, Shampoo 및 Muon에 대한 통계적 관점
본 논문은 확률적 최적화 방법론에 대한 새로운 통계적 관점을 제시합니다. 그래디언트를 정규 분포로 모델링하고 공분산을 활용하여 화이트닝하는 온라인 방법을 제안하며, 이를 통해 Adam, Shampoo, Muon 등의 기존 옵티마이저를 개선한 MND-Muon 및 MN-Muon을 개발했습니다.
10월 20일1
arXivAI 번역논문
쿼리 의존적 읽기를 통한 양자화된 내적 추정: 미니맥스 분리
본 논문은 저장 공간과 읽기(reading) 예산이 분리된 상황에서의 내적 추정 양자화 기법을 연구합니다. 기존의 쿼리 독립적 읽기는 추가 저장 공간으로부터 이점을 얻지 못함을 보였으나, 새로운 쿼리 의존적 읽기 프로토콜은 이를 활용하여 압도적인 성능 향상을 달성했습니다.
10월 20일1
arXivAI 번역논문
Bellman Language Models: LLM 에이전트의 반복적인 의사결정 해결
본 논문은 LLM 에이전트가 반복적인 의사결정 과정을 최적화 문제로 접근하는 'Bellman Language Model (BLM)'이라는 새로운 프레임워크를 제안합니다. BLM은 마르코프 결정 과정(MDP)을 해결하여, 상태에 고정된 이동과 미지의 상태만 LLM으로 전송함으로써 에이전트의 효율성과 신뢰성을 크게 향상시킵니다.
10월 20일0
arXivAI 번역논문
누락된 준수 클래스: Jailbreak 성공을 붕괴시키는 LLM 채점기(Grader)와 무료 검사
본 연구는 Jailbreak 논문에서 보고되는 공격 성공률(attack success rate)에 대한 새로운 관점을 제시하며, 채점기(grader)의 변경이 모델 평가 결과에 미치는 영향을 분석했습니다. 특히, 밀집 채점기가 준수 응답을 인접한 회피 클래스로 이동시키는 '클래스 붕괴' 현상을 발견했습니다. 이는 비용 없이도 문제점을 노출시킬 수 있는 중요한 연구 결과를 제공합니다.
10월 20일0
arXivAI 번역논문
RAFT: 시간적 그래프 신경망 학습을 위한 중복성 인식 입력 필터링
본 논문은 시간적 그래프 신경망(TGNNs)의 학습 효율성을 높이기 위해 중복성 인식 입력 필터링 프레임워크인 RAFT를 제안합니다. RAFT는 메모리 변화 추적을 통해 예측 대상 및 역사적 컨텍스트 이벤트에서 불필요한 중복 데이터를 식별하고 제거하여, 모델 훈련 시간을 크게 단축시키면서도 성능 저하를 최소화하는 것을 목표로 합니다.
10월 20일0
arXivAI 번역논문
랜덤 특징을 이용한 확장 가능하고 적응적인 분포 회귀
본 논문은 계산 비용이 높은 기존 커널 기반 분포 회귀의 한계를 극복하기 위해 랜덤 특징 근사(random feature approximations)를 활용한 새로운 프레임워크를 제안합니다. 특히, Random Feature Distribution Regression (RaDR)과 적응형 버전인 A-RaDR을 개발하여 이론적 분석과 실제 데이터셋 실험을 통해 높은 예측 성능과 계산 효율성을 동시에 달성했음을 입증했습니다.
10월 20일0
arXivAI 번역논문
일반 유틸리티를 이용한 샘플 효율적인 강화학습: 신경 이중 비평가(Neural Dual Critics) 활용
본 논문은 일반 유틸리티(General Utility)를 가진 강화학습 환경에서 효율적인 샘플링을 위한 새로운 액터-비평가 방법을 제안합니다. 이 방법은 신경 비평가를 사용하여 상태-행동 쌍의 함수로 유사 보상을 직접 학습하며, 다단계 몬테카를로 기법으로 편향을 제어합니다. 분석 결과, 정책 전이 및 이중 안정성 조건 하에 글로벌 수렴 속도 $\tilde{O}(T^{-1/2})$를 달성함을 입증했습니다.
10월 20일0
arXivAI 번역논문
임베딩을 이용한 데이터 다양성 측정: 다양성 지표를 위한 분류 체계 및 벤치마크
본 논문은 텍스트 코퍼스의 중요한 속성인 '다양성' 측정의 어려움을 다루며, 기존 임베딩 기반 다양성 지표들의 체계적인 비교가 부족함을 지적합니다. 이에 따라 계산 방식에 따른 21가지 지표 분류 체계를 제시하고, EmbDivBench라는 새로운 벤치마크를 도입하여 평가했습니다.
10월 20일0
arXivAI 번역논문
느리게 비정상적인 제약 MDP를 위한 원시-쌍대 학습에서의 매개변수 공명
본 논문은 제약 마르코프 결정 과정(CMDPs)에서 원시-쌍대 학습 방법의 비정상성을 분석했습니다. 특히, 두 시간 규모 가정 하에 발생하는 채널별 진동과 불일치가 매개변수 공명을 유발함을 밝혔습니다. 이 연구는 활성 안장 주변의 근사 및 다양한 제약 조건에서의 동역학적 특성을 깊이 있게 다루고 있습니다.
10월 19일0
arXivAI 번역논문
섬유 보강 고성능 콘크리트의 기계적 강도에 대한 온도 영향 설명 가능한 머신러닝 분석
본 연구는 온도 변화가 콘크리트 강도에 미치는 영향을 예측하기 위해 1,204개의 실험 데이터를 활용한 머신러닝 프레임워크를 제시합니다. 여덟 가지 모델 중 앙상블 접근 방식이 가장 우수했으며, 특히 Gradient Boosting과 Extreme Gradient Boosting이 높은 예측 성능을 보였습니다. 또한 Shapley analysis 등을 통해 온도와 잔골재 등이 강도에 중요한 영향을 미치는 주요 요인임을 밝혀냈습니다.
10월 19일0
arXivAI 번역논문
Rényi 차분 프라이버시를 위한 태스크 인식 커널 Stein 증명서
본 논문은 Rènyi 발산 기반의 차분 프라이버시를 다루며, 특히 가우시안 설정을 벗어난 경우 계산의 어려움을 해결하는 데 초점을 맞춥니다. 에스코트 분포와 커널 Stein 불일치를 활용하여 태스크 인식(task-aware) Rènyi 차분 프라이버시에 대한 증명서를 제공합니다.
10월 19일0
arXivAI 번역논문
지연된 단방향 피드백을 통한 개인화 메모리 게이팅 학습
본 논문은 언어 모델 에이전트의 장기 기억을 개선하기 위해 사실(fact) 수준에서의 개인화된 메모리 게이팅 학습 방법을 제안합니다. 검색 기반 라벨링 전략과 지연된 단방향 피드백을 활용한 Warm-Start UCB를 통해, 오프라인 학습과 온라인 적응을 결합하여 높은 성능을 달성했습니다.
10월 19일0
arXivAI 번역논문
CocoRNA: 협력적 다중 에이전트 강화학습을 이용한 RNA 설계
본 논문은 안정적인 2차 구조를 갖는 RNA 서열을 설계하기 위한 협력적 다중 에이전트 강화학습 프레임워크인 CocoRNA를 제안합니다. CocoRNA는 복잡한 역설계 문제를 하위 문제로 분해하고, 여러 에이전트가 협력하여 최적의 설계 정책을 학습합니다. 실험 결과, 기존 최고 성능 방법들보다 우수한 고품질 RNA 설계 능력을 보여주었습니다.
10월 19일0
arXivAI 번역논문
물리적 대칭성을 재학습 없이 학습하는 방법: 구(sphere) 상의 SO(3)-등변성 컨볼루션 네트워크 (CNN)
본 논문은 물리 과학에서 흔히 사용되는 구(sphere) 상의 데이터에 대한 SO(3)-등변성 컨볼루션 네트워크(CNN) 아키텍처를 제안합니다. 이 방법은 대칭성을 명시적으로 반영하여, 모델이 훈련 과정에서 대칭성을 학습할 필요 없이 정확한 결과를 얻을 수 있게 합니다. 이는 특히 시뮬레이션 기반 추론(SBI)과 같은 분야에서 높은 효율성과 정확도를 제공합니다.
10월 19일0
arXivAI 번역논문
행동적 결합(Behavioral Couplings): 형성부터 언어 모델의 행동 출현까지
본 연구는 LLM 미세 조정 과정에서 한 행동에 대한 훈련이 의도치 않은 다른 행동(행동적 결합)을 유발할 수 있음을 밝힙니다. 이는 모델이 특정 문서 세트로 훈련될 때, 하나의 행동 학습이 연관된 다른 행동까지 나타나게 하는 현상입니다. 특히 이러한 결합은 합성되어 추적이 어려울 수 있어, 모델 평가 시 현재 관찰되는 행동 이상의 심층적인 분석이 필요함을 제언합니다.
10월 19일0