Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
arXiv cs.LG 1862건필터 해제
오일러 특성 변환 (Euler Characteristic Transform) 인코딩
오일러 특성 변환(ECT)을 신경망에 효과적으로 적용하기 위한 새로운 연속적 인코딩 방식을 제안합니다. 기존의 이산화 방식 대신 각 정점의 오일러 특성 변화를 토큰 시퀀스로 매핑하여, 다양한 데이터 구조와 벤치마크에서 성능 향상을 입증했습니다.
MODIP: 확산 정책 (Diffusion Policies)을 위한 효율적인 모델 기반 최적화
확산 정책(Diffusion Policies)의 강화학습 미세 조정을 위한 새로운 프레임워크인 MODIP를 제안합니다. 세계 모델(World Model)과 MPC를 결합하여 BC의 안정성을 유지하면서도 정책 성능을 효과적으로 향상시킵니다.
자기회귀 시퀀스 모델은 언제 물리적 파동장을 예측하는가? 합성 지진파를 이용한 통제된 연구
자기회귀 모델이 지진파와 같은 물리적 파동장을 예측할 때 발생하는 오차 누적과 위상 드리프트 문제를 분석한 연구입니다. SeismoGPT를 활용해 다중 토큰 예측과 특정 손실 함수가 롤아웃 안정성에 미치는 영향을 실험적으로 검증했습니다.
XtrAIn: 특징 속성 부여(Feature Attribution)를 위한 학습 가이드형 폐쇄(Training-Guided Occlusion)
XtrAIn은 기존 폐쇄 기반 속성 부여 방식의 편향과 불안정성을 해결하기 위해 제안된 학습 가이드형 방법론입니다. 입력 공간 대신 파라미터 공간의 업데이트를 측정하여 특징 중요도를 추정하며, 더 깨끗하고 해석 가능한 속성 패턴을 제공합니다.
다중 로터 항공 로봇을 위한 체형 조건부 범용 제어
다양한 로터 구성을 가진 다중 로터 항공 로봇을 제어할 수 있는 범용 위치 제어 정책을 제안합니다. 물리 기반의 체형 기술자를 조건으로 사용하여 단일 네트워크로 임의의 형태를 제어하며, 시뮬레이션에서 실세계로의 제로샷 전이를 입증했습니다.
순환 신경망(RNN)과 물리 정보 그래프 신경망(Physics-informed GNN)을 결합한 비선형 역학장 재구성
LSTM과 Physics-informed GNN을 결합하여 비선형 역학장의 국부 응력장을 재구성하는 새로운 프레임워크를 제안합니다. 이 모델은 시간적 경로 의존성과 공간적 구조를 동시에 포착하며, 기존 유한 요소 시뮬레이션 대비 1,000배 빠른 속도를 달성했습니다.
치매의 인지 기능 저하를 예측하는 비침습적 지표로서의 수면 EEG 신호 임계성
수면 EEG 신호의 임계성을 분석하여 치매로 인한 인지 기능 저하를 예측하는 연구입니다. MFDFA 분석 결과, 인지 기능이 저하된 그룹은 수면 중 신경 역학이 최적의 임계 상태에서 벗어나는 양상을 보였습니다.
Flash-GMM: 확장 가능한 소프트 클러스터링을 위한 메모리 효율적인 커널
Flash-GMM은 단 한 번의 GPU 패스로 대규모 데이터의 가우시안 혼합 모델(GMM)을 계산하는 메모리 효율적인 Triton 커널입니다. 기존 대비 20배 빠른 속도와 100배 더 큰 데이터셋 처리가 가능하며, ANN 검색 성능을 크게 향상시킵니다.
신경망의 데이터 대칭성으로부터 도출되는 보존 법칙
훈련 데이터의 내재적 대칭성이 신경망의 경사 흐름 훈련 과정에서 보존량을 유도하는지 탐구합니다. MSE 손실 함수와 데이터 증강 시 발생하는 추가 보존량을 설명하기 위해 텐서화 가능한 네트워크 프레임워크를 제안합니다.
데이터 증강을 위한 궤적 선택의 체계적 접근 방식
궤적 데이터 증강 시 시공간적 일관성을 유지하며 효율적인 데이터를 선택하기 위한 다섯 가지 체계적 전략을 제안합니다. 이상치성, 다양성, 대표성 등을 평가하는 프레임워크를 통해 무작위 선택보다 우수한 성능을 입증했습니다.
범위 페널티 (Range Penalization): 연합 학습 (Federated Learning)에서의 응용과 이론적 통찰
연합 학습(Federated Learning)에서 통계적 정확도와 자원 효율성을 높이기 위한 범위 정규화(Range Regularization) 기법을 제안합니다. 극점 클러스터링을 통해 클라이언트 간 규칙성을 유도하며, 새로운 증명 기법과 최적화 알고리즘을 통해 이론적·실험적 효능을 입증합니다.
시각-행동 로봇 데이터의 재라벨링을 통한 작업 강건성 확보
기존 로봇 데이터셋의 언어 및 행동 다양성 부족 문제를 해결하기 위해 VLM을 활용한 재라벨링 프레임워크인 TREAD를 제안합니다. 시각-언어 모델을 통해 데이터를 의미론적 하위 작업으로 분해하고 언어적 다양성을 증강하여 로봇의 작업 강건성을 높입니다.
Express 언어 모델링 (Express Language Modeling)
비인과적 어텐션 근사를 인과적 근사로 변환하는 새로운 도구인 Express를 소개합니다. Thinformer와 결합하여 메모리 효율성을 높이면서도 기존보다 개선된 근사 오차 성능을 제공하며, 긴 문맥 처리 시 발생하는 주요 병목 현상들을 해결합니다.
AutoMegaKernel: 자가 재타겟팅 Megakernel 합성을 위한 정적 검증 에이전트 하네스
AutoMegaKernel(AMK)은 Llama 계열 모델을 단일 CUDA 커널로 컴파일하여 전체 순전파를 실행하는 자동화된 시스템입니다. 정적 검증 에이전트를 통해 데드락과 레이스 컨디션이 없는 안전한 메가커널을 생성하며, 다양한 GPU 아키텍처에 대해 자동 재타겟팅을 지원합니다.
눈이 보는 것을 LLM은 놓친다: 인간의 지각을 이용한 적대적 텍스트 공격
LLM 기반 콘텐츠 중재 시스템이 인간의 시각적 지각과 달리 타이포그래피 조작에 취약함을 밝힌 연구입니다. 간격, 강조, 배치 등 시각적 요소를 활용한 적대적 공격(HPAA)을 통해 기계의 탐지율을 1% 미만으로 낮추면서도 인간의 인식률은 86% 이상 유지할 수 있음을 증명했습니다.
로컬 스코어 모델은 언제 크기 간 외삽(Extrapolation)이 가능한가? 진단 이론 및 벤치마크
로컬 스코어 모델의 크기 외삽(size extrapolation) 가능성을 결정하는 이론적 메커니즘을 분석합니다. 아키텍처의 국소성보다 가우시안 평활화된 스코어의 준국소성이 핵심임을 밝히고, 이를 검증하기 위한 FDLF 벤치마크를 제안합니다.
BrainSurgery: 모델 편집 및 업사이클링을 위한 재현 가능하고 신뢰할 수 있는 선언적 가중치 조작
BrainSurgery는 대규모 딥러닝 모델의 가중치를 재현 가능하고 신뢰할 수 있게 조작하는 도구입니다. YAML 기반의 선언적 계획을 통해 레이어 재구조화, 정밀도 캐스팅 등 복잡한 텐서 수술을 안전하게 수행합니다.
홀로그래픽 축소 표현 (Holographic Reduced Representations)을 이용한 얽힘 해제 (Disentanglement)
본 연구는 신경망을 통해 데이터의 변동 요인을 분리하는 얽힘 해제(Disentanglement) 문제를 해결하기 위해 홀로그래픽 축소 표현(HRR)을 활용한 새로운 비지도 학습 알고리즘을 제안합니다. HRR의 언바인딩 연산을 통해 이산적인 기호적 구조를 미분 가능한 방식으로 학습하며, 기존 모델 대비 노이즈에 강하고 우수한 성능을 보임을 입증했습니다.
자기지도 학습 원리를 통한 확산 모델 (Diffusion Models)의 표현 공간 평가
확산 모델의 생성 능력과 자기지도 표현 학습 능력을 동시에 평가하기 위한 새로운 프레임워크를 제안합니다. 피셔 정보 기반의 ICR 지표를 통해 특징 공간의 불변성과 잔차 성분을 분석하여 모델의 일반화와 암기 과정을 정량화합니다.
매개변수화된 양자 회로를 위한 적응형 방향 그래디언트 (Adaptive directional gradients for parameterised
매개변수화된 양자 회로(PQC) 학습 시 발생하는 그래디언트 추정 비용 문제를 해결하기 위한 새로운 순방향 그래디언트 추정 프레임워크를 제안합니다. 무작위 방향 미분을 활용하여 측정 비용을 획기적으로 줄이며, 적응형 최적화 도구인 QUIVER를 통해 기존 방식보다 높은 효율성을 입증했습니다.
이 피드 구독하기
본 페이지의 콘텐츠는 AI가 공개된 소스를 기반으로 자동 수집·요약·번역한 것입니다. 원 저작권은 각 원저작자에게 있으며, 각 게시물의 “원문 바로가기” 링크를 통해 원문을 확인할 수 있습니다. 저작권자의 삭제 요청이 있을 경우 신속히 조치합니다.