Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
arXiv cs.LG 1862건필터 해제
머신 언러닝 (Machine Unlearning)의 행동 감사 (Behavioral Audit)에는 프라이버시 비용이 따른다
머신 언러닝(MU)의 효과를 검증하는 감사 과정에서 발생하는 프라이버시 침해 문제를 다룹니다. 모델 소유자와 감사자 간의 불신 상황에서, 행동적 신호만으로는 데이터의 멤버십 정보를 보호하면서 불충분한 언러닝을 식별하기 어렵다는 프라이버시-감사 트레이드오프를 증명했습니다.
증명 가능한 안전성을 갖추면서도 확장 가능한 강화학습 (Provably Safe, Yet Scalable Reinforcement
기존 안전 강화학습의 확장성 문제를 해결하기 위해 설계된 PS2-RL 프레임워크를 소개합니다. 암시적 제어 불변 집합을 생성하는 2단계 아키텍처를 통해 증명 가능한 안전성을 유지하면서도 높은 성능과 확장성을 제공합니다.
Muon을 위한 자유로운 헤비 테일(Heavy-Tailed) 점심: 경험적 성공에 대한 이론적 정당화
Muon 및 Scion과 같은 비유클리드 최적화 방법론이 Transformer 학습에서 보여주는 성능의 이론적 근거를 제시합니다. 헤비 테일(heavy-tailed) 노이즈 환경에서 이 방법들이 유클리드 방식보다 차원 의존성 없이 최적의 샘플 복잡도를 달성함을 증명했습니다.
주성분 분석 (PCA)의 위험 그림자: 99.9999%의 분산 보존이 치명적인 의사결정 오류를 유발할 때
PCA가 분산을 보존하면서도 희귀하고 치명적인 사건의 신호를 삭제하는 '위험 그림자(Risk Shadow)' 현상을 분석합니다. 이를 해결하기 위해 고영향 사건에 가중치를 두는 ExPCA와 TP-PCA 방법론을 제안하며, 신용카드 사기 탐지 실험을 통해 그 유효성을 입증합니다.
ORCA: 오픈 소스 숙련도(Dexterity) 연구를 위한 플랫폼
로봇의 숙련된 조작(Dexterity) 연구를 지원하기 위한 오픈 소스 학습 스택인 ORCA를 소개합니다. 제어, 시뮬레이션, 원격 조작 및 리타겟팅을 단일 인터페이스로 통합하여 연구 효율성을 높였습니다.
NEST3D: 사회적 Weaver 새둥지의 고해상도 멀티모달 데이터셋
사회적 Weaver 새둥지의 복잡한 3D 구조를 분석하기 위한 1.4TB 규모의 고해상도 멀티모달 드론 데이터셋인 NEST3D를 공개합니다. RGB, 멀티스펙트럴 이미지 및 7억 8,100만 개의 3D 포인트를 포함하며, 다양한 세그멘테이션 모델의 성능을 벤치마킹합니다.
CANN-EUCLID: 전체 필드 데이터로부터의 비지도 구성 인공 신경망 모델 발견
CANN-EUCLID는 응력 데이터 없이 변위 필드와 반력만으로 재료의 구성 법칙을 식별하는 비지도 학습 프레임워크입니다. 기존의 응력 지도 방식과 달리 단일 하중 케이스에서도 희소성 촉진 정규화를 통해 해석 가능한 신경망 모델을 발견할 수 있습니다.
소비자용 GPU에서 Diffusion Transformer를 위한 네이티브 INT8 연산 구현: Ideogram 4.0을 위한 Fused
소비자용 Ampere GPU에서 Diffusion Transformer의 INT8 연산 속도를 최적화하기 위해 Fused Triton INT8 GEMM 커널을 구현했습니다. 기존의 역양자화 방식 대신 텐서 코어를 직접 활용하여 FP8 및 NF4보다 빠른 성능을 달성했습니다.
더 큰 도메인에 대한 트랜스포머 신경 연산자(Transformer neural operators)의 제로샷 일반화 (Zero-shot
트랜스포머 기반 신경 연산자가 훈련된 도메인보다 더 큰 공간 도메인에서도 제로샷 일반화가 가능하도록 하는 연구를 소개합니다. 분해 가능한 편향과 회전 위치 임베딩을 통해 공간적 국소성과 이동 등변성을 구현하여 PDE 해 연산 성능을 높였습니다.
수소 다중 에너지 시스템(H-MES)의 운영 임계값 탐지 및 배포 가능한 디스패치 컨트롤러 개발을 위한 통계 및 머신러닝 프레임워크
수소 다중 에너지 시스템(H-MES)의 운영 특성을 분석하고 최적의 디스패치 컨트롤러를 개발하기 위한 통계 및 머신러닝 프레임워크를 제안합니다. 통계적 분석과 랜덤 포레스트, 시퀀스 모델, 강화학습을 결합하여 시스템의 비선형 역학을 규명하고 수익을 최적화합니다.
병렬도 아니고 순차적도 아니다: DiffusionGemma가 실제로 토큰을 확정(Commit)하는 방식
DiffusionGemma 26B 모델의 토큰 확정(commit) 메커니즘을 분석하여, 이 모델이 완전한 병렬 방식이 아닌 좌측-우측 확정 편향을 따름을 밝혀냈습니다. 연구 결과, 모델의 블록 크기는 아키텍처 특성이 아닌 측정 입도에 따라 결정되는 산물임을 증명했습니다.
제어 함수 도구 변수를 위한 그래프 확산 잔차 (Graph Diffusion Residuals)
제어 함수 도구 변수 추정 시 발생하는 잔차 정보 손실 문제를 해결하기 위해 결정론적 그래프 확산 잔차 추출기인 A-IHF를 제안합니다. A-IHF는 그래프 상의 신호 처리와 희소 그래프 분해를 통해 처치 변수의 잔차를 효과적으로 추출하여 추정 성능을 높입니다.
아선형 노이즈 프로브를 이용한 온라인 볼록 최적화 (Online Convex Optimization with Sublinear Noisy
아선형 노이즈 프로브를 활용한 온라인 볼록 최적화(OCO) 연구를 소개합니다. 제한된 쌍별 피드백 예산과 노이즈가 존재하는 환경에서도 후회(regret)를 효과적으로 최소화할 수 있는 새로운 프레임워크와 이론적 증명을 제시합니다.
분리 가능한 신호를 통한 비선형 보상 연관성을 가진 그래프 구조 조합론적 세미-밴딧 (Graph Structured Combinatorial
그래프 구조 내에서 비선형 보상 관계를 가진 조합론적 세미-밴딧 문제를 해결하기 위한 새로운 적응형 전략을 제안합니다. 그래프 기반 인과적 보상 모델링과 재생 커널 방법을 통해 데이터 볼륨에 대해 선형적인 이론적 성능 보장을 확립했습니다.
어떤 방향이 중요한가? 아핀 강건 최적화 (Affine Robust Optimization)를 위한 희소 설계 (Sparse Design)
아핀 강건 최적화를 위해 불확실성 방향을 효율적으로 선택하는 희소 설계 방법을 제안합니다. 데이터 주도형 선택 규칙을 통해 부가성을 가진 커버리지 목적 함수를 최적화하며, 탐욕법을 통한 근사 보장과 손실 제한 인증서를 제공합니다.
태스크 성능을 넘어: 음성 특징을 통한 생물 음향 임베딩 (bioacoustic embeddings) 해독
사전 학습된 오디오 임베딩이 생물 음향학에서 어떤 음향적 특징을 인코딩하는지 분석한 연구입니다. 회귀 프로브를 통해 모델별 음향 속성 포착 능력을 정량화하였으며, 모델 간 상호 보완적 특성을 확인했습니다.
언제 쓰고 언제 억제할 것인가: 메모리 보조 지식 편집을 위한 경로 특화 이중 어댑터 (Route-Specialized Dual
지식 편집 시 무관한 지식의 손실을 방지하기 위해 경로 특화 이중 어댑터(Route-Specialized Dual Adapter)를 제안하는 연구입니다. 관련성 라우터를 통해 편집 메모리 적용 여부를 결정하고, 편집 어댑터와 국소성 어댑터를 분리하여 정확도와 모델의 기존 지식 보존 능력을 동시에 높였습니다.
일반 볼록 집합에서의 온라인 재고 최적화를 위한 최적의 숨겨진 목표 학습 (Optimal Hidden-Target Learning)
일반 볼록 집합 환경에서의 온라인 재고 최적화(OIO)를 위한 '최적의 숨겨진 목표 학습' 이론을 제안합니다. 기존 방식보다 개선된 후회 보장(regret guarantee)을 증명하며, 노름 정렬 원리를 통해 복잡한 제약 조건을 1차원 큐 제어 문제로 환원하여 해결합니다.
압축된 연산 (Compressed Computation)은 (아마도) 중첩된 연산 (Computation in Superposition)이
압축된 연산(CC) 토이 모델이 중첩된 연산(computation in superposition)의 사례인지 분석한 연구입니다. 연구 결과, CC 모델의 성능 향상은 혼합 행렬의 영향이며, 이는 CC가 중첩된 연산을 설명하기에 적절한 모델이 아님을 시사합니다.
다중 그룹 평균 추정에서의 능동 학습을 위한 복잡도 측정 지표
다중 그룹 평균 추정 문제에서 능동 학습을 위한 최대 위험 최소화 전략과 그 복잡도 지표를 연구합니다. 로컬 미니맥스 프레임워크를 통해 예산, 이분산성, 분산 로컬 곡률(VLC)로 구성된 새로운 하한(lower bound)을 증명했습니다.
이 피드 구독하기
본 페이지의 콘텐츠는 AI가 공개된 소스를 기반으로 자동 수집·요약·번역한 것입니다. 원 저작권은 각 원저작자에게 있으며, 각 게시물의 “원문 바로가기” 링크를 통해 원문을 확인할 수 있습니다. 저작권자의 삭제 요청이 있을 경우 신속히 조치합니다.