본문으로 건너뛰기

© 2026 Molayo

arXiv논문2026. 06. 26. 12:16

하프스페이스 절단(halfspace truncation) 하에서의 가우시안 학습을 위한 최적 샘플 복잡도를 가진 빠른 알고리즘

요약

하프스페이스 절단이 적용된 고차원 가우시안 분포를 학습하는 최적의 샘플 복잡도를 가진 새로운 알고리즘을 제안합니다. 기존 연구보다 효율적인 샘플 및 시간 복잡도를 달성하며, 상대적 절단 파라미터를 활용해 복잡한 경사 하강법 없이도 기저 가우시안을 복구할 수 있습니다.

핵심 포인트

  • 하프스페이스 절단 하의 가우시안 학습을 위한 최적 샘플 복잡도 달성
  • n = ˜O(d²/ε²) 샘플로 총 변동 거리 오차 ε 내 학습 가능
  • 경험적 공분산 행렬 계산 비용 수준의 빠른 실행 시간 보장
  • 상대적 절단 파라미터 재해석을 통해 투영 확률적 경사 하강법 우회

우리는 알려지지 않은 하프스페이스(halfspace)로 절단된 고차원 가우시안(Gaussian)을 학습하는 근본적인 문제를 연구합니다. Lee, Mehrotra 및 Zampetakis (FOCS'24)는 최근 이 문제에 대해 최초의 다항 시간(polynomial time) 알고리즘을 얻었으나, 그 결과로 도출된 샘플 및 시간 복잡도 경계는 최적(optimal)이 아닙니다. 유의미한 절단(non-trivial truncation) 하에서, 임의의 목표 정확도 $\varepsilon > 0$ 및 차원 $d$에 대해 우리는 $n = \tilde{O}(d^2/\varepsilon^2)$개의 샘플을 사용하고 총 변동 거리(total variation distance)에서 오차 $\varepsilon$ 내로 기저 가우시안을 학습하는 효율적인 알고리즘을 제시합니다. 우리의 알고리즘은 또한 빠릅니다. 실행 시간은 경험적 공분산 행렬(empirical covariance matrix)을 계산하는 비용에 의해 지배됩니다. 우리의 샘플 및 시간 복잡도는 절단이 없는 경우에도 $d$와 $\varepsilon$ 측면에서 최적입니다. 이 점에 있어서, 우리는 하프스페이스 절단 하에서의 가우시안을 비용 없이(for free) 학습할 수 있습니다. 우리 결과의 핵심 요소는 상대적 절단 파라미터(relative truncation parameter)의 관점에서 절단된 가우시안의 저차 모멘트(low-degree moments)를 새롭게 재해석한 것입니다. 이 상대적 절단 파라미터는 절단되지 않은 가우시안의 파라미터를 고유하게 결정하며 직접적인 파라미터 복구(parameter recovery)를 가능하게 합니다. 이러한 재해석을 통해 우리는 절단 하에서의 학습에 널리 사용되는 시간 집약적인 투영 확률적 경사 하강법(projected stochastic gradient descent) 절차를 우회할 수 있습니다.

AI 자동 생성 콘텐츠

본 콘텐츠는 arXiv cs.LG의 원문을 AI가 자동으로 요약·번역·분석한 것입니다. 원 저작권은 원저작자에게 있으며, 정확한 내용은 반드시 원문을 확인해 주세요.

원문 바로가기
0

댓글

0