본문으로 건너뛰기

© 2026 Molayo

arXiv논문2026. 05. 07. 17:51

이중 희소성 정규화 모델에 대한 근접 투영 (Proximal Projection)

요약

본 기술 기사는 고차원 회귀 설정에서 예측 변수 그래프 구조를 활용하는 '이중 희소성 정규화 모델'을 제안합니다. 이 모델은 추정 계수를 잠재 변수의 합으로 분해하여 근본적인 그래프 구조에 기반한 정규화를 수행하며, L1과 L2 패널티 간의 사용자 정의 트레이드오프를 허용하는 새로운 근접 투영 기법을 도입했습니다. 특히, 제안된 투영 연산자는 고차원 데이터에서 계산 효율성을 높여 기존 방법 대비 우수한 성능과 안정성을 입증했습니다.

핵심 포인트

  • 예측 변수 그래프 구조를 활용하여 계수 벡터가 아닌 잠재 변수에 대해 정규화를 수행하는 이중 희소성 모델을 제안함.
  • L1 및 L2 패널티 간의 사용자 정의 트레이드오프를 허용하는 새로운 근접 투영(proximal projection) 기법을 개발함.
  • 제안된 투영 연산자는 고차원 데이터에서 계산 효율성을 높여 컴퓨팅 자원을 절약함.
  • 시뮬레이션 및 실제 데이터를 통해 본 방법이 기존의 단일 또는 이중 희소성 그래픽 회귀 모델보다 안정적인 성능을 보임을 입증함.

정규화 (Regularization) 는 고차원 회귀 설정에서 희소 모델을 생성하여 컴퓨팅 자원을 절감하고, 반응 변수와 가장 강하게 연관된 예측 변수를 식별하는 데 자주 사용됩니다. 예측 변수가 가우시안 그래프 모델 (Gaussian graphical model) 로 표현될 수 있다면, 정규화 과정에서 예측 변수 그래프의 구조를 활용할 수 있습니다. 제안한 모델은 추정 계수 벡터를 각 노드가 계수 벡터에 기여하는 합에 해당하는 잠재 변수들의 합으로 분해함으로써 이 근본적인 예측 변수 그래프 구조를 활용합니다. 이후 정규화는 계수 벡터가 아닌 잠재 변수에 대해 수행됩니다. 우리는 L1 과 L2 패널티 사이의 명확한 사용자 정의된 트레이드오프를 허용하는 페널티 함수를 사용하며, 최적화 과정에서 새로운 근접 투영 (proximal projection) 을 제안했습니다. 또한, 구현은 선택된 그룹의 교집합에 대한 투영 연산자를 계산하여 예측 변수 복제 방법과 비교하여 특히 고차원 데이터에서 더 많은 컴퓨팅 자원을 절약합니다. 시뮬레이션을 통해 다양한 그래프 구조와 노드 수 하에서 본 접근법의 성능을 평가하고, 실제 데이터에서의 결과를 제시했습니다. 결과는 우리 방법이 다른 단일 또는 이중 희소성 그래픽 회귀 모델에 비해 안정적인 성능을 보인다는 것을 시사합니다.

AI 자동 생성 콘텐츠

본 콘텐츠는 arXiv cs.LG의 원문을 AI가 자동으로 요약·번역·분석한 것입니다. 원 저작권은 원저작자에게 있으며, 정확한 내용은 반드시 원문을 확인해 주세요.

원문 바로가기
1

댓글

0