Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
arXiv cs.LG 2125건필터 해제
중앙 집중식 대 분산형 연합 학습의 성능 트레이드오프 분석
본 논문은 데이터 프라이버시 보호를 위해 부상하고 있는 연합 학습(Federated Learning)의 세 가지 아키텍처인 중앙 집중식(CFL), 분산형(DFL), 준분산형(SDFL)을 실험적으로 비교 분석합니다. Fedstellar 시뮬레이터와 MNIST 데이터셋을 활용하여 각 아키텍처가 가진 성능 지표 간의 트레이드오프를 규명함으로써, 애플리케이션 요구 사항에 적합한 아키텍처 선택을 위한 근거를 제시합니다.
분자 특성 예측을 위한 구성적 계층 그래프 기반 다층 자기지도 사전학습 방법론
MolCHG는 분자 구조를 원자, 결합, 파편의 세 가지 의미론적 계층으로 구성된 계층적 그래프로 모델링하는 새로운 자기지도 사전학습 프레임워크입니다. 기존 방식과 달리 결합 정보를 독립적인 노드 표현으로 격상시켜 원자 및 결합 수준의 정보를 통합적으로 학습하며, 세 가지 수준의 사전학습 목적 함수를 통해 분자 특성 예측 성능을 극대화했습니다. MoleculeNet 벤치마크 실험 결과, 다수의 데이터셋에서 기존 모델들을 뛰어넘는 최고 성능을 기록했습니다.
의사결정을 위한 잠재 변수 인지형 적응적 확산 모델 Ada-Diffuser
Ada-Diffuser는 의사결정 과정을 시퀀스 모델링할 때 간과되기 쉬운 잠재 요인(Latent factors)을 명시적으로 모델링하는 새로운 생성적 프레임워크입니다. 이 모델은 관측된 상호작용의 시간적 구조와 기저의 잠재 역학을 동시에 학습하여, 변화하는 환경과 보상 구조에 유연하게 적응할 수 있는 인과적 확산 모델을 제안합니다.
소아 ECMO 임상 의사결정 지원을 위한 모방 학습 (Imitation Learning)
소아 ECMO 치료의 복잡성과 데이터 부족 문제를 해결하기 위해, 관측된 궤적으로부터 행동을 학습하는 모방 학습(Imitation Learning) 방식을 제안합니다. 연구 결과, 정형 데이터용 트랜스포머 기반 모델인 TabPFN이 XGBoost 및 MLP와 같은 전통적인 베이스라인보다 우수한 성능을 보였습니다. 이는 TabPFN이 소아 ECMO 임상 의사결정 지원을 위한 강력한 도구가 될 수 있음을 시사합니다.
변분 양자 분류기를 활용한 안전한 양자 기계 학습 (SAFE Quantum Machine Learning)
본 논문은 진폭 인코딩과 학습 가능한 고전적 사전 인코딩 레이어를 결합하여 안정성을 높인 변분 양자 분류기(VQC)를 제안합니다. 정규화된 임베딩과 양계된 양자 관측량을 통해 입력 변화에 민감도가 제어된 매끄러운 가설 클래스를 유도하며, SAFE-AI 지표를 통해 모델의 신뢰성을 다각도로 평가합니다. 실험 결과, 제안된 모델은 고전적 베이스라인 대비 경쟁력 있는 성능과 함께 노이즈 및 구조적 특징 변화에 대한 뛰어난 강건성을 입증했습니다.
불규칙한 시계열 데이터 처리를 위한 생성적 사전 학습 모델 ITGPT
ITGPT는 불규칙한 샘플링과 결측치가 포함된 멀티모달 시계열 데이터를 처리하기 위해 설계된 어텐션 기반 아키텍처입니다. 자기지도 학습(SSL)과 GPT 방식의 목적 함수를 결합하여, 별도의 재샘플링이나 데이터 보간 없이도 의료 및 예측 유지보수 분야에서 최첨단 성능을 달성했습니다. 특히 레이블이 부족한 상황에서 비구조화된 데이터를 효과적으로 활용하여 지도 학습보다 뛰어난 성능을 보여줍니다.
이질적인 피처 공간에서의 연합 결측치 보간 (Federated Imputation)
기존 연합 학습(Federated Learning)은 클라이언트 간 피처 스키마가 일치한다고 가정하지만, 실제 정형 데이터 환경에서는 피처 서브셋이 서로 다른 이질적인 상황이 빈번합니다. 이를 해결하기 위해 제안된 FedHF-Impute는 공유된 글로벌 피처 그래프와 메시지 패싱 기술을 활용하여, 피처가 직접 겹치지 않더라도 클라이언트 간 지식을 전송하여 결측치를 효과적으로 보간합니다.
동적 그래프 Transformer의 어텐션 분산 문제 진단 및 전이 가능한 해결책
본 연구는 연속 시간 동적 그래프(CTDG) 학습 시 시간적 분포 변화로 인해 발생하는 어텐션 분산(attention dispersion) 문제를 진단하고 이를 해결하는 방법을 제시합니다. 기존 Transformer가 핵심 노드에 집중하지 못하는 문제를 차분 어텐션(differential attention) 도입을 통해 해결하여, 공통 모드 신호는 억제하고 독특한 토큰 신호를 증폭함으로써 성능을 개선했습니다. 이를 적용한 DiffDyG 모델은 다양한 벤치마크에서 SOTA 성능을 달성하며 특히 변화가 큰 데이터셋에서 탁월한 효과를 입증했습니다.
잠재 매니폴드 얽힘 해소를 통한 모델 유도 레이블 노이즈 분리 기법 MIND
본 논문은 Foundation Models를 활용한 자동 주석 과정에서 발생하는 체계적인 모델 유도 레이블 노이즈 문제를 해결하기 위한 MIND 프레임워크를 제안합니다. 잠재 매니폴드 얽힘 해소(Latent Manifold Disentanglement) 기술을 통해 노이즈를 서브스페이스 의존적 구성 요소로 분리하여, 정답 데이터 없이도 구조적 오류를 효과적으로 식별합니다. 실험 결과, MIND는 3D 데이터셋과 같은 복잡한 환경에서 기존 방식보다 뛰어난 성능을 보였으며 시각-언어 모델의 제로샷 환각 현상을 교정하는 데 탁월함을 입증했습니다.
Multi-Fidelity Flow Matching: PDE 솔루션의 계층적 정밀화 프레임워크
Multi-Fidelity Flow Matching(MFFM)은 PDE 솔루션을 계층적으로 정밀화하기 위해 조건부 흐름 매칭을 활용하는 새로운 프레임워크입니다. 저충실도 솔루션을 기반으로 잔차를 정밀화하는 방식을 통해 학습 기하 구조를 개선하며, 다중 해상도 계층 구조를 통해 효율적인 시공간 예측 및 초해상도 문제를 해결합니다.
클록리스 재구성 가능 칩의 자율 스파이킹 역학을 이용한 확장 가능한 뉴로모픽 컴퓨팅
본 연구는 클록리스(clockless) 비동기식 디지털 회로의 자율적인 스파이킹 역학을 활용한 확장 가능한 뉴로모픽 아키텍처를 제안합니다. FPGA 상에서 구현된 이 시스템은 불리언 스파이킹 뉴런 네트워크를 통해 머신러닝 태스크를 효율적으로 처리하며, 오디오 분류 작업에서 경쟁력 있는 성능과 낮은 전력 소비를 입증했습니다. 이는 특수 하드웨어 없이도 재구성 가능한 칩을 에너지 효율적인 뉴로모픽 플랫폼으로 활용할 수 있는 가능성을 제시합니다.
브릿지 기반 샘플러를 위한 조건부-주변부 이산화 및 엔트로피 기반 스케줄링 연구
본 연구는 제한된 추론 예산 내에서 흐름 기반 생성 모델의 샘플링 품질을 높이기 위해 엔트로피율을 기반으로 한 새로운 이산화 및 스케줄링 방법을 제안합니다. 조건부-주변부 엔트로피율 목적 함수를 통해 양 끝점에 집중된 비균등 그리드를 구축함으로써, 기존 선형 또는 코사인 방식보다 적은 함수 평가(NFE)로도 더 높은 샘플링 성능을 달성했습니다. 실험 결과, 이미지 생성(CIFAR-10)과 단백질 생성(AlphaFlow) 작업 모두에서 기존 방식 대비 유의미한 성능 향상을 입증했습니다.
기하학적 인지 기반의 샤프니스 최소화(Sharpness Minimization)를 통한 포트홀 문제 해결
본 논문은 기존 SAM(Sharpness-aware minimization)이 손실 기하학을 고려하지 않고 모든 파라미터 방향을 균일하게 취급하는 한계를 극복하기 위해 LLQR+SAM 프레임워크를 제안합니다. LLQR의 학습된 전처리기를 통해 손실 지형의 기하학적 구조를 포착하고, 이를 SAM의 섭동 과정과 결합하여 '포트홀(potholes)'이라 불리는 국소적으로 날카로운 지점을 효과적으로 탈출합니다. 실험 결과, 이 이중 시간 척도 구조는 비전 및 시퀀스 모델링 벤치마크에서 기존 방식보다 우수한 성능 향상을 입증했습니다.
하드웨어 인지형 신경망 구조 공동 설계 및 FPGA 배포를 위한 오픈소스 프레임워크 SNAC-Pack
SNAC-Pack은 하드웨어 리소스와 정확도를 동시에 최적화하는 하드웨어 인지형 신경망 구조 공동 설계 및 FPGA 배포를 위한 오픈소스 AutoML 프레임워크입니다. Optuna와 NSGA-II를 활용한 다목적 탐색과 하드웨어 대리 모델을 통해 합성 비용을 절감하며, 양자화 인식 훈련(QAT)과 hls4ml을 결합하여 엔드 투 엔드 배포를 지원합니다. 실제 물리 실험 데이터셋 적용을 통해 수개월의 수동 미세 조정을 수 시간의 자동 탐색으로 단축하는 성능을 입증했습니다.
계획 수립을 위한 속성 가이드 기반 LLM 프로그램 합성
기존의 LLM 프로그램 합성 방식은 단순 수치 점수에 의존하여 실패 원인을 파악하기 어렵고 비용이 많이 드는 한계가 있습니다. 본 연구는 형식적으로 정의된 속성을 기반으로 실패 시 구체적인 반례를 제공하는 '속성 가이드 기반 합성' 방식을 제안합니다. 이를 PDDL 계획 도메인에 적용한 결과, 기존 방식 대비 프로그램 생성 횟수를 7배 줄이면서도 더 높은 성능과 효율성을 달성했습니다.
결과가 갈리는 지점 학습: 확률적 청크 마스킹을 통한 효율적인 VLA 강화학습 (RL)
VLA(Vision-Language-Action) 모델의 강화학습 과정에서 발생하는 막대한 그래디언트 계산 비용을 줄이기 위한 확률적 청크 마스킹(PCM) 기법을 제안합니다. PCM은 성공과 실패를 가르는 핵심적인 단계에만 계산 자원을 집중함으로써, 모델의 성능 저하 없이 학습 속도와 메모리 효율성을 획기적으로 개선합니다.
회귀를 위한 왜도 적응형(Skew-adaptive) 분할 등각 예측 방법론 개발
회귀 분석에서 예측 구간의 효율성을 높이기 위해 왜도(Skewness)에 적응할 수 있는 새로운 분할 등각 예측(Split Conformal Prediction) 방법론을 제안합니다. 게이지 접근법과 역쌍곡사인 변환을 활용하여 국소적 척도와 왜도에 모두 대응하며, 기존의 스케일링된 점수 방식이나 등각화된 분위수 회귀보다 더 효율적인 예측 구간을 생성합니다.
SwAIther-Precip: 예측 시점 인지 편향 보정을 통한 스위스 지역 글로벌 AI 강수 예측의 킬로미터 단위 상세화
SwAIther-Precip은 글로벌 AI 기상 모델인 AIFS의 저해상도 예측을 스위스 지역의 1km 단위 상세 강수 예측으로 변환하는 새로운 프레임워크입니다. FiLM 기반의 U-Net을 통해 예측 시점(lead-time)에 따른 편향을 먼저 보정한 후, 확산 기반 모델을 사용하여 미세한 공간 변동성을 생성합니다. 이 방식은 기존 방식보다 예측 정확도를 크게 높이며, 특히 예측 시점이 길어질수록 발생하는 편향 문제를 효과적으로 해결합니다.
암시적 자유 에너지 최소화를 통한 엔트로피적 오토인코딩 (EAE)
본 논문은 변분 오토인코더(VAE)의 고질적인 문제인 사후 확률 붕괴(Posterior collapse)를 해결하기 위해 엔트로피적 오토인코더(EAE) 프레임워크를 제안합니다. EAE는 명시적인 사전 확률 대신 자유 에너지 최소화 앙상블 인코더를 사용하여 잠재 변수의 사전 확률을 암시적으로 생성하며, 이를 통해 데이터의 복잡한 구조를 보존하는 비가우시안 및 다봉 잠재 분포를 학습합니다.
비정상 연속 제어를 위한 베이지안 망각 기반 구간별 강건 강화학습 (BAPR)
본 논문은 시스템의 역학이 갑작스럽게 변하는 '구간별 정적' 환경에서 안정성과 성능을 동시에 확보하기 위한 BAPR(Bayesian Amnesic Piecewise-Robust SAC) 알고리즘을 제안합니다. 베이지안 온라인 변화 탐지(BOCD)와 강건 앙상블 강화학습을 결합하여, 체제 변화 시에는 보수적인 정책을, 안정기에는 적응적인 정책을 구사합니다. 특히 Lean 4를 사용하여 알고리즘의 수렴성과 오차 예산을 수학적으로 엄격하게 기계 검증하였습니다.
이 피드 구독하기
본 페이지의 콘텐츠는 AI가 공개된 소스를 기반으로 자동 수집·요약·번역한 것입니다. 원 저작권은 각 원저작자에게 있으며, 각 게시물의 “원문 바로가기” 링크를 통해 원문을 확인할 수 있습니다. 저작권자의 삭제 요청이 있을 경우 신속히 조치합니다.