Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
arXiv cs.LG 1862건필터 해제
모달리티 불균형 연합 그래프 학습을 향하여: 데이터 합성 기반 접근 방식
멀티모달 연합 그래프 학습(MM-FGL)에서 발생하는 클라이언트 및 노드 수준의 모달리티 불균형 문제를 해결하기 위한 FedMGS 프레임워크를 제안합니다. 데이터 합성 기반의 접근 방식을 통해 누락된 모달리티의 의미를 복구하고 모델의 성능과 효율성을 높였습니다.
확장 가능하고 샘플 효율적인 심층 강화학습 (Deep Reinforcement Learning)을 위한 직접적 어드밴티지 추정 (Direct
본 연구는 심층 강화학습의 샘플 효율성을 높이는 직접적 어드밴티지 추정(DAE)의 한계를 개선합니다. 부분 관측 가능 도메인으로의 확장과 이산 잠재 역학 모델을 통한 계산 복잡도 감소를 통해 효율적인 학습을 가능하게 합니다.
의사 특징 패딩 (Pseudo-Feature Padding): 전력망 내 허위 데이터 주입 (FDIA)에 대한 경량 방어 기법
전력망 사이버 물리 시스템(CPS) 내 허위 데이터 주입 공격(FDIA)을 방어하기 위한 경량화된 DNN 강화 프레임워크를 제안합니다. 입력 데이터의 통계적 분포를 활용한 의사 특징 패딩을 통해 적대적 공격에 대한 모델의 강건성을 높입니다.
주석 없는 합성 데이터 생성에서 스타일 다양성의 중요성
주석 없는 데이터만으로 의도 분류를 위한 합성 대화를 생성하는 새로운 프레임워크를 제안합니다. 주제와 스타일 속성을 활용하여 데이터 다양성을 높였으며, 스타일 다양성이 주제 다양성보다 합성 데이터의 효용성에 더 중요하다는 것을 입증했습니다.
확산 모델 (Diffusion Models)에서 타임스텝 임베딩 (Timestep Embeddings)의 중복성에 대하여
확산 모델에서 명시적인 타임스텝 임베딩의 필요성에 의문을 제기하는 연구입니다. 이론적 프레임워크와 실험을 통해 타임스텝 컨디셔닝 없이도 모델이 노이즈 스케일을 암시적으로 추론할 수 있음을 증명했습니다.
편미분 방정식의 역문제 해결을 위한 불확실성 정량화 기반 신경망 대리 모델
미분 방정식의 역문제를 해결하기 위해 불확실성을 정량화하는 신경망 대리 모델인 DeepGaLA를 제안합니다. 기존 수치적 방법의 높은 계산 비용을 줄이면서도, 고차원 파라미터 공간에서 가우시안 프로세스 대비 뛰어난 효율성과 정확도를 보여줍니다.
희소성, 중첩, 그리고 망각: 지속 학습에서의 표현 유지에 관한 기계론적 연구
지속 학습(CL)에서 발생하는 망각 메커니즘을 분석하기 위해 희소성, 중첩, 표현 강도를 측정할 수 있는 통제된 프레임워크를 제안합니다. 연구 결과, 중첩이 반드시 망각을 유발하는 것은 아니며 표현 강도 및 용량 할당과 복잡하게 상호작용함을 밝혀냈습니다.
HEPTv2: 전하 입자 재구성을 위한 엔드투엔드 효율적 포인트 트랜스포머 (Point Transformer)
HEPTv2는 고에너지 물리학의 전하 입자 추적을 위해 설계된 엔드투엔드 포인트 트랜스포머 아키텍처입니다. 국소 민감 해싱 기반 인코더와 직접적인 히트-투-트랙 예측 디코더를 결합하여, 기존 그래프 신경망 대비 지연 시간을 획기적으로 줄이면서도 높은 정확도를 달성했습니다.
물리 정보 신경망 (PINNs)을 위한 진화론적 2단계 하이퍼파라미터 최적화 전략
PINNs의 불안정한 수렴과 하이퍼파라미터 민감도 문제를 해결하기 위해 진화 알고리즘 기반의 2단계 최적화 전략을 제안합니다. 저충실도 학습으로 후보를 선별한 후 표준 경사 기반 방식으로 정교화하여 정확도와 강건성을 높였습니다.
고차원 동적 프로세스 모니터링을 위한 위상 데이터 분석 (TDA)
위상 데이터 분석(TDA)과 머신러닝을 결합하여 고차원 시계열 데이터의 프로세스 모니터링을 수행하는 새로운 방법론을 제안합니다. 다변량 데이터를 매니폴드로 표현하고 Neural ODE를 통해 위상 구조의 동적 진화를 학습하여 효과적인 이벤트 탐지를 구현합니다.
SSH-Net: GPU 데이터를 활용한 경쟁 위험 하의 고장 시간 분포 함수 예측을 위한 심층 신경망
경쟁 위험 상황에서 GPU의 고장 시간을 예측하기 위한 새로운 심층 신경망 구조인 SSH-Net을 제안합니다. 데이터의 구조적 특성을 반영하여 하위 네트워크를 분할함으로써 복잡한 공학 시스템의 고장 예측 정확도를 높였습니다.
커버리지 제약 조건 하에서의 데이터 편향 완화 및 공정성의 비용
머신러닝 모델의 교차적 편향을 완화하기 위해 커버리지 제약 조건을 통합한 새로운 프레임워크를 제안합니다. 데이터 효율성을 높이면서도 공정성 허용 범위에 따른 데이터 수정 비용을 정량화하여 최적의 절충안을 제시합니다.
에이전트 기반 심볼릭 탐색 (Agentic Symbolic Search): 수작업으로 만든 표현식, 메쉬(Mesh), 그리고 신경망을 넘어선
에이전트 기반 심볼릭 탐색(ASYS)은 PDE 해를 이해하기 위해 미분 가능한 심볼릭 프로그램을 생성하는 새로운 프레임워크를 제안합니다. 진화적 탐색과 경사 하강법을 결합하여 수치 시뮬레이션이나 신경망이 제공하지 못하는 해석 가능한 수학적 구조를 도출합니다.
Fisher-기하학적 날카로움(Fisher-Geometric Sharpness)과 평탄한 최솟값(Flat Minima)을 향한 SGD의 암묵적
SGD가 평탄한 최솟값을 선호하는 이유를 리만 기하학 관점에서 재정의하여, 기존 유클리드 방식의 재매개변수화 불변성 문제를 해결합니다. Fisher 정보 행렬을 통해 수학적으로 엄밀한 평탄도를 정의하고, 이것이 일반화 성능과 직결됨을 증명합니다.
최적의 결정론적 다중 교정 및 전방 예측
다중 교정(multicalibration)에서 최적의 샘플 복잡도를 달성하는 결정론적 예측 알고리즘을 제안합니다. 기존의 무작위 예측기 한계를 극복하고, 결과 구별 불가능성(OI)을 만족하는 최적의 결정론적 전방 예측기 및 범예측기를 제공합니다.
당신의 마우스와 시선이 비밀스럽게 선호도를 유출합니다: 사용자의 암묵적 피드백을 이용한 LLM 정렬 (Alignment)
사용자의 마우스 궤적과 시선 데이터를 활용하여 LLM의 정렬(Alignment) 성능을 높이는 연구를 소개합니다. 기존의 명시적 피드백 방식의 비용 문제를 해결하기 위해 암묵적 피드백 데이터셋인 IFLLM을 구축하고 그 효과를 입증했습니다.
영상의학을 위한 공간적 근거를 갖춘 2D 시각-언어 모델(Vision-Language Models)의 확장 가능한 학습
수동 주석 없이 영상의학용 시각-언어 모델(VLM)을 학습시키는 새로운 방법론을 제안합니다. 120만 개의 의료 이미지-텍스트 쌍인 RefRad2D 데이터셋과 이를 통해 학습된 RadGrounder 모델을 통해 보고서 생성 및 공간적 근거 제시 성능을 입증했습니다.
메모리 기반 에이전트의 자기 진화를 위한 한계 이득 축적 (Marginal Advantage Accumulation)
메모리 기반 에이전트의 자기 진화를 위해 배치 간 모순된 피드백 문제를 해결하는 MAA(Marginal Advantage Accumulation) 기법을 제안합니다. 차분 신호와 EMA를 활용해 작업별 증거를 축적함으로써 안정적인 학습을 가능하게 합니다.
변분 및 고전 신경망을 통한 다중 큐트리트(Multi-Qutrit) 시스템의 엔트로피 추정
변분 양자 알고리즘(VQA)과 CNN을 활용하여 다중 큐트리트 시스템의 폰 노이만 엔트로피를 추정하는 연구를 제시합니다. 소규모 시스템에는 VQA가 효과적이지만, 시스템 규모가 커질수록 CNN 기반 방식이 뛰어난 확장성과 강건성을 보임을 입증했습니다.
Execution-State Capsules: 저지연, 소규모 배치, 온디바이스 Physical-AI 서빙을 위한 그래프 경계 실행 상태
저지연 온디바이스 Physical-AI 서빙을 위해 실행 상태 전체를 스냅샷할 수 있는 'Execution-State Capsules' 기술을 제안합니다. KV 캐시를 넘어 순환 상태와 메타데이터를 포함한 그래프 경계 전체를 관리하여 빠른 복구와 재사용을 지원합니다.
이 피드 구독하기
본 페이지의 콘텐츠는 AI가 공개된 소스를 기반으로 자동 수집·요약·번역한 것입니다. 원 저작권은 각 원저작자에게 있으며, 각 게시물의 “원문 바로가기” 링크를 통해 원문을 확인할 수 있습니다. 저작권자의 삭제 요청이 있을 경우 신속히 조치합니다.