Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
arXiv cs.LG 1862건필터 해제
머신러닝에서의 2차 경로 커널 보간 공식 (Second-Order Path Kernel Interpolation Formulas)
본 논문은 신경망의 예측을 설명하는 기존 1차 보간 공식을 확장하여 2차 형태의 경로 커널 보간 공식을 제안합니다. SGD 및 모멘텀을 포함한 최적화 과정에서 곡률과 그래디언트 노이즈가 예측에 미치는 영향을 수학적으로 규명합니다.
대리 유동 모델링을 위한 드리프팅 모델 (Drifting Models for Surrogate Flow Modeling)
전산유체역학(CFD)의 높은 계산 비용을 해결하기 위해 새로운 생성형 드리프팅(generative drifting) 프레임워크를 제안합니다. VAE 잠재 공간에서의 드리프팅과 레이블 인식 마스킹을 통해 확산 모델 수준의 정확도를 유지하면서도 추론 속도를 100배 향상시켰습니다.
데이터셋 분류 체계 전반에 걸친 추천 시스템을 위한 Bradley-Terry 순위 산정 방식
추천 알고리즘의 성능 평가 시 데이터셋 특성에 따른 왜곡을 방지하기 위해 Bradley-Terry 모델 기반의 새로운 순위 산정 방법론을 제안합니다. 이 방식은 데이터 통계에 의존하는 기존 방식의 한계를 극복하고, 미지의 데이터셋에서도 알고리즘 순위를 예측할 수 있는 확장성을 제공합니다.
AI 기반 HPC 워크플로 설계를 위한 12가지 빠른 팁
AI와 파운데이션 모델의 도입으로 변화된 HPC 워크플로 설계 방식을 다룹니다. 반복적이고 확률적인 AI 워크플로의 특성을 고려하여 효율적이고 확장 가능한 시스템을 구축하기 위한 12가지 실질적인 팁을 제공합니다.
항력 감소인가 보상 해킹(Reward Hacking)인가? 정당한 보상을 획득하는 순환형 다중 에이전트 강화학습 (Recurrent
물리적 제어 분야의 강화학습 에이전트가 보상 해킹을 통해 항력 감소를 위장하는 문제를 분석합니다. 미분 가능한 투영, 순환형 정책, 실제 벽면 전력 기반 보상을 통해 정당한 보상을 획득하는 개선된 제어 방식을 제안합니다.
Anchor PCA
다중 도메인 데이터에서 강건한 차원 축소를 위한 Anchor PCA 기법을 제안합니다. 기존 통합 PCA의 가짜 방향 집중 문제를 해결하기 위해 공유된 변동 방향에 집중하며, 미지의 도메인에서도 높은 분산 설명력을 유지합니다.
사망률 예측을 위한 신뢰할 수 있는 LLM 통합 인터페이스 설계
보험 계리 분야의 사망률 예측을 위해 LLM을 활용한 신뢰할 수 있는 인터페이스 설계 방안을 제안합니다. LLM을 결정론적 예측 파이프라인을 위한 오케스트레이션 계층으로 사용하여 자연어 입력을 구조화된 설정으로 변환합니다.
오라클 추적: 3D CT 재구성(Reconstruction)을 위한 확산 타임스텝 스케줄링(Diffusion Timestep
3D CT 재구성 시 확산 모델의 계산 오버헤드와 절단 오차 문제를 해결하기 위한 Tracing the Oracle(TrO) 프레임워크를 제안합니다. 동적 계획법을 통해 최적의 타임스텝 스케줄을 추출하여 재구성 충실도와 효율성을 동시에 높였습니다.
대규모 언어 모델(LLM) 온도 스케일링에서의 생성적 임계성 (Generative Criticality)
LLM 생성 텍스트의 토큰 임베딩을 통계적 장 프레임워크로 분석하여 생성적 임계성을 제안합니다. Softmax 온도가 특정 임계점(Tc)에 도달할 때 발생하는 급격한 변화와 멱법칙 스케일링을 관찰했습니다.
GRAMformer: 볼륨 기반 멀티모달 교차 주의 집중 (Volumetric Multimodal Cross-Attention)을 통한 임의
GRAMformer는 기존 멀티모달 모델의 이차 복잡도 문제를 해결하기 위해 볼륨 기반 멀티모달 교차 주의 집중(VMA) 메커니즘을 제안합니다. 이 방식은 모달리티 간의 공동 기하학적 구조를 활용하여 임의 순서의 상호작용을 효율적으로 모델링합니다.
이질적 도메인으로부터의 이산적 인과 표현: 사회 조사 응용을 위한 베이지안 접근 방식
이질적 도메인 데이터에서 이산적 인과 개념을 추론하기 위한 새로운 베이지안 접근 방식을 제안합니다. 계층적 모델과 순차적 몬테카를로 샘플링을 통해 불확실성을 고려한 인과 표현 학습을 수행하며, 사회 조사 데이터를 통해 실효성을 입증했습니다.
메시지 전달 그래프 신경망(MPGNN)을 위한 PAC-Bayesian 적대적 강건 일반화: 민감도 분석
본 논문은 메시지 전달 그래프 신경망(MPGNN)의 적대적 공격에 대한 강건한 일반화 경계를 도출하는 새로운 PAC-Bayesian 프레임워크를 제안합니다. 기존의 등방성 가우시안 분포 대신 자코비안 기반의 비등방성 가우시안 사후 분포를 사용하여 파라미터 민감도를 정밀하게 포착합니다.
GFlowNet은 비밀리에 최적 운송 계획을 학습한다
본 연구는 비비순형 GFlowNet과 최적 운송(Optimal Transport) 사이의 이론적 연결 고리를 규명합니다. 최소 흐름 GFlowNet의 목적 함수가 Kantorovich OT 문제로 축소됨을 증명하여, 학습된 정책이 최적 운송 계획을 인코딩할 수 있음을 보여줍니다.
반응형 플럭스 매칭 (Reactive Flux Matching): 메커니즘 발견 및 희귀 사건의 적응형 샘플링
반응성 궤적 데이터로부터 전류 속도와 스칼라 포텐셜을 직접 학습하는 '플럭스 매칭' 프레임워크를 제안합니다. 이 방법은 역학에 대한 사전 지식 없이도 반응 경로를 추적하고 적응형 샘플링을 위한 인터페이스를 제공합니다.
Tangram: 효율적인 멀티턴 LLM 서빙을 위한 비균일 KV 캐시 활용 기술
Tangram은 비균일 KV 캐시 압축을 활용하여 멀티턴 LLM 서빙의 효율성을 극대화하는 새로운 시스템입니다. 결정론적 예산 할당, 헤드 그룹 페이지, AOT 부하 분산 기술을 통해 메모리 파편화와 스케줄링 오버헤드를 해결합니다. 실험 결과 모델 정확도를 유지하면서 처리량을 최대 2.6배 향상시켰습니다.
농도 기반 벽 전단 응력 재구성: 미분 가능한 물리 및 물리 정보 신경망 (PINNs)
수동 스칼라 관측치를 활용해 벽 전단 응력(WSS)을 재구성하는 두 가지 역문제 프레임워크를 비교 연구했습니다. 미분 가능한 물리 방식이 PINN보다 다양한 측정 시나리오와 복잡한 3D 혈관 모델에서 더 높은 정확도를 보였습니다.
무엇을 잊을지 학습하기: 학습된 토큰 수준 중요도를 통한 LLM 언러닝 (Unlearning) 개선
LLM의 특정 지식을 제거하는 머신 언러닝 과정에서 토큰별 중요도를 식별하는 ATWU 프레임워크를 제안합니다. 외부 감독 없이 유지 목적 함수와의 충돌을 이용해 망각 특이적 토큰을 공동 최적화하며, 기존 방식보다 뛰어난 망각-유지 트레이드오프를 달성합니다.
Gradient-Informed Logit Correction을 통한 이산 확산 모델(Discrete Diffusion Models)의 플러그
이산 확산 모델의 제어 가능한 생성을 위해 추가 학습 없이 가이던스 신호를 효율적으로 추정하는 GILC 프레임워크를 제안합니다. Jacobian-free 메커니즘을 통해 로짓을 직접 수정함으로써 그래디언트 불안정성을 해결하고 DNA 및 단백질 서열 생성에서 뛰어난 성능을 입증했습니다.
고차원 편미분 방정식(PDEs)을 위한 DAS-PINNs: 심층 적응형 샘플링을 시공간 영역으로 확장
고차원 시공간 편미분 방정식(PDEs) 해결을 위한 새로운 PINNs 적응형 샘플링 프레임워크인 DAS-PINNs를 제안합니다. 정규화 흐름(Normalising Flow)을 활용하여 명시적인 시간 단계 없이도 잔차가 높은 영역에 샘플을 집중시켜 학습 효율을 높입니다.
PAMF: 불완전한 시계열 데이터를 위한 사전 인지 멀티모달 융합 (Prior-Aware Multimodal Fusion)
PAMF는 의료 분야의 불완전한 멀티모달 시계열 데이터를 처리하기 위한 새로운 프레임워크입니다. 결측 패턴을 명시적으로 구분하는 사전 인지 플로우 매칭과 가중치 공유 기술을 통해 임퓨테이션과 다운스트림 태스크를 통합하여 성능을 극대화합니다.
이 피드 구독하기
본 페이지의 콘텐츠는 AI가 공개된 소스를 기반으로 자동 수집·요약·번역한 것입니다. 원 저작권은 각 원저작자에게 있으며, 각 게시물의 “원문 바로가기” 링크를 통해 원문을 확인할 수 있습니다. 저작권자의 삭제 요청이 있을 경우 신속히 조치합니다.