Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
arXivAI 번역논문
실패에서 정렬(Alignment)로: 머신러닝 시스템을 위한 요구사항 공학 프레임워크
머신러닝 시스템(MLS)의 신뢰성을 확보하기 위해 이해관계자의 요구사항을 체계적으로 모델링하는 REAL 프레임워크를 제안합니다. 데이터, 모델, 시스템 전체를 통합하고 실패 사례를 통해 요구사항을 정교화하는 세 가지 원칙을 제시합니다.
7월 1일0
arXivAI 번역논문
입력값의 무작위 노이즈 섭동에 대한 신경망 (Neural Networks)의 강건성
학습된 신경망의 입력값 노이즈 섭동에 대한 강건성을 측정하는 새로운 지표를 제안합니다. MSE와 정확도 사이의 관계를 분석하며, 블랙박스 방식으로 계산이 효율적인 강건성 상한 측정법을 제시합니다.
7월 1일0
arXivAI 번역논문
SWE-INTERACT: 사용자 주도형 장기 코딩 세션으로서의 SWE 벤치마크 재구상
SWE-Interact는 다회차 상호작용과 사용자 주도형 워크플로우를 통해 코딩 에이전트의 능력을 평가하는 새로운 벤치마크를 제안합니다. 기존 단회차 평가와 달리, 모호한 요구사항과 점진적인 피드백에 대응하는 에이전트의 적응력을 측정합니다.
6월 30일0
arXivAI 번역논문
LLM 사후 학습(Post-Training)에서 온라인 모방 학습(Online Imitation Learning)이 도움이 되는 시점은
LLM 사후 학습에서 온라인 모방 학습(IL)이 오프라인 SFT보다 효과적인 원인을 분석한 연구입니다. 온라인 상호작용의 이점은 오차 누적이 아닌, 학생 모델이 전문가 모델을 표현할 수 있는지 여부(realizability)에 달려 있음을 밝혀냈습니다.
6월 30일0
arXivAI 번역논문
개방 양자계 (Open Quantum Systems)의 구조 학습
개방 양자계(Open Quantum Systems)의 Lindbladian 계수를 학습하기 위한 새로운 알고리즘을 제안합니다. 보조 큐비트 없이 무작위 Pauli 측정을 사용하는 비적응형 방식을 통해 준-국소 및 멱법칙 구조를 효율적으로 학습할 수 있습니다.
6월 30일0
arXivAI 번역논문
모델 병합(Model Merging)에 대한 파라미터 수준 방어(Parameter-Level Defenses)의 취약성에 관하여
모델 병합을 통한 무단 모델 통합을 막기 위한 파라미터 수준 방어 기제의 취약성을 분석한 연구입니다. 사전 학습된 모델의 지배력을 이용해 방어 기제를 우회하는 '앵커 가이드 공격(AGA)'을 제안하며, 이를 방어하기 위한 '앵커 반발 미세 조정(ARF)' 방법론을 함께 제시합니다.
6월 30일0
arXivAI 번역논문
FlowAWR: Advantage-Weighted Rectification을 통한 온라인 적응형 플로우 강화학습
FlowAWR은 연속 공간에서 생성형 플로우 모델을 온라인 강화학습으로 정렬하는 새로운 패러다임을 제안합니다. SDE 샘플러와 CFG 없이도 이론적으로 최적화된 속도장을 도출하여 수렴 속도와 정렬 성능을 크게 향상시켰습니다.
6월 30일0
arXivAI 번역논문
RenderFormer++: 메쉬 장면의 전역 조명을 위한 확장 가능하고 물리적으로 근거를 둔 피드포워드 신경 렌더링
RenderFormer++는 메쉬 장면의 전역 조명을 위한 확장 가능한 피드포워드 신경 렌더링 프레임워크입니다. PITG와 HOCT 기술을 통해 물리적 일관성을 유지하면서도 계산 복잡도를 획기적으로 줄였습니다.
6월 30일0
arXivAI 번역논문
신경망 학습 역학의 스칼라 표현 (Scalar Representations of Neural Network Training Dynamics)
신경망 학습 궤적을 시계열 네트워크의 스칼라 임베딩을 통해 저차원으로 표현하는 연구를 소개합니다. MNIST 실험을 통해 임베딩이 학습률 민감도와 리아푸노프 지수 등 주요 역학적 특징을 효과적으로 보존함을 입증했습니다.
6월 30일0
arXivAI 번역논문
예측, 재사용 및 복구: 긴 문맥 LLM 디코딩을 위한 동적 희소 어텐션 (Dynamic Sparse Attention) 가속화
긴 문맥 LLM 디코딩 시 발생하는 동적 희소 어텐션(DSA)의 지연 시간 문제를 해결하기 위해 PRR 런타임을 제안합니다. 예측, 재사용, 복구 메커니즘을 통해 정확도를 유지하면서 디코딩 지연 시간을 최대 40% 단축했습니다.
6월 30일0
arXivAI 번역논문
SGD가 XOR 모델에서 우회 경로의 가짜 특징을 학습하는 것을 증명
본 논문은 2층 ReLU 신경망이 SGD를 통해 학습할 때 가짜 상관관계(spurious correlations)를 지수적으로 빠르게 학습하는 메커니즘을 이론적으로 규명합니다. XOR 신호와 가짜 특징이 공존할 때, 가짜 특징이 신호 학습을 억제하는 상전이 현상을 분석합니다.
6월 30일0
arXivAI 번역논문
보상 기반 모멘트 매칭 증류(Rewarded Moment Matching Distillation)를 이용한 확산 모델 미세 조정
확산 모델의 증류와 강화학습 미세 조정을 결합한 새로운 프레임워크인 RMMD를 제안합니다. RMMD는 샘플링 루프를 온폴리시 학습에 맞게 조정하여 생성 품질과 속도 사이의 최적의 트레이드오프를 달성합니다.
6월 30일0
arXivAI 번역논문
LLM 추론을 위한 경험 증강 정책 최적화 (Experience Augmented Policy Optimization)
LLM의 추론 능력을 향상시키기 위한 새로운 강화학습 방법론인 EAPO를 제안합니다. 기존 RLVR의 높은 샘플링 비용과 정책 불일치 문제를 해결하기 위해 정책 적응형 경험 주입 방식을 사용합니다.
6월 30일0
arXivAI 번역논문
머신러닝 모델을 위한 소유권 증명 (Proofs of Ownership for Machine Learning Models)
머신러닝 모델의 소유권을 보호하기 위한 '소유권 증명(Proof of Ownership)'에 관한 연구를 소개합니다. 모델 소유자, 도둑, 판사 간의 게임 이론적 모델링을 통해 도난된 모델의 출처를 증명할 수 있는 조건을 분석합니다.
6월 30일0
arXivAI 번역논문
Arko-T: 텍스트 기반 구조화된 3D 생성을 위한 파운데이션 모델 (Foundation Model)
Arko-T는 자연어 의도를 편집 가능한 파라메트릭 CAD 프로그램으로 변환하는 4B 규모의 텍스트-to-설계 파운데이션 모델입니다. 단순 형상 생성을 넘어 설계 상태, 파라미터, 구성 로직을 보존하며 벤치마크에서 프런티어 LLM에 필적하는 성능을 입증했습니다.
6월 30일0
arXivAI 번역논문
당신의 결과를 신뢰할 수 있는가? CAN IDS 평가에 대한 교차 데이터셋 연구
차량 내 CAN 버스를 보호하는 침입 탐지 시스템(IDS)의 평가 방식이 데이터셋에 따라 편향될 수 있음을 지적합니다. 이를 해결하기 위해 7개의 공개 데이터셋을 통합한 새로운 벤치마킹 프레임워크를 제안하고 교차 데이터셋 평가를 수행했습니다.
6월 30일0
arXivAI 번역논문
내부 상태 프로브(Internal-State Probes)는 행동이 아닌 상황을 읽는다: 사전 행동 불일치 모니터링(Pre-Action
모델의 내부 상태 프로브를 통해 유해한 행동이 발생하기 전 이를 미리 감지할 수 있는지 연구했습니다. Qwen, Llama, Gemma 모델을 대상으로 실험한 결과, 현재의 기술로는 행동의 일반화와 개념 특이성 통제를 통과하는 견고한 사전 행동 모니터링이 어렵다는 부정적 결과를 도출했습니다.
6월 30일0
arXivAI 번역논문
곡률 가중 그래디언트 다양성 (Curvature-Weighted Gradient Diversity): 기하학적 적응형 SGD 스케줄을 위한
표준 SGD의 노이즈 모델링 한계를 극복하기 위해 헤시안의 역 제곱근을 활용한 '곡률 가중 그래디언트 다양성(CWGD)'을 제안합니다. CWGD-Cosine 스케줄은 이차 목적 함수에서 표준 코사인 어닐링보다 최적화 오차를 최대 2배까지 줄일 수 있음을 증명했습니다.
6월 30일0
arXivAI 번역논문
HSAP: 하이브리드 컨텍스트 생성 모델을 위한 계층적 시퀀스 인식 병렬화
하이브리드 컨텍스트 패킹 시퀀스에서 발생하는 인과적 어텐션의 교차 오염 문제를 해결하기 위한 새로운 시퀀스 병렬화 프레임워크 HSAP를 제안합니다. JIT 컴파일과 NCCL 최적화를 통해 통신 오버헤드를 줄이고 기존 방식보다 뛰어난 성능을 입증했습니다.
6월 30일0
arXivAI 번역논문
표 형식의 기업 데이터와 공개 벤치마크 간의 차이점 탐색
본 연구는 기업용 표 형식 데이터와 공개 벤치마크 간의 차이점을 분석합니다. TabPFN, TabICL 등의 모델을 통해 기업 데이터의 특성을 실체화한 결과, 기존 벤치마크와 실제 기업 데이터 간의 성능 불일치를 확인했습니다.
6월 30일0