Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
arXivAI 번역논문
LLM 강화학습을 위한 예측 분산 마스크 (Predictive Divergence Masks for LLM RL)
본 논문은 LLM 강화학습(RL)에서 사용되는 신뢰 영역 마스크의 한계를 지적하고, 이를 개선한 예측 분산 마스크(Predictive Divergence Mask)를 제안합니다. 이 새로운 마스크는 정책 기울기 단계가 신뢰 영역 내에서 분산을 증가시키거나 감소시킬지 예측하여 RL 학습을 안정화하는 것을 목표로 합니다.
7월 14일0
arXivAI 번역논문
온도 샘플링과 분산 보정 시간 이동을 통한 확산 모델 다양성 확보
본 논문은 확산 모델의 한계인 희귀 모드 도달 어려움을 해결하기 위해 '온도 샘플링' 기법을 제안합니다. 여기에 추가로, 분산 증가 문제를 해결하는 '분산 보정 시간 이동(variance-corrective time shifting)'이라는 비훈련적 방법을 도입했습니다. 이 방법은 모델의 다양성을 높이면서도 샘플 품질과 조건 충실도를 유지하여 다양한 확산 모델에 적용 가능함을 입증합니다.
7월 14일0
arXivAI 번역논문
특이 섭동과 이계층 신경망에서의 계층적 학습
본 논문은 고차원에서 잘못 사양화된 단일 지수 모델을 학습하는 두 개의 층 신경망의 개체군 기울기 흐름을 연구합니다. 특히, 명시적 시간 스케일을 가진 계층적 학습 시나리오에서 숨겨진 연결 함수의 상수 및 선형 성분이 임계값에서 복구됨을 증명했습니다.
7월 14일0
arXivAI 번역논문
약물 및 단백질을 위한 전이 가능한 암시적 용매 기계 학습 포텐셜: Ab Initio 정확도에 근접
본 논문은 약물 및 단백질 시뮬레이션을 위해 Equivariant Graph Neural Network 기반의 새로운 암시적 물 네트워크(TWIN)를 제안합니다. TWIN은 오직 ab initio 데이터와 실험적 레이블만으로 훈련되었으며, 기존 기계 학습 포텐셜보다 빠르면서도 DFT 수준의 정확도를 유지하여 생체 분자 시스템 모델링에 혁신을 가져올 것으로 기대됩니다.
7월 14일0
arXivAI 번역논문
ZoRRO: 확장 가능한 뉴스 추천을 위한 제로 가중치 개인화 추천 시스템
ZoRRO는 학습이 필요 없는 제로 가중치(zero-weight) 프레임워크 기반의 개인화 추천 시스템입니다. 이 시스템은 기존 신경망 모델 대비 오프라인 평가에서 우수한 성능을 보였으며, 온라인 A/B 테스트에서도 높은 클릭률을 달성했습니다. 특히 600배 이상의 빠른 작동 속도를 제공하여 대규모 뉴스 추천에 효율적임을 입증했습니다.
7월 14일0
arXivAI 번역논문
트랜스포머 역학에서 적외선 조직화 및 임계 인지장 형성
본 논문은 LLM의 작동 메커니즘을 물리적 관점에서 분석하며, 인지장 이론(Cognitive Field Theory)을 적용했습니다. 트랜스포머 레이어 야코비안으로부터 이완 스펙트럼을 추출하여 TDOS와 메모리 자가 에너지 등을 정량적으로 측정했습니다. 그 결과, LLM의 역학이 적외선 느린 모드의 점진적 축적에 의해 지배됨을 보여주었습니다.
7월 14일0
arXivAI 번역논문
내부 레이블 이동을 통한 추천 시스템의 규범적 정렬 (Normative Alignment of Recommender Systems via
NAILS는 아이템 속성에 대한 목표 분포와 추천 출력을 정렬하는 새로운 방법을 제시합니다. 이 방법은 사용자 참여 최적화에만 집중된 기존 시스템의 한계를 극복하고, 공정성이나 다양성 같은 규범적 목표를 충족시키도록 돕습니다. 모델 재학습 없이도 원하는 속성 수준의 분포 유도가 가능하여 실용적입니다.
7월 14일0
arXivAI 번역논문
Minimax 최적 후회(Regret)를 갖는 Bandit PCA 연구
본 연구는 온라인 주성분 분석(PCA)의 bandit 피드백 버전을 다루며, 적대적 환경에서 학습자가 최소 후회(regret)를 달성하는 방법을 탐구합니다. 기존 알고리즘의 상한과 하한 경계를 개선하여 $r oot{d}T$ 순서의 minimax 후회를 확립했습니다. 특히, 새로운 온라인 미러 디센트와 적응형 적대자를 결합하여 이론적 성능을 크게 향상시켰습니다.
7월 14일0
arXivAI 번역논문
잠재적 치료 효과의 스펙트럼 구조
본 논문은 관측적 인과 추론에서 이질적인 치료 효과를 식별하는 방법을 제시합니다. 특히, 합성 잠재 결과(SPO) 모멘트를 재귀적으로 구성하여 치료 효과의 혼합을 복구하며, 이를 공유 프록시 신호 부분 공간으로 투영한 연산자 차이를 통해 잠재적 치료 효과를 추출할 수 있음을 보여줍니다.
7월 14일0
arXivAI 번역논문
GatedLinear: 시계열 예측을 위한 보완적 선형 기저의 적응적 라우팅
GatedLinear는 시계열 예측의 이질성을 해결하기 위해 적응적 라우팅 프레임워크를 제안합니다. 이는 전역 추세, 차분 기반 증분, 위상 정렬 순환 등 세 가지 전문화된 선형 기저 풀을 활용하며, Tri-Factorized Fusion Gate를 통해 동적으로 오케스트레이션됩니다. 이 방식은 복잡한 모델 대비 높은 정확도와 작은 파라미터 크기를 달성합니다.
7월 13일0
arXivAI 번역논문
TSAI-MetaFraud: 메타버스 생태계 내 금융 사기 거래 및 행동 위험 탐지 벤치마크 데이터셋
본 논문은 메타버스 플랫폼의 증가하는 사기 위험에 대응하기 위해 멀티모달, 멀티태스크 벤치마크 데이터셋인 TSAI-MetaFraud를 제안합니다. 이 데이터셋은 행동적, 거래적, 그래프 구조화된 정보를 통합하여 현실적인 사기와 자동화된 봇 시나리오를 포괄합니다. 이를 통해 메타버스 생태계의 신뢰할 수 있는 AI 발전을 위한 평가 기준을 제시합니다.
7월 13일0
arXivAI 번역논문
CoCoT-EEG: EEG 디코딩을 위한 대조 학습 기반 다중 스케일 컨볼루션 트랜스포머 사전 훈련 모델
본 논문은 비침습적 EEG 디코딩을 위한 새로운 대조 학습 기반 사전 훈련 모델 CoCoT를 제안합니다. 기존의 마스크 복원 방식이 EEG 데이터에 최적이 아니라는 문제점을 지적하며, 다중 스케일 컨볼루션과 트랜스포머 인코더를 결합한 아키텍처를 설계했습니다. CoCoT는 다양한 벤치마크에서 높은 성능을 보여주며 대조 학습 기반 EEG Foundation Model의 가능성을 입증합니다.
7월 13일0
arXivAI 번역논문
고정된 표현을 넘어서: 개방형 AI의 어휘 및 검증자 격차
본 논문은 현재 AI 시스템이 고정된 표현적 틀(representational frame) 내에서 작동하는 구조적 한계를 지적하며, 진정한 개방형 지능을 위해서는 새로운 표현적 원시 요소 생성 능력이 필요하다고 주장합니다. 저자들은 이 간극을 '어휘 격차'와 '검증자 격차'라는 두 가지 관점에서 분석하고, 이를 인지적 불일치 감소라는 틀로 해석했습니다.
7월 13일0
arXivAI 번역논문
개수는 존재하지만 정렬되지 않음: VLM의 계수 실패 이해 및 교정
본 논문은 VLM이 사물 개수(counting)에서 어려움을 겪는 현상을 분석하고, 그 원인을 내부 표현과 언어화된 출력 사이의 격차로 규명했습니다. 비선형 프로브 학습을 통해 모델이 잘못된 답을 내놓아도 올바른 정보를 인코딩함을 확인했으며, 이를 바탕으로 오류 감지 기반 자체 교정 방법을 제안하여 계수 정확도를 향상시켰습니다.
7월 13일0
arXivAI 번역논문
딥 신경망에서 통계적으로 탐지 불가능한 백도어
본 논문은 적대적 모델 트레이너가 대규모 깊은 피드포워드 신경망에 통계적으로 탐지 불가능한 백도어를 심을 수 있음을 이론적으로 증명했습니다. 이 백도어는 화이트박스 설정에서도 원본 모델과 구별하기 어려우며, 입력의 변동성을 조작하여 특정 출력으로 매핑하는 능력을 제공합니다.
7월 13일0
arXivAI 번역논문
잔여 데이터 증강을 이용한 엔트로피 제약 기계 학습을 통한 화학 반응 동역학 모델링
본 논문은 난류 반응 유동의 DNS 가속화를 위해 물리 기반 기계 학습 프레임워크를 제안합니다. 이 모델은 상세 화학 소스 항을 대리 모델로 대체하고, 훈련 시 두 번째 열역학 법칙(비음성 엔트로피 생성)을 통합하여 물리적 일관성을 확보했습니다. 또한 잔여 데이터 증강 전략으로 계산 효율성과 정확도를 동시에 높였습니다.
7월 13일0
arXivAI 번역논문
PeTeR: 확률적 회로의 학습 후 강건화 (Post-Training Robustification of Probabilistic
본 논문은 확률적 회로(PCs)가 데이터 노이즈나 분포 변화에 취약한 문제를 해결하기 위해 PeTeR이라는 새로운 학습 후 강건화 프레임워크를 제안합니다. PeTeR은 사전 학습된 PC를 재학습 없이 분포 변화에 강건하게 만드는 데이터 프리 방식입니다.
7월 9일0
arXivAI 번역논문
GRPO 신호 극대화: 난이도 문제에 대한 적응형 트레이스 접두사 제어
본 논문은 Group Relative Policy Optimization (GRPO)의 한계를 극복하기 위해 AdaPrefix-GRPO라는 새로운 방법을 제안합니다. 이 방법은 참조 해답의 접두사 길이를 난이도에 따라 동적으로 조절하는 피드백 컨트롤러를 도입하여, 모델 학습 과정에서 가장 효과적인 기울기 신호를 얻도록 합니다. 이를 통해 어려운 문제 해결 능력을 크게 향상시키고 트레이스 길이는 줄일 수 있습니다.
7월 9일0
arXivAI 번역논문
신경 연산자 기반 위상 정보 활용 진화 전략을 이용한 편미분 방정식 제약 최적화
본 논문은 PDE 기반 물리 시스템의 역설계를 위해 신경 연산자(DeepONet)와 진화 전략(CMA-ES)을 결합한 NOTES를 제안합니다. NOTES는 위상 정보를 활용하여 고차원 설계 공간에서 효율적이고 전이 가능한 글로벌 최적화를 수행하며, 나노광학 빔 디플렉터 및 구조 최적화 등 다양한 분야에서 우수한 성능을 입증했습니다.
7월 9일0
arXivAI 번역논문
선형화의 핵심: 분석 기반 트랜스포머 선형화
본 연구는 인과적 셀프 어텐션의 2차 비용 문제를 해결하기 위해 트랜스포머 선형화 기법을 제안합니다. 모델 품질 보존에 초점을 맞춰, 상태 업데이트 설계와 구조적 개입(싱크 토큰 등)을 분석했습니다. LLaMA 및 Qwen 같은 대규모 모델까지 확장하여 MMLU에서 우수한 성능과 긴 컨텍스트 검색 능력을 입증했습니다.
7월 9일0