Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
arXivAI 번역논문
불공정한 심사관 내부: LLM-as-Judge 편향에 대한 기계적 해석 가능성 분석
본 연구는 LLM-as-judge의 편향을 단순히 입력-출력 수준이 아닌, 모델 내부 은닉 상태(hidden state)의 표현 기하학적 관점에서 분석했습니다. 이를 통해 특정 편향이 저차원 부분 공간으로 나타나며, 이 부분을 조작하여 점수 산정을 유도하거나 실패를 예측할 수 있음을 입증했습니다.
7월 14일0
arXivAI 번역논문
검증된 교수-피드백 분류 프로토콜을 위한 내구성과 교차 언어 전이 벤치마크
본 연구는 개방형 교수 평가 피드백을 주제별 범주와 감성으로 분류하는 검증된 프로토콜을 제시합니다. 이 프로토콜은 세 가지 표현 세대(희소 특징, 고정 임베딩, LLM 프롬프팅)를 거쳐 스페인어 데이터에서 재실행되었으며, 영어로의 전이 가능성을 테스트했습니다.
7월 14일0
arXivAI 번역논문
순차적 코딩(Requential Coding): 자체 생성 훈련 데이터로 모델 압축의 한계를 확장하다
본 논문은 'requential coding'이라는 새로운 압축 기법을 제안합니다. 이 방법은 훈련 궤적을 효율적으로 압축하여, 모델의 크기나 데이터 엔트로피에 관계없이 매우 짧고 강력한 코드를 생성할 수 있습니다. 이는 대규모 언어 모델(LLM)의 일반화 성능과 컴퓨팅 최적 영역에서의 이론적 경계를 개선하는 데 기여합니다.
7월 14일0
arXivAI 번역논문
정교한 조작을 위한 최소주의적 리타게팅 기반 강화학습 레시피
본 논문은 단일 인간 시연으로부터 정교한 조작 정책을 학습하는 최소주의적 리타게팅 기반 RL 파이프라인인 REGRIND를 제시합니다. REGRIND는 손-물체 동작을 로봇 참조값으로 변환하고, 잔여 RL 정책 훈련 및 시스템 식별 과정을 거쳐 하드웨어에 제로샷 전이를 수행합니다. 이를 통해 가위 사용이나 드라이버 돌리기 같은 접촉이 많은 도구 사용 작업에서 인간과 유사한 유연한 동작 구현을 입증했습니다.
7월 14일0
arXivAI 번역논문
귀납 추론 과제에서 트랜스포머의 불변 학습 역학
본 논문은 트랜스포머 언어 모델에서 귀납적 추론 능력이 나타나는 원리를 설명하는 이론적 프레임워크를 제시합니다. 여러 합성 과제를 통합한 일반화된 귀납적 과제 클래스를 연구하여, 어텐션 모델의 훈련 역학이 해석 가능한 저차원 불변 다양체에 국한됨을 증명했습니다. 이를 통해 트랜스포머 학습 과정을 예측 이론으로 접근할 수 있는 기반을 마련합니다.
7월 14일0
arXivAI 번역논문
LLM 강화학습을 위한 예측 분산 마스크 (Predictive Divergence Masks for LLM RL)
본 논문은 LLM 강화학습(RL)에서 사용되는 신뢰 영역 마스크의 한계를 지적하고, 이를 개선한 예측 분산 마스크(Predictive Divergence Mask)를 제안합니다. 이 새로운 마스크는 정책 기울기 단계가 신뢰 영역 내에서 분산을 증가시키거나 감소시킬지 예측하여 RL 학습을 안정화하는 것을 목표로 합니다.
7월 14일0
arXivAI 번역논문
온도 샘플링과 분산 보정 시간 이동을 통한 확산 모델 다양성 확보
본 논문은 확산 모델의 한계인 희귀 모드 도달 어려움을 해결하기 위해 '온도 샘플링' 기법을 제안합니다. 여기에 추가로, 분산 증가 문제를 해결하는 '분산 보정 시간 이동(variance-corrective time shifting)'이라는 비훈련적 방법을 도입했습니다. 이 방법은 모델의 다양성을 높이면서도 샘플 품질과 조건 충실도를 유지하여 다양한 확산 모델에 적용 가능함을 입증합니다.
7월 14일0
arXivAI 번역논문
특이 섭동과 이계층 신경망에서의 계층적 학습
본 논문은 고차원에서 잘못 사양화된 단일 지수 모델을 학습하는 두 개의 층 신경망의 개체군 기울기 흐름을 연구합니다. 특히, 명시적 시간 스케일을 가진 계층적 학습 시나리오에서 숨겨진 연결 함수의 상수 및 선형 성분이 임계값에서 복구됨을 증명했습니다.
7월 14일0
arXivAI 번역논문
약물 및 단백질을 위한 전이 가능한 암시적 용매 기계 학습 포텐셜: Ab Initio 정확도에 근접
본 논문은 약물 및 단백질 시뮬레이션을 위해 Equivariant Graph Neural Network 기반의 새로운 암시적 물 네트워크(TWIN)를 제안합니다. TWIN은 오직 ab initio 데이터와 실험적 레이블만으로 훈련되었으며, 기존 기계 학습 포텐셜보다 빠르면서도 DFT 수준의 정확도를 유지하여 생체 분자 시스템 모델링에 혁신을 가져올 것으로 기대됩니다.
7월 14일0
arXivAI 번역논문
ZoRRO: 확장 가능한 뉴스 추천을 위한 제로 가중치 개인화 추천 시스템
ZoRRO는 학습이 필요 없는 제로 가중치(zero-weight) 프레임워크 기반의 개인화 추천 시스템입니다. 이 시스템은 기존 신경망 모델 대비 오프라인 평가에서 우수한 성능을 보였으며, 온라인 A/B 테스트에서도 높은 클릭률을 달성했습니다. 특히 600배 이상의 빠른 작동 속도를 제공하여 대규모 뉴스 추천에 효율적임을 입증했습니다.
7월 14일0
arXivAI 번역논문
트랜스포머 역학에서 적외선 조직화 및 임계 인지장 형성
본 논문은 LLM의 작동 메커니즘을 물리적 관점에서 분석하며, 인지장 이론(Cognitive Field Theory)을 적용했습니다. 트랜스포머 레이어 야코비안으로부터 이완 스펙트럼을 추출하여 TDOS와 메모리 자가 에너지 등을 정량적으로 측정했습니다. 그 결과, LLM의 역학이 적외선 느린 모드의 점진적 축적에 의해 지배됨을 보여주었습니다.
7월 14일0
arXivAI 번역논문
내부 레이블 이동을 통한 추천 시스템의 규범적 정렬 (Normative Alignment of Recommender Systems via
NAILS는 아이템 속성에 대한 목표 분포와 추천 출력을 정렬하는 새로운 방법을 제시합니다. 이 방법은 사용자 참여 최적화에만 집중된 기존 시스템의 한계를 극복하고, 공정성이나 다양성 같은 규범적 목표를 충족시키도록 돕습니다. 모델 재학습 없이도 원하는 속성 수준의 분포 유도가 가능하여 실용적입니다.
7월 14일0
arXivAI 번역논문
Minimax 최적 후회(Regret)를 갖는 Bandit PCA 연구
본 연구는 온라인 주성분 분석(PCA)의 bandit 피드백 버전을 다루며, 적대적 환경에서 학습자가 최소 후회(regret)를 달성하는 방법을 탐구합니다. 기존 알고리즘의 상한과 하한 경계를 개선하여 $r oot{d}T$ 순서의 minimax 후회를 확립했습니다. 특히, 새로운 온라인 미러 디센트와 적응형 적대자를 결합하여 이론적 성능을 크게 향상시켰습니다.
7월 14일0
arXivAI 번역논문
잠재적 치료 효과의 스펙트럼 구조
본 논문은 관측적 인과 추론에서 이질적인 치료 효과를 식별하는 방법을 제시합니다. 특히, 합성 잠재 결과(SPO) 모멘트를 재귀적으로 구성하여 치료 효과의 혼합을 복구하며, 이를 공유 프록시 신호 부분 공간으로 투영한 연산자 차이를 통해 잠재적 치료 효과를 추출할 수 있음을 보여줍니다.
7월 14일0
arXivAI 번역논문
GatedLinear: 시계열 예측을 위한 보완적 선형 기저의 적응적 라우팅
GatedLinear는 시계열 예측의 이질성을 해결하기 위해 적응적 라우팅 프레임워크를 제안합니다. 이는 전역 추세, 차분 기반 증분, 위상 정렬 순환 등 세 가지 전문화된 선형 기저 풀을 활용하며, Tri-Factorized Fusion Gate를 통해 동적으로 오케스트레이션됩니다. 이 방식은 복잡한 모델 대비 높은 정확도와 작은 파라미터 크기를 달성합니다.
7월 13일0
arXivAI 번역논문
TSAI-MetaFraud: 메타버스 생태계 내 금융 사기 거래 및 행동 위험 탐지 벤치마크 데이터셋
본 논문은 메타버스 플랫폼의 증가하는 사기 위험에 대응하기 위해 멀티모달, 멀티태스크 벤치마크 데이터셋인 TSAI-MetaFraud를 제안합니다. 이 데이터셋은 행동적, 거래적, 그래프 구조화된 정보를 통합하여 현실적인 사기와 자동화된 봇 시나리오를 포괄합니다. 이를 통해 메타버스 생태계의 신뢰할 수 있는 AI 발전을 위한 평가 기준을 제시합니다.
7월 13일0
arXivAI 번역논문
CoCoT-EEG: EEG 디코딩을 위한 대조 학습 기반 다중 스케일 컨볼루션 트랜스포머 사전 훈련 모델
본 논문은 비침습적 EEG 디코딩을 위한 새로운 대조 학습 기반 사전 훈련 모델 CoCoT를 제안합니다. 기존의 마스크 복원 방식이 EEG 데이터에 최적이 아니라는 문제점을 지적하며, 다중 스케일 컨볼루션과 트랜스포머 인코더를 결합한 아키텍처를 설계했습니다. CoCoT는 다양한 벤치마크에서 높은 성능을 보여주며 대조 학습 기반 EEG Foundation Model의 가능성을 입증합니다.
7월 13일0
arXivAI 번역논문
고정된 표현을 넘어서: 개방형 AI의 어휘 및 검증자 격차
본 논문은 현재 AI 시스템이 고정된 표현적 틀(representational frame) 내에서 작동하는 구조적 한계를 지적하며, 진정한 개방형 지능을 위해서는 새로운 표현적 원시 요소 생성 능력이 필요하다고 주장합니다. 저자들은 이 간극을 '어휘 격차'와 '검증자 격차'라는 두 가지 관점에서 분석하고, 이를 인지적 불일치 감소라는 틀로 해석했습니다.
7월 13일0
arXivAI 번역논문
개수는 존재하지만 정렬되지 않음: VLM의 계수 실패 이해 및 교정
본 논문은 VLM이 사물 개수(counting)에서 어려움을 겪는 현상을 분석하고, 그 원인을 내부 표현과 언어화된 출력 사이의 격차로 규명했습니다. 비선형 프로브 학습을 통해 모델이 잘못된 답을 내놓아도 올바른 정보를 인코딩함을 확인했으며, 이를 바탕으로 오류 감지 기반 자체 교정 방법을 제안하여 계수 정확도를 향상시켰습니다.
7월 13일0
arXivAI 번역논문
딥 신경망에서 통계적으로 탐지 불가능한 백도어
본 논문은 적대적 모델 트레이너가 대규모 깊은 피드포워드 신경망에 통계적으로 탐지 불가능한 백도어를 심을 수 있음을 이론적으로 증명했습니다. 이 백도어는 화이트박스 설정에서도 원본 모델과 구별하기 어려우며, 입력의 변동성을 조작하여 특정 출력으로 매핑하는 능력을 제공합니다.
7월 13일0