Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
arXivAI 번역논문
SCENE: 그룹 채팅에서의 사회적 규범 인식 및 제재
본 논문은 온라인 그룹 채팅과 같은 다자간 환경에서 발생하는 암묵적 사회적 규범 및 그에 따른 제재 메커니즘에 초점을 맞춘 'SCENE'이라는 소셜 상호작용 벤치마크를 소개합니다. SCENE은 숨겨진 규범을 따르는 스크립트화된 페르소나들로 구성된 현실적인 비역할극 시나리오를 생성하여, 주체 에이전트가 해당 규범을 위반하는 상황을 인위적으로 조성하고 평가할 수 있게 합니다.
5월 12일5
arXivAI 번역논문
MAVEN: In-Step Epistemic Auditing을 갖춘 다중 에이전트 검증-정교화 네트워크
MAVEN은 LLM 기반 시스템에서 발생하는 오류 누적 문제를 해결하기 위해 설계된 다중 에이전트 검증-정교화 네트워크입니다. 이 프레임워크는 블랙보드 구조를 활용하여 추론 과정을 모듈화하고, 적대적 회의론자(Skeptic)-연구원(Researcher)-심사위원(Judge) 루프를 통해 논리적 방어 기능을 분리합니다. 이를 통해 초기 오류가 제어 없이 누적되는 것을 막고, 고위험 애플리케이션에 필수적인 인식론적 신뢰와 세밀한 감사 능력을 제공합니다.
5월 11일5
arXivAI 번역논문
EngGPT2MoE-16B-A3B를 유사한 이탈리아 및 국제 오픈 소스 LLM과 비교 벤치마킹
본 보고서는 16B 파라미터 MoE 구조를 가진 EngGPT2MoE-16B-A3B LLM을 다양한 국제 및 이탈리아 오픈 소스 모델과 비교하여 성능을 벤치마킹한 결과를 제시합니다. 주요 벤치마크(ARC-Challenge, GSM8K, MMLU 등)에서 EngGPT2MoE-16B-A3B는 유사한 크기의 이탈리아 모델들보다 동등하거나 우수한 성능을 입증했습니다. 특히 32k 컨텍스트를 지원하는 RULER 벤치마크에서도 최고 성능을 기록하며, 네이티브 이탈리아 LLM 분야의 발전을 보여주었습니다.
5월 11일9
arXivAI 번역논문
Conformal Path Reasoning: 경로 수준 보정을 통한 신뢰할 수 있는 지식 그래프 질의응답
본 논문은 지식 그래프 질의응답(KGQA) 시스템에서 답변의 신뢰성 및 커버리지를 보장하는 새로운 프레임워크인 'Conformal Path Reasoning (CPR)'을 제안합니다. 기존 KGQA 접근 방식들은 검색된 답변에 대한 통계적 신뢰성을 제공하지 못하고, Conformal Prediction(CP) 기반 방법들 역시 보정 유효성과 점수 판별력 문제로 인해 커버리지 보장이 어렵다는 한계를 가졌습니다. CPR은 이러한 문제를 해결하여, 경로 수준에서 정확한 통계적 보장을 통해 더욱 신뢰할 수 있는 KGQA를 구현하는 것을 목표로 합니다.
5월 11일4
arXivAI 번역논문
당신의 언어 모델이 스스로 비평가이다: 액터의 내부 상태로부터의 가치 추정 기반 강화학습
본 논문은 대규모 추론 모델에 적용되는 강화학습(RLVR)의 높은 계산 비용 문제를 해결하기 위해 '내부 상태 가치 추정 기반 정책 최적화(POISE)'라는 새로운 방법을 제안합니다. POISE는 기존 방식들이 필요로 했던 복잡한 비평가 네트워크나 다중 롤아웃 대신, 정책 순전파 과정에서 이미 얻어진 내부 신호(internal signals)를 활용하여 기준선(baseline)을 효율적으로 추정합니다. 이를 통해 모델의 안정성과 최적화 효율성을 크게 향상시키면서도 계산 비용을 절감할 수 있습니다.
5월 11일8
arXivAI 번역논문
안전한 것인가, 아니면 단순히 무능력한 것인가? 휴대폰 사용 에이전트의 안전성 평가에 대한 재고찰
본 기사는 휴대폰 사용 에이전트의 '안전성' 평가 방식에 대한 근본적인 재고찰을 제기합니다. 기존 평가는 에이전트가 위험을 인식하고 안전한 행동을 선택했는지, 아니면 단순히 능력이 부족하여 유해한 결과를 초래했는지를 구분하지 못하는 한계가 있습니다. 이를 해결하기 위해 130개 이상의 앱에서 수집된 실제 상호작용 데이터를 기반으로 하는 'PhoneSafety'라는 새로운 벤치마크를 제안하며, 위험 순간의 다음 결정을 안전/부적절 행동 여부로 분리하여 평가하는 방법을 제시합니다.
5월 11일9
arXivAI 번역논문
SOD: 소형 언어 모델 에이전트를 위한 단계별 온정책 증류 (Step-wise On-policy Distillation for Small
소형 언어 모델에 도구 통합 추론(TIR)을 적용하는 것은 어려운데, 기존의 강화학습 방법들은 보상 신호가 희소하여 한계가 있습니다. 최근 주목받는 온정책 증류(OPD) 기법도 TIR에 적용할 경우, 잘못된 도구 호출이 연쇄적인 오류를 일으켜 학생-교사 발산을 야기하고 교사의 지도 효과를 무력화하는 치명적인 실패 모드를 보입니다.
5월 11일4
arXivAI 번역논문
LLMs를 개념 숙련 시뮬레이터로 활용한 개입 기반 시계열 인과 발견을 통한 수학적 추론
본 논문은 LLM의 수학적 추론 능력을 평가할 때 단순히 연관성만 보는 것이 아니라, 특정 개념을 '숙련됨' 상태로 강제 개입(Intervention)하여 그 인과적 효과를 측정하는 새로운 프레임워크 CIKA를 제안합니다. 이 방법론은 관찰된 데이터에 포함될 수 있는 교란 변수(confounders), 예를 들어 문제 난이도와 같은 요소를 분리해내어, LLM이 실제로 개념을 '사용할 수 있는지' 여부를 진단하는 개입적 능력 탐지기(ICP)를 공식화합니다. 실험 결과, ICP는 최고 순위 개념의 경우 음성 대조군보다 유의하게 높은 성능을 보였으며, 문제 해결 성공 예측 지표로서도 강력함을 입증했습니다.
5월 11일7
arXivAI 번역논문
OrScale: 레이어별 신뢰 비율 스케일링을 이용한 직교화 최적화
OrScale은 기존의 직교화 최적화 기법인 Muon을 확장한 새로운 스케일링 방법입니다. 이 방법은 각 레이어별로 업데이트 크기를 신뢰 비율에 기반하여 정밀하게 제어함으로써, 일반적인 행렬 레이어와 대규모 언어 모델(LLM) 모두에 적용 가능합니다. OrScale은 이론적으로 강력한 수렴 보장과 레이어 적응 하강 이득을 제공하며, 실험적으로 CIFAR-10 및 다양한 규모의 LLM 사전 학습에서 기존 최적화 기법 대비 성능 향상을 입증했습니다.
5월 11일7
arXivAI 번역논문
GazeVLM: 내부 어텐션 제어를 통한 멀티모달 추론을 위한 능동 시각
GazeVLM은 인간의 능동 시각(active vision) 원리를 모방하여, 기존 VLM의 수동적이고 정적인 정보 처리 방식을 개선한 멀티모달 아키텍처입니다. 이 모델은 어텐션 자원 배포에 대한 메타인지적 제어를 추론 루프 자체에 내재화하며, 시선 토큰(<LOOK>)을 자율적으로 생성하도록 함으로써 공간적이고 목표 지향적인 추론 능력을 강화합니다. 그 결과, 기존 최신 VLM 대비 높은 해상도의 멀티모달 추론 성능 향상을 입증했습니다.
5월 11일7
arXivAI 번역논문
MatryoshkaLoRA: LLM 파인튜닝을 위한 정확한 계층적 저랭크 표현 학습
거대 언어 모델(LLM)의 파인튜닝 비용 문제를 해결하기 위해 MatryoshkaLoRA를 제안합니다. 기존 LoRA는 고정된 랭크 $r$을 사용해야 하는 한계가 있으며, DyLoRA와 같은 다른 적응형 방법들은 전체 계층에 걸쳐 일관된 기울기 신호 부족으로 인해 성능이 떨어지는 문제가 있었습니다. MatryoshkaLoRA는 이러한 문제를 해결하여 모든 랭크에서 우수한 정확도-성능 트레이드오프를 제공하는 새로운 접근 방식입니다.
5월 11일7
arXivAI 번역논문
모든 토큰이 동일하게 학습하지 않는다: 어텐션 엔트로피가 RL 추론의 이질적인 신호를 밝히다
본 연구는 대규모 언어 모델(LLM)의 강화학습(RL) 기반 사후 훈련에서 토큰 수준의 학습 신호가 균일하지 않다는 점에 주목하며, 어텐션 엔트로피를 활용하여 이러한 이질성을 분석합니다. 어텐션 엔트로피는 각 응답 토큰이 문맥적 지원을 얼마나 집중적으로 받는지 측정하는 지표로, 이를 통해 RL 최적화 과정에서 구조적인 패턴을 발견할 수 있습니다. 연구 결과는 단순히 평균적인 학습 신호만으로는 추론 과정의 중요한 이질성을 놓칠 수 있음을 시사합니다.
5월 11일10
arXivAI 번역논문
인도네시아 소셜 미디어 텍스트 기반 3개 클래스 감성 분석을 위한 하이브리드 TF-IDF 로지스틱 회귀 및 MLP 신경망 기준선
본 논문은 인도네시아 소셜 미디어 텍스트를 대상으로 긍정, 부정, 중립의 세 가지 클래스로 감성을 분석하는 연구를 제시합니다. 제안된 방법론은 TF-IDF 특징과 메타데이터 특징을 결합한 하이브리드 접근 방식을 사용하며, 이를 다항 로지스틱 회귀(Logistic Regression)와 비교하여 MLP 신경망 모델의 성능을 평가했습니다. 실험 결과, 로지스틱 회귀 기반 모델이 높은 정확도와 안정적인 성능을 보여주었으며, 이는 소규모 데이터셋에서 해석 가능한 특징 공학과 클래스 균형 맞추기가 여전히 중요한 역할을 함을 시사합니다.
5월 11일7
arXivAI 번역논문
실제 및 시뮬레이션 사용자 행동 간의 분포 격차 측정 및 완화
본 논문은 AI 어시스턴트 훈련 및 평가에서 핵심적인 문제인 '실제 사용자 행동과 시뮬레이션 사용자 행동 간의 분포 격차'를 측정하는 새로운 방법을 제시합니다. 이 방법은 실제 대화와 시뮬레이션 데이터를 클러스터링하여 사용자 행동 표현을 추출하고, 발산 지표를 계산함으로써 두 데이터셋 간의 차이를 정량적으로 분석합니다. 연구진은 24개의 LLM 기반 사용자 시뮬레이터를 평가한 결과를 통해 대부분의 시뮬레이터가 유사하게 작동하지만, 특정 시뮬레이터들을 조합하여 사용하면 실제 사용자 행동 분포에 더 근접하게 만들 수 있음을 입증했습니다.
5월 11일10
arXivAI 번역논문
Nürnberg NLP at PsyDefDetect: 심리 방어 기제 분류를 위한 다축 투표자 앙상블
본 논문은 지지적인 대화에서 심리 방어 기제의 수준을 감지하는 어려운 과제에 접근합니다. 기존의 단일 모델로는 경계가 모호한 방어 범주를 정확히 분류하기 어렵기 때문에, 연구진은 세 가지 직교 축(클래스 세분성, 훈련 방법, 기본 모델)에 걸친 9명의 투표자 앙상블을 구축했습니다. 이 앙상블 시스템은 BioNLP 2026의 PsyDefDetect 공유 과제에서 최고 성적을 거두며 높은 성능을 입증했습니다.
5월 11일4
arXivAI 번역논문
접지된 대화형 뉴스 추천을 위한 의도 기반 시맨틱 ID 생성
본 기사는 빠르게 변화하는 아티클 코퍼스에서 사용자 의도에 기반한 뉴스 추천 시스템의 어려움을 다루고 있습니다. 특히 명시적 키워드가 부족한 암묵적인 사용자 의도를 처리하기 위해, 6가지 유형의 대화형 의도를 식별하고 그중 다섯 가지가 기존 RAG 파이프라인의 병목 현상을 야기함을 지적합니다. 이를 해결하기 위해 'Generate-then-Match' 패러다임 하에서 다중 작업 학습과 GPT-4 CoT 증류를 활용하여 의도 기반 시맨틱 ID(SID) 생성 방법을 제안합니다.
5월 11일4
arXivAI 번역논문
그녀는 정말 관련성이 있을까? BERT가 명시적인 성별 단서를 무시할 때
본 논문은 네덜란드어와 같이 형태론적 성별을 가진 언어를 대상으로 BERT 모델의 성별 편향성을 분석합니다. 연구진은 훈련 과정 전반에 걸쳐 문맥 임베딩을 추적하여, 명시적인 성별 단서가 모델 표현에 어떻게 인코딩되고 진화하는지 조사했습니다. 그 결과, Dutch BERT 모델이 반(反)고정관념적인 문맥에서 명시적인 성별 정보를 충분히 반영하지 못하고 지속적으로 남성 기본값 행동을 보이는 경향이 있음을 발견했습니다.
5월 11일7
arXivAI 번역논문
문법 오류 교정을 위한 LLM의 다차원적 평가
본 연구는 문법 오류 교정(GEC) 분야에서 최신 LLM의 평가 부족 문제를 다루며, 편집 정확도, 유창성 보존, 의미 유지 등 다차원적 관점에서 GPT-4o를 평가했습니다. 그 결과, 미세 조정된 GPT-4o가 세 가지 차원에서 모두 최고 성능을 보였으며, 기존 참조 기반 지표들이 GEC 시스템의 실제 성능을 과소평가할 수 있음을 입증했습니다.
5월 11일9
arXivAI 번역논문
사후 훈련은 대규모 언어 모델을 인간과 유사하지 않게 만든다
본 논문은 대규모 언어 모델(LLMs)이 인간의 행동을 얼마나 잘 모방하는지 측정할 수 있는 새로운 데이터셋 Psych-201을 소개한다. 연구 결과, LLM을 유용한 비서로 만들기 위해 수행되는 사후 훈련 과정 자체가 모델의 인간 행동 정렬도를 지속적으로 떨어뜨리는 것으로 나타났다. 또한, 개인별 정보로 모델을 조건화하는 페르소나 유도 기법 역시 개인 수준의 예측 정확도를 개선하지 못한다는 사실이 밝혀졌다.
5월 11일7
arXivAI 번역논문
Prefix Consistency를 통한 신뢰할 수 있는 Chain-of-Thought
본 기술 기사는 LLM의 추론 정확도를 높이는 방법 중 하나인 'self-consistency'를 개선한 'Prefix Consistency' 방법을 제안합니다. 이 방법은 여러 개의 Chain-of-Thought(CoT) 추적을 샘플링하고, 각 후보 답변이 재생성 과정을 통해 얼마나 일관되게 나타나는지(prefix consistency)를 신뢰도 지표로 활용하여 가중치를 부여합니다. 실험 결과, Prefix Consistency는 기존의 다수 투표(Majority Voting) 방식보다 높은 정확도를 보였으며, 훨씬 적은 토큰으로 유사한 성능을 달성할 수 있음을 입증했습니다.
5월 11일8