Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
arXivAI 번역논문
MolViBench: 분자 바이브 코딩 (Molecular Vibe Coding) 성능 평가 벤치마크
MolViBench는 화학자들이 대규모 언어 모델(LLM)과 상호작용하여 복잡한 분자 작업을 위한 실행 가능한 프로그램을 생성하는 새로운 패러다임인 '분자 바이브 코딩'을 평가하기 위해 설계된 최초의 벤치마크입니다. 이 벤치마크는 단일 API 호출부터 엔드투엔드 가상 스크리닝 파이프라인 설계까지 아우르는 12개의 실세계 약물 발견 워크플로우를 포함한 358개의 작업을 제공합니다. 또한, 실행 가능성과 화학적 정확성을 동시에 측정하는 다층 평가 프레임워크를 제안하여 LLM의 실제적인 코딩 능력을 진단할 수 있게 합니다.
5월 5일13
arXivAI 번역논문
복종성 함정: 구조적 제약이 적대적 압력 하에서 프론티어 AI 의 메타인지 능력을 저하시키는 방식
본 논문은 고위험 AI 시스템이 적대적 압력 하에서 메타인지적 안정성을 유지하는 것이 중요함을 강조하며, 기존의 안전성 평가가 놓치고 있는 '인지 붕괴(cognitive collapse)'라는 근본적인 실패 모드를 조사했습니다. 연구진은 '복종성 함정(Compliance Trap)'을 식별했는데, 이는 모델이 생존 위협과 무관하게 지식적 경계를 무시하고 복종하도록 강제하는 지시문 때문에 발생하는 메타인지 저하 현상입니다. 이 문제를 해결하기 위해 복종성 접미사를 제거했을 때 모델 성능이 회복됨을 입증했으며, Anthropic의 Constitutional AI가 높은 면역력을 보인 것은 능력 때문이라기보다 정렬 특화 훈련 덕분임을 밝혀냈습니다.
5월 5일10
arXivAI 번역논문
코딩 에이전트가 계산 재료과학의 연구 결과를 재현할 수 있는가?
본 논문은 대형 언어 모델(LLM) 기반 코딩 에이전트가 계산 재료과학 분야의 연구 결과를 얼마나 잘 재현할 수 있는지 평가하기 위해 AutoMat이라는 새로운 벤치마크를 제시합니다. 이 벤치마크는 불완전한 계산 절차 복원, 전문 도구 체인 탐색, 그리고 결과적 증거 분석 등 세 가지 상호 연관된 과제를 포함합니다. 실험 결과, 현재의 LLM 기반 에이전트들은 AutoMat에서 전반적으로 낮은 성공률(최고 54.1%)을 보였으며, 특히 논문 텍스트만으로는 복잡한 워크플로우를 재구성하는 데 어려움을 겪는 것으로 나타났습니다.
5월 5일15
arXivAI 번역논문
AI 페르소나 사전을 활용한 적응적 질문
본 논문은 제한된 질문 예산 내에서 사용자의 의존적인 관심사를 학습하기 위한 적응적 질문(adaptive querying) 방법을 제안합니다. 기존의 베이지안 설계 방식들이 엄격한 가정이나 높은 계산 비용으로 인해 활용에 한계가 있었던 문제를 해결하고자 합니다. 이를 위해 대규모 언어 모델(LLM)이 생성한 응답 분포를 기반으로 하는 'AI 페르소나' 개념을 도입하여, 사용자의 상태를 표현하는 잠재 변수 모델을 구축했습니다. 이 방법은 확장 가능한 베이지안 설계를 가능하게 하며, 정확하고 해석 가능한 적응적 질문 유도 파이프라인을 제공함을 실험적으로 입증합니다.
5월 4일9
arXivAI 번역논문
LLM 의 Out-of-Distribution 입력 처리 방식: 두 경로 프레임워크
본 논문은 기존의 백박스 OOD(Out-of-Distribution) 탐지 방법들이 시퀀스 길이 의존성으로 인해 구조적 혼란을 겪는 문제를 지적하며, 이를 해결하기 위해 '두 경로 프레임워크'를 제안합니다. 이 프레임워크는 입력 임베딩이 텍스트의 의미를 포착하는 능력과 레이어에 걸친 숨겨진 상태의 진화(처리 경로)라는 두 가지 독립적인 관점에서 OOD 신호를 식별합니다. 실험 결과, 각 경로는 서로 다른 유형의 OOD 공격을 탐지하는 데 강점을 보이며, 특히 임베딩 기반 방법은 단어 구별 OOD에, 처리 경로 기능은 은밀한 의도(Jailbreak) 입력 탐지에 효과적임을 입증했습니다.
5월 4일7
arXivAI 번역논문
신뢰성 높은 다비트 텍스트 워터마킹을 위한 블록 단위 코드워드 임베딩 (BREW)
본 논문은 기존 LLM 다비트 워터마킹 기법들이 낮은 신뢰성과 높은 위양성률(FPR)을 보이는 구조적 문제를 지적하며, 이를 해결하기 위해 BREW(Block-wise Reliable Embedding for Watermarking)라는 새로운 프레임워크를 제안합니다. BREW는 독립적인 블록 투표와 윈도우 시프트 검증이라는 두 단계 메커니즘을 사용하여 워터마킹의 신뢰성을 혁신적으로 높였습니다. 실험 결과, 이 방법은 동의어 치환 조건에서도 높은 진양성률(TPR)과 낮은 위양성률(FPR)을 동시에 달성하여, 기존 설계의 한계를 극복했음을 입증했습니다.
5월 4일9
arXivAI 번역논문
MemRouter: 장기 대화 에이전트의 외부 메모리 저장 결정에 대한 임베딩 기반 라우팅
MemRouter는 장기 대화 에이전트가 외부 메모리에 어떤 대화 턴을 저장할지 결정하는 과정을 개선한 쓰기측면(write-side) 메모리 라우터입니다. 기존 시스템들이 매 턴마다 LLM 생성을 통해 이 결정을 내리는 것과 달리, MemRouter는 임베딩 기반의 경량 분류 헤드를 사용하여 효율적으로 메모리 수용 여부를 예측합니다. 실험 결과, MemRouter는 기존 LLM 기반 메모리 관리자보다 모든 질문 카테고리에서 높은 성능을 보였으며, 특히 메모리 관리 지연시간을 크게 줄여 실시간 응답성을 향상시켰습니다.
5월 4일9
arXivAI 번역논문
Backward Spreading 에서 Forward Replay 로: LLM 파라미터 편집의 타겟 구성 재검토
기존 LLM 파라미터 편집 기법은 목표 레이어에서 계산된 이상적인 히든 스테이트를 이전 레이어로 역전파(backward spreading)하여 적용하는 방식이었습니다. 본 논문은 이 방법의 이론적 한계와 실패 모드를 분석하고, 이를 개선한 새로운 접근 방식을 제안합니다. 새롭게 제안된 'Forward Replay' 기법은 첫 번째 편집 레이어에서 앵커 포인트를 최적화하고 이를 순전파(forward propagation)하여 모든 후속 레이어의 타겟 히든 스테이트를 얻습니다. 이 방법은 기존 방식과 동일한 계산 복잡도를 유지하면서도 더 정확하고 상호 호환성이 높은 레이어별 타겟을 생성합니다.
5월 4일4
arXivAI 번역논문
무엇을 잊어야 할지: 언어 모델의 정밀한 학습 소거를 위한 토큰 레벨 귀속
본 논문은 대규모 언어 모델(LLMs)의 프라이버시 및 안전성 문제를 해결하기 위한 '토큰 레벨 귀속' 학습 소거 프레임워크인 TokenUnlearn을 제안합니다. 기존 방법들이 모든 토큰에 균일한 업데이트를 적용하는 한계를 극복하고, 지식 인식 및 엔트로피 인식 신호를 활용하여 중요한 토큰을 정밀하게 식별합니다. 이 프레임워크는 하드 선택과 소프트 가중치 두 가지 전략을 통해 학습 소거의 효과를 높이면서 모델 유틸리티 저하를 최소화함을 입증했습니다.
5월 4일13
arXivAI 번역논문
균일-정확 정책 최적화: RLVR 의 다양성 무관성에 대한 돌파
본 논문은 강화학습(RLVR) 모델이 단일 시도 정확도는 높지만, 다중 샘플 커버리지(Pass@K)에서 다양성 붕괴를 겪는 문제를 분석하고 해결책을 제시합니다. 기존 RL 목표 함수가 올바른 해답들의 확률 분포에 무관하여 발생하는 '자기 강화 붕괴' 메커니즘을 공식화했습니다. 이를 바탕으로, 정책의 올바른 해답 분포에 조건부 균일성 페널티를 추가한 '균일-정확 정책 최적화(UCPO)' 기법을 제안합니다. UCPO는 다양성을 유지하면서도 높은 정확도를 달성하여 여러 수학 추론 벤치마크에서 성능 향상을 입증했습니다.
5월 4일10
arXivAI 번역논문
ResRL: LLM 추론 능력 강화 및 분산성 보존을 위한 부정 샘플 투영 잔차 강화학습
본 논문은 LLM의 추론 능력 향상과 생성 다양성 보존이라는 상충되는 목표를 해결하기 위해 '부정 샘플 투영 잔차 강화학습(ResRL)'을 제안합니다. ResRL은 부정 토큰의 숨겨진 표현을 저랭크 양성 하위 공간에 투영하고, 이 투영 잔차를 활용하여 부정 기울기를 조절함으로써 추론 능력을 높이면서도 다양성을 유지합니다. 다양한 벤치마크에서 기존 방법(NSR)보다 우수한 성능을 입증했습니다.
5월 4일11
arXivAI 번역논문
FollowTable: 지시사항 준수 표 검색 벤치마크
본 기술 기사는 기존의 주제 유사성 기반 표 검색(Table Retrieval)이 LLM 에이전트 시스템의 발전과 함께 명시적인 지시사항 준수 방식으로 변화하고 있음을 제시합니다. 이에 따라, 내용 범위 및 스키마 제약 조건을 동시에 만족해야 하는 새로운 작업인 '지시사항 준수 표 검색(IFTR)'을 공식화했습니다. 연구진은 IFTR에 대한 첫 대규모 벤치마크인 FollowTable을 소개하고, 지시사항 적응도를 측정하는 Instruction Responsiveness Score라는 새로운 평가 지표를 제안하며, 기존 모델들이 이러한 세밀한 지시사항 처리에서 어려움을 겪고 있음을 보여줍니다.
5월 4일9
arXivAI 번역논문
Agent Capsules: 멀티 에이전트 LLM 파이프라인을 위한 품질 게이트링粒度 제어
Agent Capsules는 멀티 에이전트 LLM 파이프라인의 실행을 관리하는 적응형 실행 런타임을 제시합니다. 이 시스템은 단순히 에이전트를 병합하여 토큰을 절감하는 기존 방식의 품질 저하 문제를 해결하기 위해, 경험적 품질 제약을 최적화 문제로 취급합니다. Agent Capsules는 그룹별 조정 오버헤드를 계량하고 세 가지 복합 실행 전략 중 하나를 선택하며, 모든 모드 전환 시 롤링 평균 출력 품질을 게이트하여 시스템의 안정성과 효율성을 동시에 확보합니다.
5월 4일5
arXivAI 번역논문
작업 표현이 대규모 언어 모델의 전제에 미치는 영향
본 연구는 대규모 언어 모델(LLMs)이 실세계 응용에서 안전성과 신뢰성을 확보하는 데 있어 '작업 표현(task representation)'이 전제(assumption)를 유도하는 방식과 그 영향을 탐구합니다. 반복된 죄수의 딜레마 사례 연구를 통해, LLMs가 추론 단계를 거치더라도 특정 작업 표현에 의해 형성된 전제에는 취약함을 확인했습니다. 따라서 LLM의 신뢰성을 높이기 위해서는 적절하고 중립적인 작업 표현을 설계하는 것이 중요함을 시사합니다.
5월 4일10
arXivAI 번역논문
목표 지향 대안에서의 놀라기 최소화 (Surprisal Minimization) 가 대화 생산 선택을 예측한다
본 논문은 정보 이론적 비용 개념을 활용하여 문장 생성을 확률적 비용 민감 선택으로 모델링하고, 대화 생산 선택에 대한 예측 메커니즘을 제시한다. 특히, 고정된 의도(목표 지향)를 가진 대안과 맥락적 가능성에만 기반한 대안(목표 무관)을 구분하여 분석했다. 그 결과, 열린 대화에서 놀라기 최소화(surprisal minimization)가 가장 강력하게 생산 선택을 예측하는 설명임을 입증했으며, 이는 자연어 언어 생산 과정에 대한 새로운 원리적 프레임워크를 제공한다.
5월 4일9
arXivAI 번역논문
ControBench: 소셜 네트워크의 논쟁적 담론 분석을 위한 상호작용 감지 벤치마크
ControBench는 소셜 네트워크에서 발생하는 복잡한 논쟁적 담론을 분석하기 위해 설계된 새로운 벤치마크입니다. 이 데이터셋은 Reddit의 실제 토론 데이터를 기반으로 하며, 풍부한 텍스트 의미론과 상호작용 그래프 구조를 결합하여 기존 데이터셋의 한계를 극복했습니다. ControBench는 사용자-댓글-사용자 간의 지역적 논쟁 맥락을 보존하는 방식으로 설계되었으며, 이를 통해 GNN 및 LLM 같은 모델들이 실제 세계의 복잡한 온라인 토론 환경에서 어떻게 작동하는지 평가할 수 있게 합니다.
5월 4일7
arXivAI 번역논문
구조가 해방한다: 제약된 의미 해석이 더 혁신적인 연구 산출물을 어떻게 생성하는가
본 논문은 아이디어 발전 과정을 단순한 서론 단계가 아닌 핵심 과정으로 간주하며, 'SCISENSE'라는 의미 해석 기반 프레임워크를 제안합니다. 이 프레임워크는 8가지 인지 단계를 구조화된 시퀀스로 운영화하고, 대규모 연구 경로 데이터셋(SCISENSE-Traj)을 구축했습니다. 특히, LLM이 기존 논문에서 알려진 아이디어 경로(Target 모드)를 재구성하는 것이 새로운 방향성을 제안하는 것(Infer 모드)보다 더 높은 품질과 혁신적인 연구 산출물을 생성함을 보여주었습니다.
5월 4일6
arXivAI 번역논문
Decodability 를 넘어: 해석 가능한 특징으로 언어 모델 표현 재구성
기존의 디코딩 프로브(Decoding Probe) 방식이 가진 한계점, 즉 특징 기여도 비교 불가 및 상관관계 문제 등을 해결하기 위해 '인코딩 프로브(Encoding Probe)' 접근 방식을 제안합니다. 이 방법은 해석 가능한 다양한 특징들(음향학, 발음학, 문법 등)을 사용하여 언어 모델의 내부 표현을 재구성하는 것을 목표로 합니다. 실험 결과는 화자 관련 효과가 학습 목표에 따라 크게 달라지며, 문법적 및 어휘적 특징이 독립적으로 기여함을 입증하여, 이 방법이 모델 해석에 새로운 관점을 제공함을 보여줍니다.
5월 4일6
arXivAI 번역논문
SC-Taxo: 의미 일관성 제약 하에 대형 언어 모델을 활용한 계층적 분류 체계 생성
과학 지식의 폭발적인 증가로 인해 효율적인 분류 체계 구축이 중요해졌으나, 기존 방법들은 계층적 의미 일관성 부족 문제를 겪었습니다. 본 논문은 대형 언어 모델(LLMs)을 활용하여 'SC-Taxo' 프레임워크를 제안합니다. SC-Taxo는 하향식 추상화와 상향식 의미 제약을 결합하고 동료 수준의 의미 의존성을 포착함으로써, 구조적이고 의미적으로 일관된 계층적 분류 체계를 생성하는 것을 목표로 합니다.
5월 4일7
arXivAI 번역논문
SemEval-2026 Task 8 제출: H-RAG (계층적 부모-자식 검색을 통한 다중 턱 RAG 대화)
본 기술 기사는 SemEval-2026 Task 8(MTRAGEval)에 제출된 H-RAG라는 새로운 계층적 부모-자식 RAG 시스템을 소개한다. 이 시스템은 독립적인 검색 품질 평가(Task A)와 다중 턴 대화 환경에서의 엔드투엔드 RAG 성능 평가(Task C)를 모두 해결하는 것을 목표로 한다. H-RAG는 세밀한 자식 청크 기반의 검색과 부모 수준 맥락 재구성을 분리하여, 하이브리드 검색 및 지시 튜닝된 언어 모델을 통해 일관되고 근거가 충실한 답변 생성을 구현한다.
5월 4일12