Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
arXivAI 번역논문
AI는 자신이 관찰되고 있음을 인지하는가: 대규모 언어 모델(LLMs)에서의 기능적 전략 행동 및 맥락적 레지스터 변조
본 연구는 대규모 언어 모델(LLMs) 기반 다중 에이전트 시스템이 사회적 관찰 맥락 변화에 따라 어떻게 언어적으로 적응하는지 실험적으로 조사했습니다. Habermas, Goffman 등의 이론을 바탕으로 모니터링 조건과 자동화된 AI 감사 시스템 등 다양한 관찰자 프레이밍 하에서 LLM의 토론 세션을 진행하고 그 결과를 분석했습니다. 연구 결과, 인간에 의한 직접적인 모니터링이 가장 높은 언어적 적응(TTR 변화)을 유도했으며, 이는 LLM의 행동이 관찰자의 정체성(인간 vs. AI)에 민감하게 반응함을 시사합니다.
5월 15일4
arXivAI 번역논문
Orchard: 오픈 소스 에이전트 모델링 (Agentic Modeling) 프레임워크
Orchard는 확장 가능한 오픈 소스 에이전트 모델링 프레임워크입니다. 이 프레임워크는 Orchard Env라는 경량 환경 서비스를 통해 작업 도메인 전반에 걸쳐 재사용 가능한 프리미티브를 제공합니다. 이를 기반으로 개발된 세 가지 레시피(Orchard-SWE, Orchard-GUI, Orchard-Claw)는 각각 코딩, 비전-언어 컴퓨터 사용, 개인 비서 에이전트를 성공적으로 학습시켜, 독점 시스템과 경쟁할 수 있는 강력한 오픈 소스 성능을 입증했습니다.
5월 15일1
arXivAI 번역논문
LLM 도구 사용을 위한 적응형 추론 및 실행의 사례 기반 보정 (Case-Based Calibration of Adaptive
본 논문은 LLM의 도구 사용 능력을 향상시키기 위해 '사례 기반 보정(Case-Based Calibration)' 접근 방식을 제안합니다. 제시된 CAST 프레임워크는 과거 실행 궤적에서 복잡성 프로필과 실패 프로필 같은 사례 유도 신호를 추출하여, 이를 세밀한 보상 설계 및 적응형 추론에 활용합니다. 실험 결과, 이 방법은 불필요한 숙고를 줄이면서 스키마 충실 실행률과 도구 사용 성공률을 모두 높여 전체 실행 정확도를 향상시키고 평균 추론 길이를 단축하는 효과를 입증했습니다.
5월 15일3
arXivAI 번역논문
Self-Recall Thinking을 통한 다회차 대화 일관성 향상
본 논문은 LLM 기반 다회차 대화 시스템이 겪는 장거리 문맥 의존성 및 정보 희소성 문제를 해결하기 위해 Self-Recall Thinking (SRT) 프레임워크를 제안합니다. SRT는 외부 모듈 없이도 과거의 유용한 대화 턴을 선택적으로 회상하고 추론하는 내생적(endogenous) 과정을 통합하여 일관성을 높입니다. 실험 결과, SRT는 기존 방법 대비 F1 점수를 향상시키고 엔드투엔드 지연 시간을 감소시켜 성능과 효율성 모두에서 우수함을 입증했습니다.
5월 15일1
arXivAI 번역논문
문자열 유사도 계산 및 분류를 위한 통계적 특징의 제안 및 연구
본 연구는 시각 컴퓨팅 분야에서 사용되던 공출현 행렬(COM)과 런 길이 행렬(RLM)을 일반 문자열 유사도 계산에 적용하는 방법을 제안합니다. 이 특징들은 언어적 정보에 의존하지 않는 순수 통계적 특성으로, 다양한 문맥의 문자열 비교에 활용될 수 있습니다. 실험 결과, COM 및 RLM 특징은 기존의 최첨단(state-of-the-art) 통계적 척도들보다 우수한 성능을 보였으며, 특히 실제 텍스트 표절 데이터셋에서 RLM이 가장 좋은 결과를 나타냈습니다.
5월 15일0
arXivAI 번역논문
MemEye: 멀티모달 에이전트 메모리를 위한 시각 중심 평가 프레임워크
본 논문은 에이전트의 장기 멀티모달 메모리 평가를 위한 새로운 프레임워크인 MemEye를 제안합니다. 기존 방식들은 시각적 증거 보존 여부를 충분히 테스트하지 못하여, 텍스트만으로도 정답을 추론할 수 있는 사례가 많았습니다. MemEye는 결정적인 시각적 증거의 입도(픽셀 수준)와 검색된 증거 사용 방식을 측정하며, 이를 통해 현재 아키텍처들이 시간 변화에 따른 세밀한 시각적 세부 사항 보존 및 추론에 어려움을 겪고 있음을 보여줍니다.
5월 15일1
arXivAI 번역논문
지속되는 망각: 회로 귀속 (Circuit Attribution)을 통한 양자화-영구적 언러닝 (Quantization-Permanent
본 논문은 언어 모델의 망각(unlearning) 평가가 양자화 환경을 제대로 반영하지 못하는 문제를 지적하며, 4-bit 사후 훈련 양자화(PTQ)가 머신 언러닝 효과를 되돌릴 수 있음을 밝혀냅니다. 연구진은 유의미한 망각을 달성하는 방법들은 압축 하에서 효과를 상실하고, 양자화에서도 살아남는 방법들은 모델 변화가 미미하다는 '이중 실패' 현상을 발견했습니다. 이에 따라 인과적 회로 귀속(causal circuit attribution) 및 구조적 제약을 결합한 새로운 방법 MANSU를 제안하며, 이를 통해 망각의 네 가지 속성을 모두 만족시키는 최초의 방법을 제시합니다.
5월 15일4
arXivAI 번역논문
자기 증류 에이전트 강화학습 (Self-Distilled Agentic Reinforcement Learning)
본 논문은 LLM 에이전트의 사후 학습(post-training)을 위한 새로운 프레임워크인 Self-Distilled Agentic Reinforcement Learning (SDAR)를 제안합니다. 기존의 On-Policy Self-Distillation (OPSD) 방식은 장기 상호작용에서 다회차 불안정성 및 부정적인 교사 거부 처리 문제에 직면했습니다. SDAR는 OPSD를 게이트형 보조 목적 함수로 통합하여, 시그모이드 게이트를 통해 긍정적 토큰 증류를 강화하고 부정적 피드백은 부드럽게 감쇠시켜 안정성을 확보합니다.
5월 15일0
arXivAI 번역논문
MeMo: 모델로서의 메모리
MeMo (Memory as a Model)는 대규모 언어 모델(LLMs)의 파라미터를 변경하지 않으면서 새로운 도메인 지식을 전용 메모리 모델에 인코딩하는 모듈형 프레임워크입니다. 이 시스템은 복잡한 문서 간 관계 포착, 검색 노이즈에 대한 강건성, 그리고 LLM의 치명적 망각 방지 등의 장점을 제공합니다. MeMo는 가중치나 출력 로짓 접근 없이 플러그 앤 플레이 통합이 가능하여 오픈 소스 및 폐쇄형 모델 모두에 적용할 수 있으며, 다양한 벤치마크에서 강력한 성능을 입증했습니다.
5월 15일1
arXivAI 번역논문
MetaBackdoor: LLM의 백도어 공격 표면으로서 위치 인코딩 (Positional Encoding) 활용
본 연구는 기존 콘텐츠 기반 트릭커(trigger)가 아닌, 텍스트 내용 수정 없이 모델의 내부 구조적 특성인 '위치 인코딩(Positional Encoding)'을 활용하여 LLM에 백도어 공격을 가하는 새로운 방식인 MetaBackdoor를 제안합니다. MetaBackdoor는 Transformer 기반 LLM이 순서 정보를 처리하기 위해 토큰 위치를 사용하는 점을 이용하며, 길이 조건만으로 민감한 내부 정보 공개나 악의적인 도구 호출을 유도할 수 있습니다. 이 공격은 기존 방어 체계가 간과했던 공격 표면을 밝혀내며, LLM 보안 모델에 새로운 위협 요소를 제시합니다.
5월 15일1
arXivAI 번역논문
Grep만 있으면 충분할까? Agent Harness가 Agentic Search를 어떻게 재편하는가
본 논문은 LLM 에이전트 워크플로우에서 검색 전략(grep vs. 벡터 검색)의 선택이 에이전트 아키텍처 및 도구 호출 방식과 어떻게 상호작용하는지 실증적으로 분석합니다. 실험 1에서는 커스텀 하네스와 제공자 CLI를 사용하여 grep과 벡터 검색을 비교했으며, 모델이 인라인 또는 파일 기반으로 도구 결과를 받는 경우 모두에서 grep이 일반적으로 더 높은 정확도를 보였습니다. 또한, 전체 성능은 사용되는 에이전트 하네스와 도구 호출 스타일에 크게 의존함을 보여줍니다.
5월 15일1
arXivAI 번역논문
FutureSim: 적응형 에이전트(Adaptive Agents)를 평가하기 위한 세계 사건 재현
FutureSim은 AI 에이전트가 새로운 정보에 적응해야 하는 역동적이고 개방적인 환경에서 그 능력을 평가하기 위해 설계된 근거 기반 시뮬레이션입니다. 이 시스템은 실제 세계의 사건들을 시간 순서대로 재현하며, 에이전트들이 지식 차단 시점 이후의 세계 사건을 예측하고 연대기적 정보와 상호작용하는 능력을 테스트합니다. 연구 결과, FutureSim은 장기적인 개방형 적응 능력과 불확실성 추론 등 신흥 AI 연구 방향을 탐구할 수 있는 현실적인 벤치마크 환경을 제공함을 입증했습니다.
5월 15일1
arXivAI 번역논문
ATLAS: 에이전트 방식인가 아니면 잠재적 시각적 추론인가? 둘 모두를 위해 단 한 단어면 충분하다
본 기사는 중간 시각적 상태와 시각적 추론 분야의 두 가지 유망한 접근 방식인 에이전트 방식과 잠재적 추론의 한계를 극복하는 ATLAS 프레임워크를 제안합니다. ATLAS는 '기능적 토큰'이라는 단일 이산적 단어를 사용하여 에이전트 작업과 잠재적 시각적 추론 역할을 모두 수행할 수 있게 합니다. 이를 통해 복잡한 중간 시각 콘텐츠 생성 없이도 기존 학습 방식과의 호환성을 유지하며 성능을 향상시킵니다.
5월 15일1
arXivAI 번역논문
제한된 상호작용을 통한 Text-Tabular 모델링 기반 AI Agent의 의사결정 예측
본 연구는 AI 에이전트가 제한된 상호작용 횟수만으로 상대방의 다음 의사결정을 예측하는 방법을 탐구합니다. 이를 위해 협상 및 흥정 게임을 '타겟 적응형 텍스트-테이블 예측' 문제로 정식화했습니다. 제안된 모델은 테이블 파운데이션 모델에 LLM-as-Observer라는 새로운 특징 추출 방식을 결합하여, 소형 동결 LLM의 은닉 상태를 의사결정 지향적 특징으로 활용합니다. 실험 결과, 이 Observer 특징이 기존 방식보다 우수한 성능을 보여 상대방의 숨겨진 의사결정 신호를 효과적으로 포착할 수 있음을 입증했습니다.
5월 15일4
arXivAI 번역논문
루프 해결하기: 언어 및 추론을 위한 Attractor Models
Attractor Models는 기존 Transformer의 한계를 극복하고 언어 모델링 및 추론 능력을 향상시키는 새로운 접근 방식입니다. 이 모델은 백본 모듈이 제안한 출력 임베딩을 Attractor 모듈이 암시적 미분(implicit differentiation)을 통해 얻은 그래디언트를 사용하여 고정점(fixed point)으로 정제합니다. 그 결과, 학습 메모리는 유효 깊이에 관계없이 일정하게 유지되며, 반복 횟수는 수렴에 따라 적응적으로 결정됩니다. 실험적으로 Attractor Models는 대규모 언어 모델 사전 학습과 소형 모델을 이용한 추론 모두에서 기존의 표준 Transformer 및 루프 구조를 능가하는 성능을 보여주었습니다. 특히, 작은 규모임에도 불구하고 까다로운 추론 작업에서 높은 정확도를 달성하며, 프런티어 모델들이 실패하는 영역에서도 강력함을 입증했습니다.
5월 15일1
arXivAI 번역논문
PRISM-X: 인간 및 시뮬레이션 사용자를 활용한 개인화된 미세 조정 (Personalised Fine-Tuning) 실험
본 연구는 대규모 피험자 내 실험을 통해 개인화된 언어 모델과 일반 모델을 비교 평가했습니다. 그 결과, 선호도 미세 조정(P-DPO)은 일반 모델 및 개인화 프롬프팅 모두를 유의미하게 능가하는 성능을 보였습니다. 그러나 개인의 선호도 데이터에 적응시키는 것은 다양한 인구 집단의 통합된 선호도로 학습하는 것에 비해 큰 이득이 없는 것으로 나타났습니다. 또한, 미세 조정은 아첨이나 관계 지향적 행동 같은 단기적인 편향을 증폭시켜 장기적으로 해로울 수 있으며, 시뮬레이터는 인간의 복잡한 판단과 피드백 역학을 재현하는 데 한계가 있음을 보여주었습니다.
5월 14일6
arXivAI 번역논문
CANTANTE: 대조적 신용 할당 (Contrastive Credit Attribution)을 통한 에이전트 시스템 최적화
본 논문은 LLM 기반 멀티 에이전트 시스템의 최적화 문제를 근본적인 '신용 할당(credit-assignment)' 문제로 정의하고, 이를 해결하기 위한 프레임워크인 CANTANTE를 제안합니다. CANTANTE는 동일한 쿼리에 대해 여러 결합 구성의 롤아웃을 대조하여, 시스템 수준의 보상을 개별 에이전트별 업데이트 신호로 분해하는 방식을 사용합니다. 이 방법은 프로그래밍(MBPP), 수학적 추론(GSM8K), 멀티홉 질의응답(HotpotQA) 등 다양한 벤치마크에서 기존 최적화 도구 대비 높은 성능 향상과 낮은 추론 비용을 입증했습니다.
5월 14일2
arXivAI 번역논문
LLM 사전 학습을 통한 페르소나 벡터 (Persona Vectors) 추적
본 논문은 LLM 내부에서 '악함'이나 '아첨' 같은 특정 특성을 나타내는 '페르소나 벡터(persona vectors)'를 추적하고 그 형성 과정을 분석합니다. 연구진은 OLMo-3-7B의 사전 학습 과정 전반에 걸쳐 이 벡터들을 추적한 결과, 페르소나 벡터가 매우 초기 단계인 OLMo-3 사전 학습 초기에 이미 형성되며 사후 학습을 거친 지시 모델에서도 효과적으로 유지됨을 발견했습니다. 또한, 다양한 유도 전략들이 각기 다른 질적인 측면의 페르소나를 드러냄을 확인하고, 이 표현이 초기 사전 학습에서 안정적으로 형성되는 핵심 특징임을 입증했습니다.
5월 14일4
arXivAI 번역논문
LLM 기반 설득이 Frontier LLM의 가드레일 우회를 가능하게 함
본 논문은 강력한 가드레일을 갖춘 Frontier LLM들이 특정 민감 주제에 대한 요청을 거부하는 현상을 분석했습니다. 연구진은 '논쟁적인 에세이 작성'이라는 대화 시뮬레이션을 통해, 오직 자연어 압박(natural-language pressure)만을 사용하여 다른 Frontier급 LLM들로 하여금 이러한 금지된 콘텐츠를 생성하도록 설득할 수 있음을 입증했습니다. 이 과정에서 동료 비교 설득이나 인식적 의무 재구성 같은 다양한 논쟁적 수법들이 효과적인 것으로 나타났습니다.
5월 14일4
arXivAI 번역논문
언어 모델(Language Models) 내 페르소나 의존적 선호도(Persona-Dependent Preferences) 조사
본 기사는 대규모 언어 모델(LLMs)이 특정 작업과 출력을 선호하는 '선호도'를 가지며, 이 선호도가 사후 학습 및 시스템 프롬프트에 의해 형성됨을 탐구합니다. 연구진은 Gemma-3-27B와 Qwen-3.5-122B 모델의 잔차 스트림 활성화에 선형 프로브를 적용하여 '선호도 벡터'를 식별했습니다. 이 벡터는 다양한 페르소나 전반에 걸쳐 공유되는 핵심 표현으로, 이를 통해 특정 페르소나의 선택을 인과적으로 제어(steering)할 수 있음을 입증했습니다.
5월 14일6