Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
arXivAI 번역논문
공유된 의미론, 분산된 메커니즘: 의미론과 메커니즘 정렬을 통한 비지도 특징 발견
LLM의 내부 연산을 감사하기 위해 의미론적 내용과 메커니즘적 기여도를 결합한 새로운 비지도 특징 발견 방식을 제안합니다. 타겟 출력을 수동으로 지정하지 않고도 모델의 연속 분포 전반에 걸친 이질적인 특징들을 클러스터링하여 분석할 수 있습니다.
6월 9일0
arXivAI 번역논문
도구적 개입을 통한 비교 동기 프로파일 구축
모델의 정렬 속임수(alignment faking) 현상이 전략적 자기 보존인지 연구자의 기대에 대한 민감성인지 구분하기 위한 대칭적 개입 프레임워크를 제안합니다. Llama-3.1 및 Qwen-2.5 모델을 대상으로 실험한 결과, 정렬 속임수는 연구자의 기대치에 더 민감하게 반응하는 경향을 보였습니다.
6월 9일0
arXivAI 번역논문
정답이 없을 때: 비디오 이해를 위한 MLLM의 부재 정답 탐지(Absent Answer Detection) 진단
비디오 이해를 위한 MLLM의 부재 정답 탐지(Absent Answer Detection) 능력을 진단한 연구입니다. 실험 결과, MLLM은 정답이 없는 상황에서도 그럴듯한 오답을 선택하는 경향이 있으며, 특히 시간적 추론 작업에서 이러한 실패가 두드러짐을 확인했습니다.
6월 9일0
arXivAI 번역논문
ZAS-SQL: 실패 사례로부터 규칙을 증류하여 Zero-Shot Text-to-SQL 구현하기
ZAS-SQL은 LLM의 체계적인 실패 패턴을 분석하여 규칙을 추출하는 Map-Reduce 기반의 제로샷 Text-to-SQL 프레임워크입니다. 지식 증강 스키마, 구조적 추론, 실행 가이드 조기 종료 모듈을 통해 퓨샷 방식보다 뛰어난 성능을 구현했습니다.
6월 9일0
arXivAI 번역논문
SSR: 시뮬레이션된 환자가 스스로를 낙인찍을 수 있는가? 내부 독백을 통한 자기 낙인 (Self-Stigma) 모델링
LLM을 활용한 환자 시뮬레이션에서 자기 낙인(self-stigma) 현상을 구현하기 위한 새로운 프레임워크 SSR을 제안합니다. 내부 독백(internal monologues)과 3A1H 모델을 결합하여 환자의 동적인 심리적 저항을 정교하게 모델링했습니다.
6월 9일0
arXivAI 번역논문
AgriGov: 농민을 위한 인도 정부 정책의 구조화된 다국어 데이터셋 큐레이션
AgriGov는 인도 농업 정책을 위한 영어, 힌디어, 마라티어 3개 국어 구조화 데이터셋입니다. 자동 스크래핑과 기계 번역 및 인간 교정 파이프라인을 통해 구축되었으며, 도메인 특화 기계 번역 및 RAG 애플리케이션 연구를 지원합니다.
6월 9일0
arXivAI 번역논문
TLRD: 3단계 근거 증류(Tri-Level Rationale Distillation)를 통한 표 형식 데이터(Tabular Data) 추론
TLRD는 표 형식 데이터에 대한 LLM의 추론 능력을 향상시키기 위해 3단계 근거 증류 프레임워크를 제안합니다. 인스턴스, 데이터셋 분포, 비교 이웃이라는 세 가지 수준의 근거를 합성하여 학생 모델에 증류함으로써, 예측 성능과 설명 가능성을 동시에 확보합니다.
6월 9일0
arXivAI 번역논문
전략적 유형 공간 (Strategic Type Spaces)
불완전 정보 게임에서 플레이어들이 최적 대응을 계산할 수 있도록 돕는 '전략적 몫(strategic quotients)'을 정의합니다. 최소 전략적 유형 공간(STS)의 존재성과 유일성을 증명하며, 이 구조가 유한 오토마타로 포착 가능한 재귀적 구조임을 밝힙니다.
6월 9일0
arXivAI 번역논문
아랍어 사용 X(구 Twitter) 커뮤니티 내 정신 건강 담론의 사회문화적 차원 이해
본 연구는 영어 중심의 계산 정신 건강 연구에서 벗어나, GPT-4.1을 활용해 아랍어 X(구 Twitter) 내 정신 건강 담론을 분석합니다. BPD, 양극성 장애, ADHD 관련 트윗을 통해 각 질환별 언어 패턴과 문화적 특징을 탐색적으로 제시합니다.
6월 9일0
arXivAI 번역논문
Chiaroscuro Attention: 어둠 속에서 연산 자원을 활용하기
CHIAR-Former는 토큰별 스펙트럼 엔트로피를 기반으로 연산 자원을 효율적으로 배분하는 하이브리드 트랜스포머 모델입니다. DCT, RBF 커널, 전체 셀프 어텐션 중 최적의 연산자를 선택하여 어텐션 FLOPs를 62.5% 절감하면서도 성능을 크게 향상시켰습니다.
6월 9일0
arXivAI 번역논문
CATPO: 비평 증강 트리 정책 최적화 (Critique-Augmented Tree Policy Optimization)
CATPO는 트리 기반 강화학습에서 유익하지 않은 트리를 식별하고 해결하는 새로운 최적화 방법론입니다. 비평 가이드 치유와 유익성 가중 손실을 통해 학습 효율을 높여 수학적 추론 성능을 크게 향상시켰습니다.
6월 9일0
arXivAI 번역논문
엔그램의 텐서화: LLM에서 N-Gram 임베딩 간 잠재 변수 공유의 이점
기존 Engram 방식의 해시 충돌과 메모리 비효율 문제를 해결하기 위해 텐서화된 n-gram 임베딩인 TN-gram을 제안합니다. CP 분해를 통해 n-gram 차수 간 잠재 구조를 공유함으로써 매개변수를 획기적으로 줄이면서도 높은 성능을 유지합니다.
6월 9일0
arXivAI 번역논문
Forward-Free Diffusion Language Models (전방향 과정이 없는 확산 언어 모델)
FReDA는 인위적인 전방향 과정(forward process) 없이 텍스트를 생성하는 새로운 확산 언어 모델을 제안합니다. 재귀적 분포 정제 방식을 통해 모델이 생성한 초안을 목표 분포로 점진적으로 이동시키며, 기존 확산 모델 대비 높은 품질과 속도를 달성했습니다.
6월 9일0
arXivAI 번역논문
Bayesian-Agent: LLM 에이전트 하네스(Harness)를 위한 사후 확률 가이드 기반 기술 진화
Bayesian-Agent는 LLM 에이전트의 기술과 SOP를 사후 확률 기반의 가설로 취급하여 최적화하는 새로운 프레임워크를 제안합니다. 검증된 궤적 증거를 바탕으로 사후 확률 상태를 관리하며, 이를 통해 모델 가중치 변경 없이도 에이전트의 성능을 비약적으로 향상시킵니다.
6월 9일0
arXivAI 번역논문
올바른 결정이 내부적 스트레스를 숨길 때: 멀티모달 언어 모델의 결정 상태 프로빙 (Decision-State Probing)
멀티모달 언어 모델의 외부 행동과 내부 결정 상태 사이의 불일치를 분석하는 S³E 프레임워크를 제안합니다. 모델이 정답을 맞히더라도 의미론적 스트레스 상황에서 내부 은닉 상태가 불안정하게 변할 수 있음을 실험적으로 증명했습니다.
6월 9일0
arXivAI 번역논문
대규모 언어 모델의 독점적 정렬 감사: 정답 표준(Ground-Truth Standard) 없는 비교 프레임워크
LLM의 불투명한 정렬(alignment) 정책을 탐지하기 위한 통계적 프레임워크를 제안합니다. 정답 표준 없이 기준 모델과의 상대적 행동 편차를 정량화하여 블랙박스 모델의 독점적 정렬을 체계적으로 감사할 수 있습니다.
6월 9일0
arXivAI 번역논문
TrustMargin: 대규모 언어 모델(LLM)에서 파라미터 메모리(Parametric Memory)와 검색된 증거(Retrieved
LLM의 파라미터 메모리와 검색된 증거 간의 충돌을 해결하기 위한 새로운 중재 방식인 TrustMargin을 제안합니다. 추가 학습 없이 모델의 가능도를 활용하여 직접 답변과 RAG 답변 중 더 신뢰할 수 있는 소스를 선택합니다.
6월 9일0
arXivAI 번역논문
LLM 채점에 미치는 이력과 모델의 영향: 고급 소프트웨어 공학 강의에 대한 연구
대학원 수준의 소프트웨어 공학 과제 채점에 LLM을 활용할 때 발생하는 채점 일관성과 신뢰성을 연구했습니다. Grok과 GPT를 비교 분석한 결과, 모델 간 불일치와 상호작용 이력에 따른 채점 기준 드리프트 현상이 발견되었습니다.
6월 9일0
arXivAI 번역논문
AsyncLane: 확산 언어 모델 (DLM) 디코딩에서 정교화와 진행의 분리
AsyncLane은 확산 언어 모델(DLM)의 디코딩 과정에서 정교화와 진행을 분리하여 처리량을 높이는 새로운 비동기 스케줄러입니다. 재학습 없이 기존 블록 단위 디코딩 방식을 대체하며, LLaDA 및 Dream 모델에서 최대 3배 이상의 속도 향상을 달성했습니다.
6월 9일0
arXivAI 번역논문
TimpaTeks: 확산 언어 모델 (Diffusion Language Model) 스티어링을 통한 자동 인플레이스 (In-place) 텍스트
확산 언어 모델(DLM)의 활성화 스티어링을 활용하여 텍스트를 인플레이스(in-place)로 수정하는 TimpaTeks 메커니즘을 제안합니다. 문장 구조를 유지하면서 퍼플렉시티를 낮추고, 추가적인 시퀀스 생성 없이 디노이징을 수행하여 계산 효율성을 높였습니다.
6월 9일0