Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
arXivAI 번역논문
KoRe: 대규모 언어 모델(LLMs)을 위한 컴팩트한 지식 표현
KoRe는 LLM의 파라미터 내 지식 인코딩 방식이 가진 불투명성과 환각 문제를 해결하기 위해 제안된 새로운 방법론입니다. 1-hop 서브 그래프를 컴팩트한 이산 지식 토큰으로 변환하여 LLM 백본에 주입함으로써, 기존 방식보다 토큰 사용량을 최대 10배 줄이면서도 높은 성능을 유지합니다.
5월 20일1
arXivAI 번역논문
ClinSeekAgent: 에이전트 기반 임상 추론을 위한 멀티모달 증거 탐색 자동화
ClinSeekAgent는 임상 의사 결정 지원을 위해 이질적인 출처로부터 멀티모달 증거를 능동적으로 탐색하고 합성하는 자동화된 에이전트 프레임워크입니다. 이 시스템은 의료 지식 베이스, EHR, 의료 영상 도구를 활용하여 가설을 정교화하며, 추론 시간의 에이전트 역할뿐만 아니라 고품질 궤적을 소형 모델로 증류하는 학습 파이프라인 역할도 수행합니다. 실험 결과, Claude Opus 4.6을 포함한 다양한 모델에서 텍스트 및 멀티모달 임상 작업 성능을 크게 향상시켰습니다.
5월 20일1
arXivAI 번역논문
보는 것에서 생각하는 것으로: 인지(Perception)와 추론(Reasoning)의 분리가 시각-언어 모델(VLM)의 사후
본 연구는 시각-언어 모델(VLM)의 성능 저하가 추론 능력이 아닌 시각적 인지 능력의 부족에서 기인한다는 점을 밝히고, 이를 해결하기 위한 단계별 학습(Staged Training) 방법론을 제안합니다. 모델의 학습 과정을 시각적 인지, 시각적 추론, 텍스트 추론의 세 단계로 분리하여 학습함으로써, 인지 능력이 추론의 근본적인 토대 역할을 수행하도록 설계했습니다. 실험 결과, 이러한 단계별 접근 방식은 통합 학습보다 높은 정확도를 보였으며, 더 짧은 추론 경로로도 우수한 성능을 달성했습니다.
5월 20일1
arXivAI 번역논문
다국어 LLM을 향한 데이터 효율적인 경로: Upcycled MoE에 Post-training PARAM$Δ$ 통합을 통한 언어 확장
본 논문은 대규모 언어 모델(LLM)을 새로운 언어로 확장할 때 발생하는 비용과 파라미터 충돌 문제를 해결하기 위한 새로운 방법론을 제안합니다. 밀집 모델을 MoE 아키텍처로 업사이클링하여 언어별 전문가를 할당하고, 사후 학습된 파라미터 델타를 이식함으로써 복잡한 정렬 과정 없이도 언어 확장과 기존 능력 보존을 동시에 달성합니다.
5월 19일0
arXivAI 번역논문
LLM은 뱅골어 의료 시각 질의응답을 얼마나 잘 수행하는가? 데이터셋 및 벤치마킹
본 연구는 뱅골어(Bangla)를 위한 의료 시각 질의응답(MedVQA) 벤치마크인 BanglaMedVQA 데이터셋을 새롭게 제안합니다. Gemini, GPT-4o mini, Gemma-3 등 주요 파운데이션 모델을 평가한 결과, 저자원 언어의 한계로 인해 전문적인 의료 추론 성능이 현저히 낮음을 확인했습니다.
5월 19일1
arXivAI 번역논문
TRACE: 환각 감소를 위한 계층 간 증거 기반 궤적 교정
TRACE는 LLM의 추론 과정 중 각 계층에서 발생하는 사실적 증거의 변화를 분석하여 환각을 교정하는 training-free 알고리즘입니다. 모델 내부의 계층 간 후보 궤적을 활용해 최적의 교정 계층과 연산자를 결정론적으로 도출하며, 별도의 학습이나 외부 검색 없이도 환각을 효과적으로 감소시킵니다.
5월 19일1
arXivAI 번역논문
iPOE: 설명을 통한 해석 가능한 프롬프트 최적화 (Interpretable Prompt Optimization via
iPOE는 LLM의 프롬프트 최적화 과정에서 투명성과 해석 가능성을 높이기 위해 제안된 새로운 전략입니다. 어노테이션 결정에 대한 설명을 바탕으로 자동 생성된 가이드라인을 최적화하여, 성능 향상과 동시에 프롬프트가 왜 그렇게 구성되었는지에 대한 논리적 근거를 제공합니다.
5월 19일1
arXivAI 번역논문
FOL2NS: 1차 논리(First-Order Logic)로부터 자연스러운 문장 생성하기
FOL2NS는 1차 논리(First-Order Logic) 공식을 자연스러운 문장으로 변환하기 위해 설계된 신경 기호적(neurosymbolic) 프레임워크입니다. 규칙 기반 모듈과 미세 조정된 언어 모델을 결합하여 복잡한 양화사 구조를 가진 논리식을 처리하며, 문장의 다양성과 커버리지를 높이는 데 집중합니다.
5월 19일0
arXivAI 번역논문
확장 가능한 환경이 일반화 가능한 에이전트를 견인한다
일반화 가능한 에이전트 개발을 위해서는 단순한 데이터 확장을 넘어, 실행 가능한 규칙 세트의 분포를 넓히는 '환경 확장(environment scaling)'이 필수적입니다. 본 논문은 궤적, 작업, 환경 확장을 구분하는 새로운 분류 체계를 제안하며, 프로그래밍 방식의 생성기와 생성적 세계 모델을 활용한 환경 구축 패러다임을 제시합니다.
5월 19일0
arXivAI 번역논문
SIREM: 학습된 샘플링을 이용한 음성 정보 기반 MRI 재구성
SIREM은 실시간 MRI(rtMRI)의 해상도와 획득 속도 간의 상충 관계를 해결하기 위해 동기화된 음성 정보를 교차 모달 사전 정보로 활용하는 새로운 재구성 프레임워크입니다. 음성 데이터로부터 성도 구조를 예측하는 오디오 브랜치와 k-공간 데이터를 활용하는 MRI 브랜치를 결합하여, 해부학적으로 정확하면서도 빠른 재구성을 가능하게 합니다.
5월 19일0
arXivAI 번역논문
지식 그래프 링크 예측을 위한 Seq2Seq 모델 내 그래프 구조 활용
지식 그래프의 링크 예측 성능을 높이기 위해 T5-small 모델과 관계형 그래프 어텐션 네트워크(RGAT)를 결합한 GA-S2S 프레임워크를 제안합니다. 이 모델은 기존 Seq2Seq 모델이 놓치기 쉬운 그래프의 구조적 토폴로지와 텍스트 특징을 동시에 인코딩하여 멀티홉 관계 패턴을 효과적으로 포착합니다. CoDEx 데이터셋 실험 결과, 기존 베이스라인 대비 링크 예측 정확도에서 최대 19%의 성능 향상을 기록했습니다.
5월 19일1
arXivAI 번역논문
효율적인 긴 문맥 생성을 위한 문맥 암기 (Context Memorization)
긴 조건부 접두사를 사용하는 LLM 추론 시 발생하는 어텐션 계산량 증가와 영향력 약화 문제를 해결하기 위해 '어텐션 상태 메모리(Attention-state memory)' 방식을 제안합니다. 이 방식은 사전 계산된 어텐션 상태를 경량화된 조회 기반 메모리로 외재화하여, 추가 학습 없이도 정확도를 높이고 지연 시간을 단축합니다. 실험 결과 LLaMA-3.1-8B 모델에서 인컨텍스트 학습보다 높은 정확도와 향상된 추론 효율성을 입증했습니다.
5월 19일1
arXivAI 번역논문
저자원 언어를 이용한 LLM의 다국어 탈옥 (Multilingual jailbreaking)
본 연구는 저자원 아프리카 언어를 활용한 다회차 대화가 상용 LLM의 안전 가드레일을 우회할 수 있는지 조사했습니다. 실험 결과, 단회차 번역 공격은 효과가 낮았으나 다회차 대화 방식은 모델에 따라 최대 83.6%의 높은 유해 응답률을 기록하며 탈옥에 성공했습니다. 특히 번역 품질이 높을수록 탈옥 성공률이 증가하며, 인간 레드팀이 자동화된 방식보다 더 높은 탈옥률을 보였습니다.
5월 19일1
arXivAI 번역논문
SomaliWeb v1: 일치하는 Tokenizer 및 공개 언어 식별(Language-Identification) 벤치마크를 포함한 품질
SomaliWeb v1은 소말리어 전용 토크나이저와 언어 식별 벤치마크를 포함한 최초의 고품질 사전 학습 코퍼스입니다. 기존 다국어 데이터셋의 중복 문제와 글자 깨짐(Mojibake) 결함을 분석하고, GPT-4보다 효율적인 BPE-16K 토크나이저를 제안합니다.
5월 19일1
arXivAI 번역논문
마스크 확산 언어 모델 (Masked Diffusion Language Models)을 위한 머신 언러닝 (Machine Unlearning)
본 논문은 LLaDA 및 Dream과 같은 마스크 확산 언어 모델(MDLMs)을 위한 최초의 머신 언러닝 프레임워크인 MDU(Masked Diffusion Unlearning)를 제안합니다. MDU는 확산 관점에서 지식 학습 과정을 재검토하여, 온도 스케일링을 통해 프라이버시와 유용성 사이의 균형을 조절하며 특정 지식을 효과적으로 제거합니다. 실험 결과, MDU는 기존 LLM 언러닝 방식보다 뛰어난 성능을 입증했습니다.
5월 19일1
arXivAI 번역논문
CodeBind: 통합 구성 코드북을 통한 멀티모달 정렬을 위한 분리된 표현 학습
CodeBind는 멀티모달 표현 정렬 시 발생하는 데이터 부족과 모달리티 간 불일치 문제를 해결하기 위해 제안된 새로운 프레임워크입니다. 공유 구성 요소와 모달리티 특화 구성 요소로 분리된 코드북 설계를 통해, 완전한 쌍을 이룬 데이터 없이도 다양한 모달리티를 효과적으로 정렬합니다. 9가지 다양한 모달리티에 대해 검증되었으며, 멀티모달 분류 및 검색 작업에서 최첨단 성능을 보여줍니다.
5월 19일1
arXivAI 번역논문
SD-Search: 검색 증강 추론을 위한 온폴리시(On-Policy) 사후 시각 자기 증류(Hindsight Self-Distillation)
SD-Search는 외부 교사 모델이나 추가적인 주석 없이도 검색 증강 추론(Search-augmented reasoning) 에이전트의 성능을 높이는 온폴리시 사후 시각 자기 증류 기법을 제안합니다. 단일 모델이 롤아웃의 결과를 요약하는 교사 역할과 컨텍스트만 보는 학생 역할을 동시에 수행하며, 이를 통해 거친 궤적 보상을 조밀한 단계별 신호로 변환하여 학습 효율을 극대화합니다.
5월 19일0
arXivAI 번역논문
지식에서 검증으로: 지식 집약적 도메인에서의 LLM을 위한 RLVR 탐색
본 연구는 수학이나 코딩을 넘어 지식 집약적 도메인에서 LLM의 추론 능력을 향상시키기 위한 RLVR(검증 가능한 보상을 활용한 강화학습) 프레임워크인 K2V를 제안합니다. K2V는 자동화된 데이터 합성 기술을 통해 고품질 데이터를 확보하고, 최종 정답뿐만 아니라 추론 과정 자체를 검증함으로써 기존 RLVR의 한계를 극복합니다.
5월 19일1
arXivAI 번역논문
양에서 가치로: 온디바이스 RAG를 위한 선호도 정렬 메모리 구축
온디바이스 AI 에이전트의 개인정보 보호와 응답성을 위해, 제한된 메모리 환경에서도 사용자 선호도를 효과적으로 반영할 수 있는 EPIC(Efficient Preference-aligned Index Construction) 기술을 제안합니다. EPIC은 원시 데이터에서 선호도 관련 정보만을 선택적으로 추출하여 인덱싱함으로써, 메모리 사용량을 획기적으로 줄이면서도 검색 정확도와 속도를 대폭 향상시킵니다.
5월 19일1
arXivAI 번역논문
Infini-News: 13억 개의 처리된 Common Crawl 뉴스 기사에 대한 효율적인 쿼리 가능 접근 방식
Infini-News는 13억 개 이상의 Common Crawl 뉴스 기사를 효율적으로 검색하고 분석할 수 있도록 설계된 새로운 툴킷이자 인덱스입니다. 텍스트 정제, 언어 감지, 지리적 귀속 정보를 포함한 풍부한 메타데이터를 제공하며, Suffix-array 기반의 Infini-gram 인덱스를 통해 대규모 아카이브 내 텍스트 패턴을 1초 미만으로 검색할 수 있습니다.
5월 19일1