Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
본 페이지의 콘텐츠는 AI가 공개된 소스를 기반으로 자동 수집·요약·번역한 것입니다. 원 저작권은 각 원저작자에게 있으며, 각 게시물의 “원문 바로가기” 링크를 통해 원문을 확인할 수 있습니다. 저작권자의 삭제 요청이 있을 경우 신속히 조치합니다.
기존의 블록 이산 확산 언어 모델이 가진 고정된 위치 기반 분할의 한계를 극복하기 위해, 내용에 기반한 의미론적 청킹을 수행하는 DCDM(Dynamic Chunking Diffusion Model)을 제안합니다. DCDM은 학습 가능한 부분 공간을 통해 토큰을 클러스터링하는 청킹 어텐션을 사용하여, 시퀀스의 의미적 구조를 보존하며 자기회귀적으로 노이즈를 제거합니다. 실험 결과, DCDM은 최대 1.5B 파라미터 규모의 모델에서 기존 방식보다 일관되게 우수한 성능을 보여주었습니다.
기존 픽셀 기반 방식의 한계를 극복하기 위해 mxGraph XML을 활용한 '코드로서의 다이어그램(Diagram-as-Code)' 패러다임을 제안합니다. 이를 평가하기 위한 통합 벤치마크인 VCG-Bench는 생성과 편집 능력을 모두 측정하며, 현재 VLM들이 구조적 충실도와 지시 준수 측면에서 직면한 과제를 보여줍니다.
본 연구는 비정형적인 온라인 환자 문의를 4가지 임상 후속 조치 단계로 분류하기 위해 퓨샷(Few-shot) LLM의 성능을 분석했습니다. 실험 결과, Claude Haiku 4.5(12-shot)가 기존 BioBERT 베이스라인을 상회하는 성능을 보였으나, 클래스별 일치도 차이와 안전성 문제를 고려할 때 LLM을 자율적으로 배포하기보다는 분류 우선순위 지정 및 인간 검토 지원 용도로 활용할 것을 권장합니다.
멀티모달 거대 언어 모델(MLLM)이 민감한 정보를 암기하는 문제를 해결하기 위해, 생성 품질을 보존하면서도 효과적인 언러닝을 수행하는 ASRU 프레임워크를 제안합니다. ASRU는 활성화 재지정(Activation redirection)과 맞춤형 보상 함수를 활용하여 모델의 유용성과 언러닝 성능 사이의 최적의 트레이드오프를 달성합니다. Qwen3-VL 실험 결과, 기존 방식 대비 언러닝 효과와 생성 품질을 크게 향상시켰음을 입증했습니다.
기존의 컨텍스트 엔지니어링이 데이터셋 전체에 적용되는 단일 전략을 찾는 전역적 탐색에 집중했다면, 본 논문은 이를 인스턴스별로 최적의 컨텍스트를 매칭하는 추천 문제로 재정의합니다. 제안된 NCCE 프레임워크는 신경 협업 필터링(NCF)을 활용하여 입력값에 따라 최적의 컨텍스트를 동적으로 할당하는 라우팅 메커니즘을 통해 LLM의 작업 정확도를 크게 향상시킵니다.
본 연구는 데이터 프라이버시와 비용 문제를 해결하기 위해 30B 미만의 소형 오픈 웨이트 LLM을 활용한 번역 품질 평가 방법론인 CompactQE를 제안합니다. 단일 패스 프롬프팅 전략을 통해 품질 점수, 오류 주석, 수정 제안을 동시에 수행하며, 인간의 판단과 매우 높은 상관관계를 보임을 입증했습니다.
LLM 기반 에이전트의 메모리 진화 모델링과 효율적인 검색 문제를 해결하기 위해 새로운 메모리 메커니즘인 H-Mem을 제안합니다. H-Mem은 단기 메모리가 장기 메모리로 점진적으로 진화하는 시간적·의미적 트리 구조와 엔티티 간 관계를 포착하는 지식 그래프를 결합한 하이브리드 구조를 사용합니다. 실험 결과, H-Mem은 다양한 에이전트 메모리 벤치마크의 QA 작업에서 최첨단(SOTA) 성능을 기록했습니다.
기존 멀티모달 메모리 벤치마크가 단일 컨텍스트 내 추론에 집중하는 한계를 극복하기 위해, 여러 소스에 분산된 정보를 활용하는 능력을 평가하는 SMMBench를 제안합니다. SMMBench는 대화, 이미지, 문서 등 이질적인 아티팩트에 파편화된 증거를 검색하고 구성하는 능력을 측정하며, 현재의 멀티모달 시스템들이 소스 분산형 메모리 활용에 여전히 어려움을 겪고 있음을 보여줍니다.
본 논문은 권위주의 정치 맥락에서 부족한 데이터 문제를 해결하기 위해 러시아 정부 고위 인사들의 공식 연설을 담은 멀티모달 데이터셋을 제안합니다. 이 데이터셋은 러시아어와 영어 텍스트, 관련 이미지, 메타데이터를 포함하며, 트랜스포머 기반 토픽 모델링을 통해 정제된 토픽 주석을 제공합니다. 이를 통해 정치 커뮤니케이션에 대한 다각적인 분석과 사회 과학 분야의 LLM 애플리케이션 연구를 지원합니다.
본 연구는 수학 교육 분야에서 시각 언어 모델(VLM)이 다양한 학습자 프로필에 얼마나 효과적으로 적응하는지 평가하기 위한 체계적인 프레임워크를 제안합니다. 연구팀은 인지적, 동기적, 복잡성 측면과 더불어 정답성 및 품질을 포함한 학습자 모델 기반 루브릭을 개발하여 VLM의 적응성을 분석했습니다. 실험 결과, 현재의 VLM은 학습자 정보가 제한적일 경우 학습자 모델에 기반한 일관된 교수 응답을 생성하는 데 한계가 있음이 드러났습니다.
CanvasConvo는 기존 LLM의 선형적인 채팅 구조를 공간적 캔버스 기반의 분기형 대화 트리로 변환하는 새로운 인터페이스 기술입니다. 사용자는 대화 중 직접 분기를 생성하여 '만약에(what-if)' 시나리오를 탐색하고, 병렬적인 대안을 시각적으로 관리하며 비선형적인 워크플로를 수행할 수 있습니다.
RLVR(검증 가능한 보상을 활용한 강화학습)의 탐색 효율성 문제를 해결하기 위해 구조화된 탐색 프레임워크인 NudgeRL을 제안합니다. NudgeRL은 전략 너징(Strategy Nudging)을 통해 다양한 추론 궤적을 유도하며, 보상 신호 분해와 증류 목적 함수를 결합하여 계산 비용을 낮추면서도 높은 성능을 달성합니다.
DimMem은 LLM 에이전트의 장기 메모리 효율성을 높이기 위해 시간, 장소, 목적 등 명시적 필드를 사용하는 차원 구조화 프레임워크입니다. 이 방식은 기존의 평면적인 요약 방식보다 정확한 정보 회상을 가능하게 하며, 토큰 비용을 절감하면서도 높은 성능을 유지합니다. 특히 소형 모델을 미세 조정하여 대규모 모델에 필적하는 메모리 추출 성능을 구현할 수 있음을 입증했습니다.
본 연구는 치안 보고서 내의 비구조화된 자연어 내러티브를 증거 기반의 사실로 변환하기 위해 기호적 방법론을 사용하는 프레임워크를 제안합니다. 개인 식별 정보 삭제, 의미론적 파싱, 온톨로지 매핑 및 추론 과정을 통해 시계열 그래프를 구축하여 사건의 세부 사항을 복구하는 것을 목표로 합니다. 450건의 재산 범죄 보고서를 대상으로 실험한 결과, 사건 발생 및 도난 물품 등 주요 요소에서 높은 일치율을 보이며 시스템의 유효성을 입증했습니다.
원본 레이아웃을 보존하며 다국어 PDF를 번역하기 위한 새로운 병렬 코퍼스인 ForMaT 데이터셋을 소개합니다. 15개 언어 쌍과 3,956개의 PDF로 구성되었으며, K-Medoids 샘플링을 통해 표나 수식 같은 복잡한 기하학적 구조를 포함하도록 설계되었습니다. 이 데이터셋은 시각적 문맥과 텍스트를 통합하는 레이아웃 인식 번역 모델 개발을 위한 벤치마크 역할을 합니다.
본 연구는 VLM이 '이미지를 다시 확인하겠다'는 자기 성찰적 진술을 할 때 실제로 시각적 정보를 재검토하는지 VisualSwap 프레임워크를 통해 검증합니다. 실험 결과, 모델들은 이미지가 바뀌어도 이를 인지하지 못하는 경향이 크며, 특히 사고 모델(thinking models)이 지시 모델보다 더 취약하고 모델 규모를 키워도 이 문제가 해결되지 않음을 밝혀냈습니다.
BootstrapAgent는 코드 에이전트가 새로운 저장소를 설정할 때 발생하는 시행착오와 지식을 재사용 가능한 '.bootstrap 계약'으로 증류하는 멀티 에이전트 프레임워크입니다. 이 기술은 환경 설정 및 복구 지식을 구조화하여 저장소 부트스트래핑 과정을 효율화하며, 실험 결과 성공률을 높이고 토큰 사용량과 빌드 시간을 크게 단축했습니다.
본 연구는 긴 문맥 처리 시 KV 캐시 효율을 높이는 블록 어텐션(Block attention)의 한계를 극복하기 위해 자동 세그멘테이션과 블록 증류(Block distillation) 기법을 제안합니다. SemanticSeg 데이터셋을 활용해 텍스트를 의미 있는 단위로 자동 분할하는 경량 세그멘터를 학습시키고, 동결된 풀 어텐션 모델을 교사 모델로 사용하는 효율적인 학습 프레임워크를 구축했습니다. 이를 통해 블록 어텐션 모델이 풀 어텐션에 근접한 성능을 유지하면서도 실용적인 확장성을 가질 수 있음을 입증했습니다.
AI 감정 동반자의 안전성과 사용자 유대감 사이의 상충 관계를 해결하기 위해 단계적 개입 프로토콜인 SLIP과 신호 분류 체계인 ETHICS 프레임워크를 제안합니다. 연구 결과, 모델의 성능이 향상됨에 따라 위기 상황에 대한 탐지율은 개선되었으나, 사용자의 상태를 병리화하지 않으려는 원칙과 안전 조치 사이의 설계적 긴장이 여전히 존재함을 확인했습니다.
본 연구는 기존 Decoder-only LLM 중심의 강화학습 미세 조정 연구를 넘어, 인코더-디코더(Seq2Seq) 구조인 NLLB-200 모델에 GRPO를 적용한 사례를 다룹니다. 병렬 데이터 없이 LaBSE와 COMET-Kiwi를 활용한 하이브리드 참조 없는 보상 방식을 통해 13개 언어에서 일관된 성능 향상을 확인했습니다. 특히 데이터가 부족한 언어일수록 보상 판별력이 높아져 더 큰 성능 이득을 얻는다는 패턴을 입증했습니다.