Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
arXivAI 번역논문
장문 컨텍스트 LLM을 위한 자기 주도 테스트 시간 학습 (Self-Guided Test-Time Training)
본 논문은 LLM이 장문 컨텍스트를 효과적으로 활용하는 데 어려움을 겪는 문제를 지적하며, 테스트 시간 학습(TTT)의 한계를 극복한 Self-Guided TTT (S-TTT) 방법을 제안합니다. S-TTT는 모델이 적응하기 전에 관련성 높은 증거 스팬을 스스로 식별하여, 선택된 스팬에만 언어 모델링 훈련 목표를 적용하는 방식입니다. 이 방법은 LongBench-v2와 LongBench-Pro에서 최대 15%의 성능 향상을 입증했습니다.
7월 13일1
arXivAI 번역논문
다국어 시각적 객관식 문항에 대한 소형 VLM의 테스트 시간 스케일링
본 연구는 다국어 시각적 객관식 문항(Visual MCQ) 환경에서 소형 VLM의 추론 능력을 향상시키는 테스트 시간 스케일링(TTS) 효과를 분석했습니다. Qwen2.5-VL-7B-Instruct와 Qwen3.5-4B 모델을 사용하여 self-consistency, PRM-guided beam search 등 여러 기법을 비교한 결과, 가장 큰 성능 향상은 복잡한 검색/검증 메커니즘이 아닌 '정책 모델 자체'의 개선에서 나왔음을 밝혀냈습니다.
7월 13일1
arXivAI 번역논문
독립적이고 오픈소스인 독일어 및 영어용 MoE 하이브리드 Mamba 트랜스포머 기반 모델 Soofi S 30B-A3B 소개
독립적이고 오픈소스인 MoE 하이브리드 Mamba Transformer 기반 모델 Soofi S 30B-A3B가 독일어와 영어용으로 발표되었습니다. 이 모델은 토큰당 적은 매개변수만 활성화하여 장문 컨텍스트 및 고부하 환경에서 높은 처리량을 제공합니다. 특히 유럽의 여러 기준선 대비 뛰어난 성능을 보여주며, 완전 공개된 모델 중 최고 수준의 평가 점수를 달성했습니다.
7월 13일1
arXivAI 번역논문
신경 붕괴는 금지된다: 언어 모델의 정보 하한선
본 논문은 언어 모델의 표현 분산에 대한 새로운 이론적 관점을 제시합니다. 클래스 내 분산을 '정보 저장소'로 해석하고, 거대 카테고리 구조가 차지하는 정보 비중이 매우 낮음을 분석했습니다. 특히 토큰 내 컨텍스트가 대부분의 정보를 담당하며, 이와 관련된 하한선(converse floor) 법칙을 증명하여 모델의 작동 원리를 설명합니다.
7월 13일1
arXivAI 번역논문
정규화 기반 우도비 추정을 통한 법의학 저자 판별
본 연구는 저자 판별(Authorship verification) 증거 강도를 정량화하는 방법을 제시하며, 기존 방법이 요구하던 별도의 보정 모델 없이 우도비(likelihood ratios)를 도출할 수 있는 두 가지 새로운 정규화 기법을 제안합니다. 이 기법들은 특히 긴 텍스트에서 발생할 수 있는 과대평가를 완화하여 법의학적 분석의 접근성과 투명성을 높입니다.
7월 13일4
arXivAI 번역논문
FreyaTTS 기술 보고서
Freya-TTS는 높은 신뢰성과 효율성을 갖춘 대화형 합성 TTS 모델입니다. 1억 8,320만 개의 파라미터를 가진 DiT 기반으로 작동하며, 터키어에 최적화되어 있습니다. 이 모델은 자원 제한적인 환경에서도 실시간 성능을 보여주며, 오픈 소스로 공개되었습니다.
7월 13일1
arXivAI 번역논문
교차 언어적 관용 표현을 위한 개념 네트워크: 특징 기반 그래프 접근법
본 논문은 8개 유형론적으로 다양한 언어에 걸쳐 관용적이고 비유적인 의미를 포착하는 개념 네트워크 기반 프레임워크를 제시합니다. 이 프레임워크는 인지-언어학적 특징을 활용하여 관용구가 언어가 아닌 개념 스키마에 따라 군집화됨을 밝혀냈습니다. 교차 언어 전이 실험 결과, 개념적 근접성만으로 높은 번역 등가물을 식별할 수 있음을 입증했습니다.
7월 13일1
arXivAI 번역논문
신뢰도 보정 및 점진적 추론을 통한 QANTA 2026용 작업별 멀티모달 질의응답 에이전트
본 논문은 QANTA 2026 공동 챌린지를 위해 작업별 멀티모달 질의응답(EMM-QA) 에이전트 아키텍처를 제안합니다. 이 시스템은 불확실성 속 답변 결정(Tossup)과 정확한 증거 기반 선택(Bonus)이라는 두 가지 과제를 다룹니다. 특히, 신뢰도 보정 및 도메인 특화 추론 정책에 중점을 둔 경량의 에이전트 전략을 통해 높은 성능을 달성했습니다.
7월 13일1
arXivAI 번역논문
토크나이저 이식(Transplantation): 효율적인 벵골어 음성 인식에서 자기회귀적 붕괴 완화
본 연구는 영어 중심의 바이트 레벨 토크나이저가 벵골어와 같은 형태론적으로 풍부한 언어에서 자기회귀적 붕괴를 유발하는 문제를 분석했습니다. 이를 해결하기 위해 네이티브 스크립트 기반의 BanglaBERT WordPiece 어휘집을 이식하고 임베딩 행렬 크기를 조정하는 새로운 파이프라인을 제안합니다. 그 결과, WER과 RTF 측면에서 높은 성능 개선을 입증하며 크로스 스크립트 적응에 활용 가능한 청사진을 제시했습니다.
7월 13일4
arXivAI 번역논문
Agora: 경매 기반 작업 할당을 통한 LLM 에이전트 추론 능력 향상
본 논문은 LLM 에이전트의 추론 능력 향상을 위해 경매 메커니즘을 도입한 프레임워크 Agora를 제안합니다. 기존 방식들이 단순 매칭에 의존하는 한계를 극복하고, 작업을 전문가 모델 및 도구에 동적으로 할당하여 가장 유능한 솔버에게 라우팅되도록 합니다.
7월 13일1
arXivAI 번역논문
평가자(Judge)가 바뀌면 측정값도 변한다: LLM-as-Judge 신뢰성 감사
LLM-as-Judge의 신뢰성은 평가자 변경에 따라 측정값이 달라지는 '평가자 교체 모호성' 문제를 안고 있습니다. 본 연구는 다양한 판단 데이터셋에서 Qwen3 모델 확장 및 MiniMax API 이동 등 두 가지 업그레이드 경로를 비교 분석했습니다. 그 결과, 더 강력한 평가자가 위치 편향과 장황함 편향을 줄이기는 하지만 완전히 제거하지 못하며, 보고서에 상세한 감사 추적 기록이 필요함을 강조합니다.
7월 10일1
arXivAI 번역논문
환자 중심 대화형 인공지능의 복잡성
본 연구는 LLM 기반의 건강 챗봇 개발 시 실제 환자 대화 데이터를 분석했습니다. 커뮤니케이션 패턴과 감정 표현의 높은 다양성을 발견했으며, 이를 반영한 환자 시뮬레이터를 개발하여 현실성이 높음을 입증했습니다. 또한, 커뮤니케이션 스타일이 응급도 평가 성능에 큰 영향을 미침을 밝혀내며, 실제 환경 배포 시 시스템 설계의 복잡성 수용 필요성을 강조합니다.
7월 10일1
arXivAI 번역논문
PALS: LLM 가지치기를 위한 분위수 인식 계층별 희소성
본 논문은 LLM의 효율적인 경량화를 위해 PALS (Percentile-Aware Layerwise Sparsity)라는 새로운 가지치기 기법을 제안합니다. PALS는 활성화 크기의 분위수를 기반으로 계층별 희소성을 조정하여, 기존 방법들보다 더 나은 성능과 낮은 퍼플렉서티를 달성함을 보여줍니다. 또한, 기울기 기반 할당 방식의 한계점도 제시했습니다.
7월 9일1
arXivAI 번역논문
실제 데이터 복잡성을 반영한 대규모 언어 모델(LLM) 벤치마크
기존 LLM 벤치마크가 실제 데이터 분석 환경을 반영하지 못하는 문제를 지적하며, 정부 공개 데이터를 기반으로 DataGovBench를 소개합니다. 이 벤치마크는 복잡한 질문에 답하는 Table QA와 전문가 수준의 통찰력을 발견하는 Table Insight 두 가지 작업을 포함하여 LLM 평가의 새로운 기준을 제시합니다.
7월 8일2
arXivAI 번역논문
계층적 음향-의미 모델링: 전이중(Full-Duplex) SLM을 위한 모달리티 분리 및 의미 일관성
본 논문은 전이중(full-duplex) 음성 언어 모델(SLMs)의 핵심 과제인 모달리티 간섭 문제를 다룹니다. 연구진은 이 문제가 깊은 매개변수 공간 공유에서 발생하는 기울기 충돌 때문임을 밝혀냈습니다. 이에 따라, 모달리티 분리 및 의미 일관성을 유지하는 계층적 전이중 프레임워크 Lychee-FD를 제안합니다.
7월 8일1
arXivAI 번역논문
시불변 표현(Time-Invariant Representations)을 통한 스트리밍 신경망 음성 코덱
TiCodec은 시불변 표현 추출(TIRE) 모듈을 통해 음성 콘텐츠에서 화자 및 환경 정보를 분리하는 신경망 음성 코덱 연구입니다. 중간 레이어의 상호 보완성을 활용한 Dual-TIRE 구조를 제안하며, 스트리밍 환경에서도 성능 저하 없이 저지연 음성 처리가 가능함을 입증했습니다.
7월 7일2
arXivAI 번역논문
얼마나 남았을까? LLM은 남은 출력 길이를 선형적으로 인코딩한다
LLM이 생성할 남은 출력 길이를 내부적으로 추정하고 있다는 연구 결과입니다. 은닉 상태를 통한 선형 프로빙 결과, 모델은 응답의 전체 길이를 예측할 수 있는 내부 표현을 가지고 있음이 확인되었습니다.
7월 7일1
arXivAI 번역논문
대규모 언어 모델(LLMs)의 스펙트럼 시그니처 (Spectral Signatures)
LLM의 계보 추적과 관리를 위해 가중치 스펙트럼 밀도를 활용한 '스펙트럼 시그니처' 지표를 제안합니다. 이 방식은 데이터 없이도 모델의 고유 특성을 포착하며, 대규모 모델 코퍼스의 효율적인 분석과 클러스터링을 가능하게 합니다.
7월 7일1
arXivAI 번역논문
SMM4H-HeaRD 2026에서의 CaresAI: TNM 병기 예측
SMM4H-HeaRD 2026 태스크의 일환으로 TCGA 병리 보고서를 활용해 TNM 병기를 예측하는 연구입니다. ClinicalBERT, BioBERT 등 임베딩과 LightGBM, WRN 모델을 활용하여 다중 레이블 분류 성능을 분석했습니다.
7월 7일1
arXivAI 번역논문
TRIAGE: 신뢰할 수 있는 검색 계측 및 그래프 평가
Graph-RAG의 신뢰성을 확보하기 위해 추출, 구축, 추론 단계를 단계별로 계측하는 TRIAGE 프레임워크를 소개합니다. 이 프레임워크는 지식 그래프의 구현, 검증, 사용 단계를 독립적인 지표로 평가하여 실패 지점을 정확히 찾아냅니다.
7월 7일1