Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
arXiv cs.CL (NLP) 1801건필터 해제
arXiv논문
다국어 샘플 전반의 창의적 연상 지식에 대한 다면적 표현으로서의 멀티플렉스 의미 네트워크(multiplex semantic networks)
본 연구는 창의성의 근간인 연상 지식을 모델링하기 위해 6가지 인지 과업을 결합한 멀티플렉스 의미 네트워크를 제안합니다. 다국가 데이터를 통해 단일 과업보다 다중 과업 기반의 네트워크가 창의성을 더 풍부하게 포착함을 입증했습니다.
6월 9일0
arXiv논문
형식이 아닌 용량의 문제: 구조화된 추론 실패에 대한 재고
구조화된 출력(Structured Output)이 모델의 추론 성능에 미치는 영향을 분석한 연구입니다. 형식 지정은 모델의 여유 용량에 따라 성능 저하를 유발하며, 이는 단순한 토큰 부족이 아닌 용량 경쟁 문제임을 밝혀냈습니다.
6월 9일0
arXiv논문
기술(Skill)은 무엇을 기억해야 하는가? 비용 인식형 기술 재작성(Cost-Aware Skill Rewriting)에서의 품질-비용
LLM 에이전트의 기술(skill) 재작성 시 발생하는 품질과 비용 간의 트레이드오프를 연구합니다. 단순 프롬프트 압축을 넘어, 운영 지식 공학 관점에서 정보 보존 전략을 통해 비용을 절감하면서도 에이전트의 성능을 유지하는 방법을 제안합니다.
6월 9일0
arXiv논문
정확함이 더 낫다: 쌍체 비교(Pairwise Comparisons)를 통한 정확도 순위 도출
본 연구는 쌍체 비교(Pairwise Comparisons)와 Elo 점수 방식이 생성 모델의 정확도 순위와 강력하게 일치함을 입증합니다. 벤치마크를 자유 형식 평가로 변환했을 때 정확도와 0.9 이상의 높은 상관관계를 보이며, 판사 편향의 영향을 최소화할 수 있음을 확인했습니다.
6월 9일0
arXiv논문
수어 상호작용에서의 수어 활동 예측을 향하여
음성 중심의 차례 주고받기 예측 프레임워크를 수어 상호작용으로 전이하는 초기 연구를 다룹니다. 포즈 기반 특징을 활용해 수어 활동을 예측하며, 손 신호를 통한 SHIFT/HOLD 예측의 가능성과 SHIFT 예측의 한계를 제시합니다.
6월 9일0
arXiv논문
MUDIDI: 언어 모델을 활용한 다국어 사전 디지털화(Digitization)를 위한 2단계 프레임워크
MUDIDI는 스캔된 다국어 사전을 기계 판독 가능한 형식으로 변환하기 위한 2단계 프레임워크입니다. 문자 인식 및 마크업 보존, 사전 항목 분할 및 스키마 매핑 과정을 통해 저자원 언어의 디지털화를 지원합니다.
6월 9일0
arXiv논문
나를 인도해줘: 위기 상황에서 VLM 운영자의 통신을 벤치마킹하기 위한 프레임워크
위기 상황에서 VLM(시각-언어 모델) 운영자의 통신 능력을 평가하기 위한 새로운 벤치마킹 프레임워크를 제안합니다. 시뮬레이션된 대피 환경에서 통신 전략과 환경 표현 방식이 민간인 에이전트 안내 성공률에 미치는 영향을 분석했습니다.
6월 9일0
arXiv논문
골드 스탠다드 없는 추론: 자동 형식화(Autoformalization)를 위한 프록시 판사(Proxy-Judge) 이론
자동 형식화(Autoformalization) 작업에서 정답 참조 없이도 추론의 정확성을 검증할 수 있는 '프록시 판사(Proxy-Judge)' 프레임워크를 제안합니다. 축별 속성 검사를 통해 오류를 식별하고 이를 수정하는 성찰적 정교화 루프를 통해 모델의 성능을 높입니다.
6월 9일0
arXiv논문
AbstRAG: 검색 문제를 위한 추상화 학습
RAG 시스템에서 질의와 문서 간의 추상화 수준 차이로 발생하는 '추상화 격차' 문제를 해결하기 위한 AbstRAG를 제안합니다. 성찰적 정제 메커니즘을 통해 검색 실패를 진단하고 단계별 패치를 제안하여 검색 및 생성 정확도를 향상시킵니다.
6월 9일0
arXiv논문
H2HMem: 인간 간 상호작용 내 에이전트를 위한 멀티모달 메모리 벤치마크
인간 간 상호작용 환경에서 LLM 에이전트의 멀티모달 메모리 능력을 평가하기 위한 새로운 벤치마크인 H2HMem을 소개합니다. 기존 텍스트 중심 벤치마크의 한계를 넘어, 복잡한 대화와 멀티모달 정보를 포함한 다자간 상호작용에서의 메모리 회상 및 추론 능력을 측정합니다.
6월 9일0
arXiv논문
DECSELFMASK: Decoder-Only 분류를 위한 자기 관련성 가이드 마스킹(Self-Relevance-Guided Masking)
Decoder-only 모델의 분류 성능을 높이기 위해 미라벨 데이터에서 관련성 가이드 마스킹을 사용하는 DecSelfMask 기법을 제안합니다. 관련성 속성 분석을 통해 텍스트의 핵심 부분을 마스킹하고 재구성 학습을 진행하여 모델의 의미론적 이해를 돕습니다.
6월 9일0
arXiv논문
다중 입도(Multi-Granular) L2 평가 및 자연어 근거 생성을 위한 미세 조정된 SpeechLLM
다중 입도(Multi-Granular) 평가와 자연어 근거 생성을 위한 SpeechLLM 연구를 소개합니다. SFT와 BDPO를 결합하여 문장 및 단어/음소 수준의 평가를 수행하며, SpeechOcean762 데이터셋에서 우수한 성능을 입증했습니다.
6월 9일0
arXiv논문
회상을 넘어선 기억: 자기 진화형 LLM 에이전트를 위한 이중 프로세스 인지 기억 시스템
LLM 에이전트의 장기 기억을 위해 이중 프로세스 인지 기억 시스템인 DCPM을 제안합니다. 이 시스템은 동기식 주간 작성기(System1)와 비동기식 야간 엔진(System2)을 통해 신념 수정과 고차원 스키마 추상화를 수행합니다.
6월 9일0
arXiv논문
On-Policy Distillation에서의 KL Agreement Trap 탈출하기
On-policy distillation(OPD) 과정에서 학생 모델이 잘못된 경로로 빠졌을 때 교사 모델과 잘못 일치하게 되는 'low-KL agreement trap' 현상을 분석했습니다. 이를 해결하기 위해 동적 임계값을 사용하여 유효하지 않은 학습 신호를 차단하는 KAT 알고리즘을 제안합니다.
6월 9일0
arXiv논문
Self-Harness: 스스로 개선되는 하네스 (Harnesses That Improve Themselves)
LLM 에이전트의 성능을 높이기 위해 모델별로 최적화된 하네스를 스스로 개선하는 'Self-Harness' 프레임워크를 제안합니다. 약점 탐색, 하네스 제안, 제안 검증의 3단계 반복 루프를 통해 인간의 개입 없이도 모델의 성능을 일관되게 향상시킵니다.
6월 9일0
arXiv논문
차이점을 탐지하는 것이 구조를 이해하는 것은 아니다: 대규모 언어 모델(LLMs)의 그래프 동형성(Graph Isomorphism) 판단 실패
LLM이 그래프 동형성 판단에서 높은 정확도를 보이지만, 이는 구조적 이해가 아닌 패턴 매칭에 의존함을 밝힌 연구입니다. 노드 레이블이 치환될 경우 성능이 급격히 저하되어 진정한 위상학적 추론 능력이 부족함을 시사합니다.
6월 9일0
arXiv논문
경직된 방식에서 동적인 방식으로: 긴 문맥 LLM을 위한 엔트로피 가이드 적응형 추론
EntropyInfer는 긴 문맥 LLM 추론 시 어텐션 헤드의 엔트로피 패턴을 분석하여 연산량을 적응적으로 할당하는 프레임워크입니다. 경직된 헤드와 동적 헤드의 차이를 활용해 KV 캐시 압축 및 효율적인 연산 할당을 수행합니다.
6월 9일0
arXiv논문
이동성 및 소셜 미디어 데이터를 활용한 해석 가능한 위기 행동 분석
이 논문은 위기 상황에서 이동성 데이터와 소셜 미디어 데이터를 통합하여 해석 가능한 행동 패턴을 분석하는 프레임워크를 제안합니다. 산불과 팬데믹 사례를 통해 이질적인 데이터를 정렬하고 연관 규칙을 추출하여 정책 결정에 활용 가능한 운영 브리핑을 생성하는 과정을 입증했습니다.
6월 9일0
arXiv논문
대규모 언어 모델(LLM)에서의 문맥 특성 민감도 발현
본 연구는 LLM의 지시어 미세 조정(IFT) 단계에 따라 문맥 특성 민감도가 어떻게 변화하는지 분석합니다. SFT, DPO, RLVR 과정을 거치며 모델이 문맥을 활용하는 방식이 능동적으로 재형성됨을 실험을 통해 입증했습니다.
6월 9일0
arXiv논문
유전자에서 토큰까지: 해석 가능한 문체론적 분석을 위한 GWAS 기반 접근 방식
GWAS(전장 유전체 연관 분석) 방법론을 문체론적 분석에 도입하여, 특정 토큰과 저자성 사이의 연관성을 탐지하는 새로운 연구를 소개합니다. 로지스틱 회귀를 통해 영어, 독일어, 러시아어 코퍼스에서 통계적으로 유의미한 어휘적 마커를 식별할 수 있음을 입증했습니다.
6월 9일0