Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
arXiv cs.CL (NLP) 1801건필터 해제
arXiv논문
EntSQL: 긴 컨텍스트 기업 지식 내 Text-to-SQL 그라운딩을 위한 벤치마크
기업의 비공개 비즈니스 지식과 긴 컨텍스트를 활용한 Text-to-SQL 능력을 평가하기 위한 새로운 벤치마크 EntSQL을 소개합니다. 기존 벤치마크가 간과한 조직 규칙과 도메인 지식 기반의 SQL 생성 난이도를 입증합니다.
6월 3일0
arXiv논문
보고, 추론하고, 개입하라: 목표 지향적 사회적 지능을 위한 선제적 월드 모델링 (Proactive World Modeling)
고객의 행동을 보고 의도를 추론하여 선제적으로 개입하는 SII 프레임워크와 PIWM 모델을 제안합니다. AIDA 및 BDI 모델을 활용해 고객 상태를 예측하며, 새로운 벤치마크인 GuidanceSalesBench를 통해 성능을 검증했습니다.
6월 3일0
arXiv논문
P²-DPO: 보정된 직접 선호 최적화(Calibration Direct Preference Optimization)를 통한 지각 처리 과정의
LVLM의 환각 현상과 시각적 강건성 문제를 해결하기 위해 제안된 P²-DPO 학습 패러다임을 소개합니다. 모델이 스스로 온-폴리시 선호 쌍을 생성하고 보정 손실을 사용하여 시각 정보와 텍스트 생성을 정밀하게 정렬합니다.
6월 3일0
arXiv논문
모델 병합이 라우팅을 망칠 때: MoE를 위한 훈련 없는 보정 (Training-Free Calibration)
MoE 모델 병합 시 발생하는 라우팅 붕괴 문제를 해결하기 위한 새로운 연구를 소개합니다. Hessian-Aware Router Calibration(HARC)은 재학습 없이 2차 곡률 정보를 활용하여 병합된 라우터를 효과적으로 보정합니다.
6월 3일0
arXiv논문
대규모 언어 모델(LLM)의 개인정보 보호를 위한 임상 배포용 선택적 토큰 수준 암호화 편집
임상 환경에서 LLM 사용 시 발생하는 개인정보 유출 위험을 줄이기 위해, 민감한 토큰만을 선택적으로 암호화하는 HERALD 프레임워크를 제안합니다. 이 방식은 문맥을 보존하면서도 모델 변경 없이 클라이언트 측에서 작동하여 데이터 보안과 모델 성능 사이의 균형을 맞춥니다.
6월 3일0
arXiv논문
Transformer를 이용한 Counter Language 모델링에서 스택 표현(Stack Representations)의 인과적 증거
Transformer 모델이 Counter Language를 처리할 때 학습하는 스택 표현의 인과적 역할을 분석한 연구입니다. 선형 프로브를 통해 추출한 스택 깊이 방향을 제거했을 때 모델의 성능이 완전히 붕괴됨을 입증했습니다.
6월 3일0
arXiv논문
DMF: 대화형 AI 에이전트를 위한 결정론적 메모리 프레임워크
대화형 AI 에이전트의 메모리 일관성을 위해 LLM 요약 대신 수학적 점수 산정 방식을 사용하는 결정론적 메모리 프레임워크(DMF)를 제안합니다. DMF는 로지스틱 투영과 생존 점수를 활용하여 토큰 비용을 획기적으로 줄이면서도 높은 정확도를 유지합니다.
6월 3일0
arXiv논문
대규모 언어 모델(LLM)은 자신의 응답에 대해 과도하게 확신한다
지시어 튜닝된 LLM이 베이스 모델보다 캘리브레이션 성능이 떨어지는 원인을 분석한 연구입니다. 채팅 템플릿이 '소유권 편향'을 유발하여 모델이 자신의 답변에 과도한 확신을 갖게 함을 밝히고, 이를 개선하기 위한 추론 시점의 프레이밍 전략을 제안합니다.
6월 3일0
arXiv논문
LLM Reranker는 자신의 랭킹 성능을 예측할 수 있는가?
LLM Reranker가 스스로 랭킹 품질을 예측할 수 있는지 연구한 논문입니다. 훈련이 필요 없는 자기 일관성 방식과 훈련 기반의 Verb-Num, Verb-List 방식을 비교 분석했습니다.
6월 3일0
arXiv논문
SAGE: 에이전트 생태계에서의 사회적 진화에 대한 정량적 평가
에이전트들이 동료의 경험을 공유하며 함께 진화하는 사회적 진화 과정을 정량적으로 평가하는 SAGE 프레임워크를 소개합니다. 연구 결과, 공유된 이력은 자기 개선에 정체된 에이전트에게 돌파구를 제공하며, 단순한 로그보다 추상화된 정보가 성능 향상에 더 효과적임을 밝혀냈습니다.
6월 3일0
arXiv논문
AutoTail-BSFGM: 중국어 학술 텍스트 분류를 위한 클래스 균형 인식 미세 조정 (Class-Balance-Aware
중국어 학술 텍스트 분류의 불균형 문제를 해결하기 위한 AutoTail-BSFGM 방법론을 제안합니다. 자동 게이트형 테일-사전 조정과 Balanced Softmax, FGM 적대적 정규화를 결합하여 추론 시 추가 비용 없이 분류 성능을 향상시킵니다.
6월 3일0
arXiv논문
BaltiVoice: Balti 언어를 위한 음성 코퍼스 및 미세 조정된 Whisper ASR 시스템
파키스탄 Balti 언어를 위한 음성 코퍼스인 BaltiVoice를 소개합니다. OpenAI Whisper-small 모델을 이 코퍼스로 미세 조정하여, 기존 제로샷 성능 대비 단어 오류율(WER)을 획기적으로 낮추는 데 성공했습니다.
6월 3일0
arXiv논문
문자 그대로를 넘어: 멀티모달 밈 이해에서의 화용론적 의도 분해
LVLM이 밈의 표면적 내용과 실제 화용론적 의도를 혼동하는 문제를 해결하기 위해 Intent Projection 프레임워크를 제안합니다. 이 프레임워크는 표현, 출력, 목적 수준에서 문자적 정보와 화용론적 정보를 분리하여 밈의 숨겨진 의도를 정확히 파악합니다.
6월 3일0
arXiv논문
CauTion: 앙상블 인과 발견 (Ensemble Causal Discovery)을 위한 LLM 신뢰 시점 판단 방법
CauTion은 통계적 인과 발견의 한계를 극복하기 위해 LLM의 도메인 지식을 앙상블 알고리즘에 안정적으로 통합하는 프레임워크입니다. 합의 필터링과 신뢰 보정 메커니즘을 통해 LLM의 오류를 최소화하고 인과 그래프의 정확도를 높였습니다.
6월 3일0
arXiv논문
대규모 추론 모델(LRM)의 지시 이행 해결을 위한 보조 제약 조건의 가교 역할 연구
대규모 추론 모델(LRM)이 복잡하거나 상충하는 지시 사항을 따르지 못하는 문제를 해결하기 위해 지식 그래프 기반의 CRGC 프레임워크를 제안합니다. 이 방식은 '가교 제약 조건'을 통해 제약 조건 간의 관계를 모델링하여 모델의 지시 이행 능력을 향상시킵니다.
6월 3일0
arXiv논문
CoEval: 레이블 데이터나 신뢰할 수 있는 벤치마크 없이 맞춤형 작업을 위한 언어 모델 순위 지정
CoEval은 레이블 데이터나 기존 벤치마크 없이도 언어 모델의 성능을 평가할 수 있는 오픈 소스 프레임워크입니다. 티처 모델을 통해 오염되지 않은 새로운 벤치마크를 합성하고, 교차 패밀리 판사 앙상블을 활용해 모델의 순위를 정확하게 매깁니다.
6월 3일0
arXiv논문
월드 모델과 언어 모델의 만남: 구체적 추론과 추상적 추론의 상호 보완성에 대하여
월드 모델의 구체적 시각적 시뮬레이션과 MLLM의 추상적 추론을 결합하는 '제어된 구체적 추론' 방식을 제안합니다. PF-OPSD 학습법을 통해 미래 비디오를 직접 관찰하지 않고도 정확한 예측과 추론을 수행하며, 벤치마크 테스트에서 성능 향상을 입증했습니다.
6월 3일0
arXiv논문
미세 조정된 LLM의 안전성 측정은 역량에 기반해야 한다
미세 조정(Fine-tuning)이 LLM의 안전성에 미치는 영향을 역량(Capability) 관점에서 분석한 연구입니다. 기존의 무작위적 실험 방식 대신 역량 목표를 고정하여 다차원적인 평가를 수행해야 함을 강조합니다.
6월 3일0
arXiv논문
환각 거부 샘플링 (Hallucination Rejection Sampling)을 통한 신뢰할 수 있는 장문 생성 구축
장문 생성 시 발생하는 환각 스노우볼링 문제를 해결하기 위해 SHARS 프레임워크를 제안합니다. 환각 탐지기를 사용하여 오류가 발생한 세그먼트를 식별하고 재샘플링함으로써 사실적 일관성을 높입니다.
6월 3일0
arXiv논문
AI 생성 텍스트 탐지에서 저확률 토큰의 중요성: 다중 스케일 불확실성 관점
AI 생성 텍스트 탐지의 한계를 극복하기 위해 저확률 토큰의 불확실성에 집중하는 새로운 방법론인 Uncertainty를 제안합니다. 상용구 지배 문제와 단일 확률 점수의 취약성을 해결하여 탐지 성능과 강건성을 높였습니다.
6월 2일0