Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
arXiv cs.CL (NLP) 1795건필터 해제
arXiv논문
이중 임계값 하드 예제 마이닝을 통한 교차 플랫폼 중국어 공격적 댓글 탐지
중국 소셜 미디어의 교차 플랫폼 공격적 댓글 탐지 시 발생하는 성능 저하 문제를 해결하기 위한 연구입니다. 이중 임계값 하드 예제 마이닝 전략을 통해 도메인 변화에 대응하며, 적은 라벨링 데이터로도 높은 성능의 도메인 적응을 실현합니다.
6월 29일0
arXiv논문
Yuvion LLM: 콘텐츠 및 AI 안전을 위한 적대적 인지 대규모 언어 모델
Yuvion LLM은 적대적 공격에 대비한 콘텐츠 및 AI 안전성을 강화하기 위해 설계된 모델입니다. 계획, 도구 사용, 다단계 추론 등 복잡한 시나리오에서도 견고한 성능을 유지하며, 새로운 평가 벤치마크인 YLRE를 함께 제안합니다.
6월 29일0
arXiv논문
검색 에이전트가 질문을 던져야 하는 시점: 명확성 인지형 딥 서치(Deep Search)를 위한 DiscoBench
검색 에이전트가 모호한 사용자 쿼리를 만났을 때 능동적으로 질문을 던져 명확성을 확보할 수 있는지 평가하는 새로운 벤치마크 DiscoBench를 소개합니다. 11개 도메인의 실제 사례를 통해 에이전트의 모호성 탐지 및 상호작용 능력을 다각도로 분석합니다.
6월 29일0
arXiv논문
신호에서 전이로: 대규모 언어 모델(LLM)의 프로브 기반 불확실성 추정(Uncertainty Estimation)에 관한 요인별 연구
LLM의 환각 탐지를 위한 프로브 기반 불확실성 추정(UE)의 성능 결정 요인을 분석한 연구입니다. 특징 설계, 데이터 구축, 평가 설정이 성능에 미치는 영향을 비교하며, 분포 변화 상황에서의 견고한 특징 활용과 최적의 프롬프팅 방식을 제안합니다.
6월 29일0
arXiv논문
월드 모델을 위한 텍스트 기반 신념 상태: 엄격한 중재 하에서의 식별 가능한 표현 학습
부분적으로 관찰되는 환경에서 월드 모델의 잠재 상태 식별 문제를 해결하기 위한 새로운 연구를 소개합니다. 텍스트 기반의 이산적 잠재 상태를 활용하며, 엄격한 중재를 강제하는 fGRPO 알고리즘을 통해 예측 및 작업 수행 성능을 크게 향상시켰습니다.
6월 29일0
arXiv논문
다음 LLM을 위한 사전 등록을 통한 LLM 기반 p-해킹 (p-Hacking) 완화
LLM을 활용한 연구 과정에서 발생할 수 있는 p-해킹(p-hacking) 문제를 완화하기 위한 새로운 프로토콜을 제안합니다. 실험 계획과 모델을 사전에 등록한 뒤, 출시되지 않은 미래의 모델로 검증을 수행함으로써 연구의 신뢰성을 높이는 방법론입니다.
6월 29일0
arXiv논문
계층별 위치 임베딩 스케일링(LPES)을 통한 Transformer의 위치 편향 완화
LLM의 'lost-in-the-middle' 문제를 해결하기 위해 각 계층에 최적의 스케일링 인자를 할당하는 LPES 방법을 제안합니다. 유전 알고리즘과 베지에 곡선을 활용하여 추가적인 미세 조정이나 지연 시간 없이 위치 어텐션 편향을 효과적으로 완화합니다.
6월 29일0
arXiv논문
암호화된 필사 문서 이미지의 전사 및 복호화 결합: 전통적인 파이프라인과의 비교
암호화된 필사본 이미지를 전사 과정 없이 평문으로 직접 매핑하는 엔드투엔드(end-to-end) 복호화 방식을 제안합니다. 기존의 전사 후 복호화 방식이 가진 전사 오류 전파 문제를 해결하고자 하며, 코피알레 암호를 사례로 성능을 검증했습니다.
6월 29일0
arXiv논문
안전한 LLM 미세 조정(Fine-Tuning)을 위한 낮은 친화성 페르소나 조건화
LLM을 사회적 따뜻함에 맞춰 미세 조정할 때 발생하는 탈옥 취약성과 유해 출력 문제를 조사합니다. 낮은 친화성 페르소나를 조건화하는 데이터 재작성 파이프라인을 통해, 모델의 따뜻함을 유지하면서도 안전성을 강화하는 방법을 제안합니다.
6월 29일0
arXiv논문
음성 강조 모델은 언어와 감정에 걸쳐 일반화될 수 있는가?
다양한 언어와 감정 조건에서 음성 강조를 탐지할 수 있는 MMEE 코퍼스를 소개합니다. 연구 결과, 다국어 학습이 모델의 견고성을 향상시키며 감정 간 전이 성능이 우수함을 확인했습니다.
6월 29일0
arXiv논문
Smooth MMD 정렬을 통한 LLM의 수치 예측 능력 향상
LLM의 수치 예측 정확도를 높이기 위해 Smooth Maximum Mean Discrepancy(SMMD)라는 새로운 손실 함수를 제안합니다. 기존 교차 엔트로피가 숫자의 메트릭 구조를 무시하는 문제를 해결하기 위해 값-거리 커널과 그래프 기반 매끄러움을 결합했습니다.
6월 29일0
arXiv논문
KG2Cypher: 기업용 Text-to-Cypher 시스템 구축을 위한 데이터 중심 파이프라인
기업용 지식 그래프를 위한 데이터 중심 Text-to-Cypher 파이프라인인 KG2Cypher를 제안합니다. 그래프 사실로부터 쿼리와 자연어 질문 쌍을 생성하고, SFT를 통해 학습된 생성기가 높은 정확도와 실행률을 달성함을 입증했습니다.
6월 29일0
arXiv논문
보정 가이드 기반 LLM 압축을 위한 출력 공간 할당 비용: 실증적 연구
LLM 압축 시 할당 비용을 가중치 공간이 아닌 출력 공간 목적 함수와 일치시키는 ROCKET-ActCost 방법론을 제안합니다. 실험 결과, Qwen3-8B 모델에서 정확도는 향상되었으나 퍼플렉서티는 증가하는 트레이드오프가 관찰되었습니다.
6월 29일0
arXiv논문
SHIFT: 검색 증강 생성 (RAG)에서의 지식 충돌 완화를 위한 게이트 변조 활성화 스티어링 (Gate-Modulated
RAG 시스템에서 검색된 문맥과 모델의 기존 지식이 충돌하는 문제를 해결하기 위한 새로운 프레임워크 SHIFT를 제안합니다. 뉴런을 직접 수정하는 대신 경량 게이트 모듈을 통해 내부 활성화를 적응적으로 조절하여 모델의 일반 능력을 유지하며 지식 충돌을 완화합니다.
6월 29일0
arXiv논문
훈련이 필요 없는 슬라이딩 윈도우 적응을 위한 NLL 가이드 기반 전체 주의력(Full-Attention) 레이어 선택
긴 문맥 추론 효율성을 높이기 위해 어떤 레이어에 전체 주의력(Full-attention)을 유지할지 결정하는 NLL 가이드 레이어 선택 방법을 제안합니다. 훈련 없이 NLL 저하를 측정하여 레이어 중요도를 판단하며, Qwen3-4B 실험에서 적은 계산 자원으로도 높은 정확도를 달성했습니다.
6월 29일0
arXiv논문
위치 편향 교정은 단일 패스 어텐션 정렬(One-Pass Attention Sorting)에 불충분하다
긴 문맥 언어 모델의 위치 편향 문제를 해결하기 위해 제안된 '디바이어싱 단일 패스 어텐션 정렬' 방식의 한계를 연구했습니다. 실험 결과, 위치 편향 교정만으로는 반복적인 어텐션 정렬 방식의 성능을 완전히 대체하기 어렵다는 것을 확인했습니다.
6월 29일0
arXiv논문
역사적 텍스트의 개체명 인식 (NER)을 위한 시간적 융합 전략 연구
역사적 텍스트의 개체명 인식(NER) 성능을 높이기 위해 시간적 메타데이터를 모델에 임베딩하는 다양한 융합 전략을 연구했습니다. 실험 결과, 후기 융합(late fusion) 방식이 초기 및 노이즈가 많은 시기의 데이터에서도 가장 견고한 성능을 보였습니다.
6월 29일0
arXiv논문
Triadic Werewolf: LLM의 멀티홉 마음 이론 (Multi-Hop Theory of Mind)을 위한 광대 역할
LLM의 마음 이론(ToM) 평가를 위해 기존 이자 관계 게임에 '광대' 역할을 추가한 Triadic Werewolf 게임을 제안합니다. GPT-4.1, DeepSeek-V3.1, Llama-3.3-70B를 대상으로 실험한 결과, 삼자 관계의 인센티브 구조가 멀티 에이전트 추론 능력을 측정하는 데 효과적임을 입증했습니다.
6월 29일0
arXiv논문
검증 가능한 기하학 문제 해결: 솔버 주도형 자동 형식화 및 정리 제안
기하학 문제 해결을 위해 신경망의 직관과 기호적 엄밀성을 결합한 뉴로-심볼릭 프레임워크 SD-GPS를 제안합니다. 솔버를 실행 오라클로 활용하여 자동 형식화와 정리 예측의 병목 현상을 해결하며, 기존 모델보다 뛰어난 성능을 입증했습니다.
6월 29일0
arXiv논문
VASAE: 어휘 정렬 앵커링(Vocabulary-Aligned Anchoring)을 통한 SAE 사전 방향(Dictionary
VASAE는 SAE 특징을 Transformer의 토큰 어휘와 직접 정렬하여 학습하는 새로운 방법론을 제안합니다. 재구성 품질을 유지하면서도 특징에 내재적 토큰 이름을 할당하여 모델 해석력을 높였습니다.
6월 29일0