Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
arXiv cs.CL (NLP) 1801건필터 해제
arXiv논문
비용 효율적인 개체 해상도(Entity Resolution)를 위한 LLM 기반의 적응형 그래프 정제 및 레이블 전파
기존의 단계별 개체 해상도(ER) 방식의 한계를 극복하기 위해, 매칭과 클러스터링을 통합한 단일 프레임워크 Alper를 제안합니다. LLM의 강력한 추론 능력과 그래프 레이블 전파의 효율성을 적응적으로 결합하여 비용 효율적인 그래프 정제를 수행합니다.
5월 26일0
arXiv논문
SAMark: 문단 수준의 패러프레이징 강건성을 갖춘 자기 앵커링 텍스트 워터마킹
SAMark는 문장 순서 변경과 같은 문단 수준의 패러프레이징 공격에 강한 자기 앵커링 텍스트 워터마킹 프레임워크를 제안합니다. 의미 공간 내 그린 영역 구축과 다채널 쌍곡선 스코어링을 통해 탐지 성능을 높이고 생성 품질을 유지합니다.
5월 26일0
arXiv논문
아키텍처 복잡성을 넘어선 미세 조정 (Fine-Tuning): DeBERTa를 이용한 PIIBench에서의 광범위한 PII 탐지
PIIBench를 활용하여 DeBERTa 모델의 개인 식별 정보(PII) 탐지 성능을 연구했습니다. 복잡한 계층적 모델보다 직접적인 토큰 분류 미세 조정 방식이 다양한 데이터셋에서 더 높은 F1 점수를 기록하며 우수성을 입증했습니다.
5월 26일0
arXiv논문
명확히 할 것인가, 기권할 것인가, 아니면 답변할 것인가? 신념 증강 생성 (Belief-Augmented Generation)을 통한 대화
LLM의 불확실성을 활용하여 답변, 명확화, 기권 중 최적의 대화 전략을 선택하는 '신념 증강 생성(BAG)' 기술을 제안합니다. 기존 모델이 불확실성을 무시하는 문제를 해결하며, 다회차 질의응답 환경에서 정확도를 향상시킵니다.
5월 26일0
arXiv논문
TTPrint: 발산 후 수렴 검증을 통한 증거 기반 TTP 추출
사이버 위협 인텔리전스(CTI)에서 MITRE ATT&CK 기법을 정확하게 추출하기 위한 새로운 프레임워크 TTPrint를 제안합니다. '발산 후 수렴' 설계를 통해 후보 기법을 광범위하게 생성한 뒤 증거 기반으로 엄격히 검증하여 재현율과 정밀도를 동시에 높였습니다.
5월 26일0
arXiv논문
검색이 메모리가 될 때: 로봇 설계 실험을 전이 가능한 기술로 전환하기
Auto-Robotist는 로봇 설계 과정에서 발생하는 형태 탐색 흔적을 자연어 기술 라이브러리로 증류하는 자가 진화형 LLM 에이전트입니다. 설계 지식을 명시적인 라이브러리로 저장하여 검색 및 재사용이 가능하게 함으로써, 기존 유전 알고리즘보다 뛰어난 설계 전이 성능을 보여줍니다.
5월 26일0
arXiv논문
MuCRASP: 멀티모달 사고 사슬 (Chain-of-thought) 추론 인지형 구조적 가지치기 (Structured Pruning)
VLM의 사고 사슬(CoT) 추론 능력을 보존하면서 모델 크기를 줄이는 새로운 구조적 가지치기 프레임워크 MuCRASP를 제안합니다. 기존 방식이 놓치던 피벗 토큰과 모달리티 간 활성화 분포 차이를 고려하여 높은 압축률에서도 추론 품질을 유지합니다.
5월 26일0
arXiv논문
TIAR: LLM 기권 학습을 위한 궤적 정보 기반 이점 재가중 (Trajectory-Informed Advantage Reweighting)
LLM의 기권 학습을 위해 궤적 정보 기반 이점 재가중(TIAR) 방식을 제안하는 논문입니다. GRPO 학습 과정에서 궤적을 신뢰도 지표로 활용하여 기권 보상을 동적으로 재가중함으로써 환각을 줄이고 지식의 경계를 탐색합니다.
5월 26일0
arXiv논문
자기 확신이 오해를 불러올 때: 검증 가능한 보상을 활용한 강화학습을 위한 능동적 라벨 획득
RLVR의 높은 라벨링 비용과 학습 붕괴 문제를 해결하기 위해 능동적 검증 가능 보상을 활용하는 RLAVR 방식을 제안합니다. CAG 지표와 CARE 정책을 통해 가치 있는 샘플을 선별하여 제한된 예산 내에서 학습 안정성과 성능을 높입니다.
5월 26일0
arXiv논문
사전 학습(Pre-Training) 단계에서의 다국어 능력을 위한 모델 병합(Model Merging)의 한계에 대하여
단일 언어 사전 학습 모델들을 병합하여 다국어 능력을 확보하려는 시도의 한계를 연구했습니다. 실험 결과, 모델 병합 시 발생하는 간섭 현상으로 인해 성능 붕괴가 나타남을 확인했습니다.
5월 26일0
arXiv논문
타입화된 메모리 표현 (Typed Memory Representation)을 통한 장기 에이전트의 출처-역할 붕괴
LLM 에이전트의 장기 메모리 저장 방식에서 발생하는 출처-역할 붕괴 문제를 해결하기 위해 MemIR이라는 새로운 중간 표현 방식을 제안합니다. MemIR은 메모리를 구조화된 원자 단위로 기록하여 출처 모니터링 오류를 방지하고 정보의 신뢰성을 높입니다.
5월 26일0
arXiv논문
인과적 혀 묶임(Causal Tongue-Tie): LLM은 인과적 방향을 인코딩할 수 있지만, Yes/No 출력은 이를 표현하지 못한다
LLM의 내부 은닉 상태에는 인과적 정보가 존재하지만, 실제 Yes/No 답변으로는 이를 출력하지 못하는 '인과적 혀 묶임' 현상을 발견했습니다. 이는 모델의 내부 인지 능력과 언어적 출력 사이의 불일치를 시사합니다.
5월 26일0
arXiv논문
범용 활성화 버벌라이저 (Universal Activation Verbalizer): 교차 모델 활성화 설명을 위한 통합 프레임워크
이질적인 모델들의 은닉 표현을 자연어로 설명하기 위한 통합 프레임워크인 UAV를 제안합니다. 공유 디코더와 경량 어댑터를 활용하여 모델 간 경계를 넘나드는 교차 모델 활성화 설명을 가능하게 합니다.
5월 26일0
arXiv논문
LLM은 시간 여행을 할 수 있는가? 강화학습 (RL)을 통한 법률 에이전트 검색의 시간적 일관성 향상
법률 LLM이 겪는 시간적 편향 문제를 해결하기 위해 강화학습 기반의 LegalSearch-R1 프레임워크를 제안합니다. 로컬 RAG와 웹 검색을 결합하여 사건의 시간적 맥락에 맞는 정확한 법령 및 판례를 인용하도록 설계되었습니다.
5월 26일0
arXiv논문
학습자 코퍼스(Learner Corpus)에 대한 지속적 사전 학습(Continued Pretraining)이 영어 숙달도 시험의 자동 에세이
학습자 코퍼스(Learner Corpus)를 활용한 지속적 사전 학습(DAPT)이 자동 에세이 채점(AES) 성능에 미치는 영향을 연구했습니다. 연구 결과, 도메인 데이터와 평가 데이터 간의 숙달도 및 장르 일치 여부가 성능 개선의 핵심 요인임을 확인했습니다.
5월 26일0
arXiv논문
1억 미만 파라미터 양자화 인식 학습(QAT)에서의 스케줄 x 비트 너비 경계 매핑
1억 미만 파라미터 규모의 디코더 언어 모델을 대상으로 양자화 인식 학습(QAT) 시 비트 너비에 따른 최적의 학습률 스케줄 변화를 연구했습니다. 실험 결과, INT8/INT6 환경에서는 비트 너비와 상관없이 FP16의 스케줄을 그대로 사용할 수 있으나, INT4의 경우 50M 파라미터 기준으로 스케줄링 양상이 달라짐을 확인했습니다.
5월 26일0
arXiv논문
KSAA-2026 Task 2의 Thaka: 아랍어 음성 성조 표기(Diacritization)를 위한 정규화된 미세 조정
KSAA-2026 Task 2에서 1위를 차지한 Thaka 시스템을 소개합니다. 소량의 데이터로 아랍어 음성 성조 표기를 수행하기 위해 CATT 텍seq 인코더와 Whisper 음성 인코더를 결합한 멀티모달 모델을 제안합니다.
5월 26일0
arXiv논문
QUIET: LLM의 창의적 생성 능력을 위한 다중 빈칸 연쇄형 스토리 클로즈(Story Cloze) 벤치마크
LLM의 창의적 생성 능력을 객관적으로 평가하기 위한 새로운 벤치마크 QUIET를 제안합니다. 기존의 객관식 방식에서 벗어나 다중 빈칸과 내용 제약 조건을 활용하며, 정보 이론 기반의 자동 점수 산정 프로토콜을 통해 창의성과 논리적 충족도를 동시에 측정합니다.
5월 26일0
arXiv논문
PolyGnosis 2.0: Polymarket 및 OSINT 통찰력 추출을 위한 에이전트 하네스 엔지니어링(Agentic Harness
PolyGnosis 2.0은 Polymarket의 정서와 GDELT의 OSINT 데이터를 결합하여 예측 지능을 추출하는 멀티 에이전트 아키텍처입니다. 성찰 루프와 CoT 등 하네스 엔지니어링 기술을 통해 금융 도메인의 노이즈를 극복하고 고수익 트레이딩 신호를 포착합니다.
5월 26일0
arXiv논문
LLM 에이전트는 언제 표면적 노이즈와 의미적 노이즈를 다르게 취급하는가? 별도의 검증 데이터(Held-Out)를 통한 Trace-Level
LLM 에이전트가 의미적 노이즈와 표현 방식의 노이즈를 다르게 처리하는 현상을 분석한 연구입니다. 실험 결과, 의미적 변화가 단순 포맷 변경보다 최종 답변에 더 큰 영향을 미치며, 이는 추론 과정 중 '스텔스 발산'을 통해 나타남을 확인했습니다.
5월 26일0