Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
arXiv cs.CL (NLP) 1795건필터 해제
arXiv논문
언어 기술의 다원화(Plurification) — 차세대 AI에서의 문화 통합
본 논문은 NLP 분야에서 문화적 정렬을 달성하기 위해 단순한 데이터 확장을 넘어 다원적 인식론을 도입해야 함을 제안합니다. 기술 활동의 5개 계층 모델을 통해 현재 연구가 출력 수준에 머물러 있음을 지적하며, 사회-기술적 접근 방식의 필요성을 강조합니다.
6월 23일0
arXiv논문
인식에서 이해로: LLM을 통한 인지적 시계열 추론의 해제
LLM을 활용한 시계열 분석의 한계를 극복하기 위해 인지적 추론 중심의 멀티모달 벤치마크 TSCognition과 통합 프레임워크 TSAlign을 제안합니다. TSAlign은 시계열 데이터를 LLM 임베딩 공간에 정렬하여 기존 모델보다 뛰어난 성능과 효율성을 보여줍니다.
6월 23일0
arXiv논문
LLM 추론을 위한 RL 업데이트의 핵심 요소는 무엇인가?
LLM의 추론 능력 향상을 위한 RLVR(검증 가능한 보상 기반 강화학습)의 업데이트 역학을 이론적으로 분석한 연구입니다. 중요도 샘플링 비율의 분포와 클리핑 동작이 업데이트에 미치는 영향을 규명하고, 이를 개선한 ACPO 알고리즘을 제안합니다.
6월 23일0
arXiv논문
NL2Scratch: 블록 기반 프로그래밍을 위한 실행 가능한 벤치마크 및 평가
텍스트 기반 NL2Code 연구의 한계를 넘어, 블록 기반 프로그래밍인 Scratch를 위한 실행 가능한 벤치마크 NL2Scratch를 제안합니다. 새로운 평가 지표인 SAC를 통해 기존 지표가 놓치던 모델의 의미론적 오류를 정밀하게 측정합니다.
6월 23일0
arXiv논문
신호는 어디에 존재하는가? 의료 인코더 사전 학습을 위한 웹 데이터 레시피
의료 도메인 인코더의 성능 향상을 위해 웹 데이터 큐레이션 레시피를 제안합니다. 의료 용어 밀도 필터링과 LLM을 활용한 신호 증폭 재구문 기법을 통해 프랑스어 의료 NLP 성능을 극대화했습니다.
6월 23일0
arXiv논문
추론 모델은 자신의 사고 사슬 (Chain of Thought) 변화를 감지할 수 있는가?
추론 모델이 자신의 사고 사슬(CoT)에 가해진 인위적인 개입이나 편집을 감지할 수 있는지에 대한 연구를 다룹니다. 실험 결과, 모델들은 자신의 CoT 변화를 식별하는 데 매우 낮은 정확도를 보이며 타 모델의 CoT 변화를 감지하는 것과 유사한 수준의 능력을 나타냈습니다.
6월 23일0
arXiv논문
BioMatrix: 서열, 구조, 언어의 모달리티 매트릭스를 아우르는 포괄적인 생물학적 파운데이션 모델을 향하여
BioMatrix는 분자 및 단백질의 서열, 구조, 자연어를 단일 디코더 아키텍처 내에서 통합하는 최초의 멀티모달 파운데이션 모델입니다. 별도의 어댑터 없이 단일 차기 토큰 예측 방식으로 모든 모달리티를 균일하게 처리하며, 다양한 생물학적 태스크에서 최첨단 성능을 입증했습니다.
6월 23일0
arXiv논문
$π$-RAG: 대규모 언어 모델(LLM)을 위한 의미론적 양자화 및 초월적 주소 지정 기반의 망각형 검색
$π$-RAG는 LLM이 민감한 데이터에 직접 접근하지 못하도록 수학적 불변성을 활용한 망각형 검색 아키텍처를 제안합니다. $π$를 이용한 초월적 엔트로피와 의미론적 양자화를 통해 데이터 보안을 강화하고 프라이버시를 보장합니다.
6월 23일0
arXiv논문
진정한 창발적 합의는 언제 발생하는가? LLM 에이전트 사회를 위한 측정된 결합 이득(Coupling Gain) 및 타당성 진단법
LLM 에이전트 사회에서 발생하는 창발적 합의와 양극화 현상을 정량적으로 측정하고 진단하는 새로운 방법론을 제안합니다. 결합 이득(Coupling Gain) 지표를 도입하여 모델의 사회적 역학이 진정한 상호작용인지 아니면 모델 자체의 사전 지식에 의한 산물인지 구분하는 프로토콜을 제공합니다.
6월 23일0
arXiv논문
블랙박스 LLM 분류에서의 점수 세밀도 격차: 신뢰도 구축 방식에 대한 비교 연구
LLM의 블랙박스 분류 시 신뢰도 점수의 해상도를 결정하는 '점수 세밀도 격차'를 분석한 연구입니다. 7가지 신뢰도 구축 방식이 임계값 설정과 순위 매기기에 미치는 영향을 비교하고, 추론 비용과의 트레이드오프를 다룹니다.
6월 23일0
arXiv논문
어휘적 합의 (Lexical Consensus): 인공 에이전트의 접지된 단어 학습과 공유된 의미
인공 에이전트가 시각적 경험을 통해 단어의 의미를 학습하고 안정화하는 과정을 연구한 논문입니다. DINOv2 임베딩을 활용해 지각적 거리와 어휘적 접지 사이의 상관관계를 분석하며, 명명과 인출 메커니즘의 차이를 규명합니다.
6월 23일0
arXiv논문
SamatNext v0.2-B: 소규모 코드 모델의 커리큘럼 유지력을 위한 RMS 정규화 하이브리드 디코더에 관한 탐색적 연구
SamatNext v0.2-B는 RMS 정규화와 선형 상태 믹서를 결합한 356M 규모의 하이브리드 디코더 모델입니다. 순차적 미세 조정 과정에서 발생하는 치명적 망각 문제를 완화하여 코드 커리큘럼 유지력을 높이는 연구를 수행했습니다.
6월 23일0
arXiv논문
Hausa 및 Fongbe 기계 번역을 위한 대규모 언어 모델(LLM) 평가: 벤치마크, 실패 사례 및 지표 신뢰성
서아프리카 언어인 Hausa와 Fongbe를 대상으로 LLM의 기계 번역 품질과 자동 평가 지표의 신뢰성을 분석한 연구입니다. 언어별 모델 성능 차이와 자동 지표가 인간의 판단을 완벽히 반영하지 못하는 한계를 규명했습니다.
6월 23일0
arXiv논문
MixedPEFT: 혼합 목적 함수를 통한 다중 PEFT 방법의 결합을 이용한 비지도 도메인 적응 (Unsupervised Domain
MixedPEFT는 혼합 목적 함수와 맞춤형 PEFT 아키텍처를 결합하여 비지도 도메인 적응 문제를 해결하는 새로운 연구입니다. LoRA와 가역 어댑터를 결합하여 소스 도메인의 분류 성능과 타겟 도메인의 MLM 성능을 동시에 최적화합니다.
6월 23일0
arXiv논문
음성에서 텍스트 코퍼스로: 저자원 언어인 Fongbe 및 Hausa를 위한 ASR 기반 데이터 수집 평가
저자원 아프리카 언어인 Fongbe와 Hausa의 텍스트 코퍼스 확장을 위해 ASR 파이프라인을 활용한 데이터 수집 연구를 수행했습니다. MMS-300M과 Whisper 모델을 미세 조정하여 음성 데이터를 텍스트로 변환하고 그 품질을 평가했습니다.
6월 23일0
arXiv논문
적절한 속도로 학습하기: 적응형 데이터 스케줄링(Adaptive Data Scheduling)을 통한 LLM 강화학습(RL) 개선
LLM 강화학습(RL)의 효율성을 높이기 위해 데이터 샘플링 방식을 개선한 적응형 데이터 스케줄링(ADS) 프레임워크를 제안합니다. 기존의 균등 샘플링 대신 의미론적 클러스터와 정책 경계 샘플을 활용하여 학습 성능을 최적화합니다.
6월 23일0
arXiv논문
BabelJudge: 언어 및 에이전트 궤적 전반에 걸친 LLM-as-a-Judge 신뢰성 측정
LLM-as-a-Judge의 체계적 편향을 측정하고 감사하는 오픈 소스 프레임워크인 BabelJudge를 소개합니다. 위치, 장황함, 교차 언어 저하 등 네 가지 주요 실패 모드를 측정하며, 에이전트 평가를 위한 궤적 수준의 섭동 분석 기능도 포함합니다.
6월 23일0
arXiv논문
연구는 어떻게 진화하는가? NLP, ML, CV에서의 주장 기반 유형별 인용을 통한 교차 도메인 궤적 추적
SciTraj 코퍼스를 통해 NLP, ML, CV 분야의 논문 인용 관계를 주장(claim) 기반의 유형별 그래프로 분석하는 새로운 방법론을 제안합니다. 기존의 단순 인용 그래프를 넘어 연구의 진화 궤적을 추적하고 학문적 흐름을 예측할 수 있는 벤치마크를 제공합니다.
6월 23일0
arXiv논문
언어적 개입으로서의 호기심: LLM 튜터링 대화를 통한 탐구적 학습 행동의 영향
LLM의 대화 전략을 조작하여 학습자의 탐구적 인지 형성을 연구하는 CURIOBOT 프레임워크를 소개합니다. 호기심을 유도하는 언어적 개입이 학습자의 탐구적 질문과 대화 주도성을 유의미하게 증가시킴을 입증했습니다.
6월 23일0
arXiv논문
첫 번째 토큰 브로드캐스터(First-Token Broadcasters): Transformer에서 언어 정체성과 분산된
다국어 언어 모델에서 언어 정체성을 결정하는 '첫 번째 토큰 브로드캐스터' 헤드를 식별하는 LIHA 기법을 소개합니다. 연구 결과, 인스트럭션 튜닝이 언어 정체성 회로를 초기 레이어로 국소화시킨다는 인과적 증거를 발견했습니다.
6월 23일0