Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
arXiv cs.CL (NLP) 1799건필터 해제
arXiv논문
Fodor와 Pylyshyn의 체계성(Systematicity) 도전은 여전히 유효하다
신경망이 인간 언어의 체계성(systematicity) 문제를 해결했다는 최근 주장들에 대해 비판적 분석을 제공합니다. 연구 결과, 기존 모델들은 분포 외(OOD) 규칙 학습에 어려움을 겪으며 여전히 체계적이지 못한 모습을 보입니다.
6월 15일0
arXiv논문
MoDiCoL: 강건한 음성 인식을 위한 모듈형 진단 지속 학습 데이터셋
실제 환경의 다양한 변수(소음, 악센트 등)가 동시에 발생하는 상황에 대응하기 위한 새로운 음성 인식 데이터셋 MoDiCoL을 제안합니다. 모델의 강건성이 어떻게 습득되고 전이되는지 분석하기 위한 지속 학습 커리큘럼과 전략을 연구합니다.
6월 15일0
arXiv논문
모든 평가의 모든 것: AI 평가 결과에 대한 통합 스키마 및 커뮤니티 저장소
AI 평가 결과의 불일치와 파편화 문제를 해결하기 위해 통합 스키마 및 커뮤니티 저장소인 'Every Eval Ever'를 제안합니다. 이 프로젝트는 다양한 평가 프레임워크의 결과를 표준화된 JSON 형식으로 통합하여 비교와 재사용을 용이하게 합니다.
6월 15일0
arXiv논문
SIMMER: 월드 모델을 통한 LLM 실행 계획의 잠재적 실패(Latent Failures) 벤치마킹
LLM 에이전트의 계획 실행 중 발생하는 '잠재적 실패(latent failures)'를 탐지하고 평가하기 위한 새로운 벤치마크 SIMMER를 소개합니다. 월드 모델을 활용해 즉각적인 오류는 아니지만 목표 달성을 저해하거나 돌이킬 수 없는 피해를 주는 오류를 식별합니다.
6월 15일0
arXiv논문
설득 지수 (Persuasion Index): 설득 분석을 위한 이론 기반 프레임워크
심리학 및 커뮤니케이션 이론을 기반으로 설득적 수사 단서를 식별하는 '설득 지수(Persuasion Index)' 프레임워크를 제안합니다. 15개 차원과 55개 하위 특징을 통해 AI 안전성 및 정보 조작 탐지에 활용 가능한 투명한 분석 체계를 제공합니다.
6월 15일0
arXiv논문
LoSoNA: 그룹 대화에서의 지역적 사회 규범 적응을 위한 벤치마크
LLM 에이전트가 다자간 그룹 채팅 내의 숨겨진 지역적 사회 규범을 인식하고 적응하는 능력을 평가하기 위한 새로운 벤치마크 LoSoNA를 제안합니다. 다양한 프롬프팅 조건에서 8개의 주요 모델을 평가한 결과, 모델별로 규범 인식 성능에 큰 차이가 있음을 확인했습니다.
6월 15일0
arXiv논문
AI 생성 이야기에서의 문화적 현지화 특성 분석
AI가 생성하는 이야기의 문화적 현지화 방식을 템플릿 기반과 총체적 방식으로 구분하여 분석하는 연구입니다. 어휘적 차이를 제거한 후에도 공통된 서사 템플릿이 존재함을 확인하였으며, 특정 국가의 문화적 표식이 편향되거나 모욕적일 수 있음을 밝혔습니다.
6월 15일0
arXiv논문
확산 모델(Diffusion)에 좌측에서 우측으로 추측(Speculate)하도록 가르치기
확산 언어 모델을 활용한 투기적 디코딩의 효율성을 높이기 위해, 양방향 생성과 좌측-우측 검증 간의 간극을 줄이는 세 가지 훈련 기법을 제안합니다. 이를 통해 추가 연산 없이도 초안 수락 길이를 21-76% 향상시켰습니다.
6월 14일0
arXiv논문
사전 학습된 자기지도 학습 음성 모델은 보지 못한 자음을 인식할 수 있다
사전 학습된 자기지도 학습(SSL) 음성 모델이 코이산 언어의 클릭 자음과 같은 희귀 음소를 얼마나 잘 인식하는지 연구했습니다. Wav2Vec2와 HuBERT 모델을 미세 조정하여 실험한 결과, SSL이 희귀 음소에 대해서도 뛰어난 일반화 성능을 보임을 확인했습니다.
6월 14일0
arXiv논문
GraphInfer-Bench: 그래프 상에서의 LLM 추론 능력 벤치마킹
LLM의 그래프 추론 능력을 측정하기 위한 새로운 벤치마크인 GraphInfer-Bench를 소개합니다. 기존 Graph-QA와 달리 단일 노드나 경로 검색만으로는 해결할 수 없는 고차원적 추론 태스크를 정의하며, 다양한 모델의 성능 격차를 분석합니다.
6월 14일0
arXiv논문
Kuramoto Attention: 토러스(Torus) 상에서의 셀프 어텐션 (Self-Attention) 동기화
토러스(Torus) 상에서 위상 동기화를 활용하는 새로운 셀프 어텐션 메커니즘인 Kuramoto Attention을 제안합니다. 이 레이어는 게이트된 코사인 유사도와 원형 평균을 통해 토큰을 업데이트하며, 제약된 기하학적 구조를 가진 실행 가능한 언어 모델임을 입증했습니다.
6월 14일0
arXiv논문
당신의 LLM은 제어 가능한가?
활성화 스티어링(Activation steering)의 성공 여부를 생성 초기 단계의 은닉 상태를 통해 예측하는 연구를 소개합니다. 새로운 테스트베드 ASTEER을 통해 모델의 내부 역학을 분석하고, GBDT 분류기를 활용해 적은 비용으로 최적의 스티어링 강도를 찾아내는 방법을 제안합니다.
6월 14일0
arXiv논문
입장 탐지(Stance Detection)를 위한 적응형 작업자 할당 기반의 멀티 에이전트 추론
입장 탐지(Stance Detection) 성능을 높이기 위해 추론 수준의 합성을 활용하는 멀티 에이전트 프레임워크를 제안합니다. 매니저가 입력 복잡도에 따라 워커 에이전트를 적응적으로 할당하여, 단순 투표 대신 추론 과정을 합성함으로써 복잡한 문맥을 더 정확히 분석합니다.
6월 14일0
arXiv논문
내부의 파벌, 외부의 불확실성: 소셜 하이라이팅에서의 문서 내 독자 하위 그룹
공동 독서 플랫폼에서 사용자들이 문서를 하이라이트할 때 형성되는 독자 하위 그룹의 구조를 분석한 연구입니다. 실험 결과, 독자들은 문서 내에서 강력한 파벌적(factional) 그룹을 형성하지만, 이 그룹화가 문서 간에 안정적으로 유지되는지는 불분명합니다.
6월 14일0
arXiv논문
음소 기반 자동 음성 인식 시스템의 편향성 평가: IPA 전사 모델 분석
본 연구는 음소(phoneme) 기반 자동 음성 인식(ASR) 시스템인 WhisperIPA와 ZIPA의 인구통계학적 편향성을 평가합니다. 인종, 연령, 성별, 억양에 따른 성능 격차를 분석하여 더욱 포용적인 음성 인식 모델 개발을 위한 통찰을 제공합니다.
6월 14일0
arXiv논문
3-Key-Input: 텍스트 입력을 위한 이론적 최소 키 개수 탐색
언어 모델을 활용하여 텍스트 입력을 위한 물리적 키의 최소 개수를 탐색한 연구입니다. 3개의 키와 GPT-4o를 조합했을 때 실용적인 수준의 정확도를 달성할 수 있음을 입증했습니다.
6월 14일0
arXiv논문
다중 형식 학습을 통한 언어 모델의 교차 형식 강건성(Cross-Format Robustness) 향상
언어 모델이 답변 형식 변화에 민감하게 반응하는 문제를 해결하기 위해 교차 형식 강건성을 정의하고 연구했습니다. FormatMix와 같은 다중 형식 학습이 모델의 성능과 강건성을 동시에 향상시킴을 확인했습니다.
6월 14일0
arXiv논문
방어 수단으로서의 더미 백도어: 생성형 LLM을 위한 공유 내부 메커니즘을 통한 미지의 백도어 제거
본 연구는 생성형 LLM의 미지 백도어를 제거하기 위해 '더미 백도어'를 활용하는 새로운 방어 메커니즘을 제안합니다. 서로 다른 백도어가 공유하는 내부 활성화 패턴을 이용해, 의도적으로 삽입된 더미 백도어를 미세 조정함으로써 미지의 공격까지 효과적으로 완화합니다.
6월 14일0
arXiv논문
앞 페이지가 아닌 롱테일: 대중의 하이라이트 중요도에 대한 콜드 스타트(Cold-Start) 예측
독자들이 문서의 특정 구절에 남기는 하이라이트 정보를 바탕으로, 데이터가 쌓이기 전 텍스트만으로 집단적 중요도를 예측하는 연구입니다. 학습된 모델이 단순 위치 기반 베이스라인보다 높은 정밀도를 보임을 입증했습니다.
6월 14일0
arXiv논문
AI가 도시 계획가처럼 추론할 수 있는가? 전문가의 판단을 대상으로 한 대규모 언어 모델(LLM) 벤치마킹
도시 계획 분야에서 LLM의 전문적 추론 능력을 평가하기 위한 새로운 벤치마크 프레임워크인 UPBench를 소개합니다. 25개의 모델을 평가한 결과, 모델들이 고차원적 분석에서는 강점을 보이지만 제도적 맥락과 규제적 판단에는 한계가 있음을 발견했습니다.
6월 14일0