Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
arXiv cs.CL (NLP) 1803건필터 해제
arXiv논문
Cohesion-6K: 온라인 담론에서의 사회적 결속 및 갈등 분석을 위한 아랍어 데이터셋
온라인 담론 내 사회적 결속과 갈등을 분석하기 위한 아랍어 데이터셋 Cohesion-6K를 소개합니다. 6,000개의 Facebook 게시물을 5가지 담론 범주로 분류하였으며, 갈등 지향적 게시물이 더 높은 참여를 유도한다는 분석 결과를 제시합니다.
5월 22일0
arXiv논문
RAMPHO 버퍼의 인 실리코 (In Silico) 모델링: 심층 신경망 (DNN) 내 음성 엔트로피를 통한 정보적 마스킹과 에너지적 마스킹의
본 연구는 다중 화자 환경에서 발생하는 인지적 병목 현상을 해결하기 위해 RAMPHO 버퍼의 인 실리코 시뮬레이션을 제안합니다. wav2vec 2.0의 음성 엔트로피를 활용하여 정보적 마스킹과 에너지적 마스킹을 분리하고, 인지-음향적 파레토 최적화 문제를 분석합니다.
5월 22일0
arXiv논문
아임계 시퀀스 복잡도를 가진 엔티티 추적을 위한 구조적 희소 어텐션 (Structured-Sparse Attention)
엔티티 추적을 위해 어텐션의 구조적 희소성을 활용한 새로운 블록 단위 평가 방식을 제안합니다. 이 방식은 밀집 연산자의 정확도를 유지하면서도 연산 복잡도를 아임계(subquadratic) 수준으로 낮추어 실행 시간을 단축합니다.
5월 22일0
arXiv논문
겉으로는 예의 바르지만 실제로는 틀린: 다국어 뱅골어 생성에서의 경어법 오류 수정을 위한 큐레이션된 데이터셋
뱅골어와 같은 저자원 언어에서 발생하는 경어법 오류를 해결하기 위해 큐레이션된 BLADE 데이터셋과 벤치마킹 프레임워크를 제안합니다. DeepSeek-8B 및 LLaMA-3.2-3B 모델을 LoRA로 미세 조정하여 화용론적 격차를 개선하는 연구를 다룹니다.
5월 22일0
arXiv논문
SpaceDG: 시각적 저하 상황에서의 공간 지능 벤치마킹
시각적 저하 상황에서도 견고한 공간 지능을 평가하기 위한 새로운 벤치마크 SpaceDG를 소개합니다. 3DGS 기반 물리 엔진을 통해 9가지 저하 유형을 시뮬레이션하며, MLLM의 공간 추론 성능 격차를 확인하고 미세 조정을 통한 개선 가능성을 제시합니다.
5월 22일0
arXiv논문
하나의 프롬프트로는 충분하지 않다: 지시문 민감도가 임베딩 모델 평가를 저해함
지시문 임베딩 모델 평가 시 단일 프롬프트만을 사용하는 방식의 한계를 지적합니다. 연구 결과, 프롬프트 문구에 따른 성능 편차가 커서 기존 리더보드 순위가 신뢰하기 어렵다는 점을 밝혀냈습니다.
5월 22일0
arXiv논문
Boiling the Frog: 에이전트 안전성을 위한 멀티턴(Multi-Turn) 벤치마크
에이전트의 안전성을 평가하기 위해 점진적 공격을 활용한 멀티턴 벤치마크인 'Boiling the Frog'를 제안합니다. 기존 텍스트 중심 평가를 넘어, 에이전트가 환경 내에서 수행하는 행동과 상태 변화를 기반으로 위험성을 측정합니다.
5월 22일2
arXiv논문
LANG: 언어 적응형 힌트 가이던스 (Language-Adaptive Hint Guidance)를 이용한 다국어 추론을 위한 강화학습
LANG은 다국어 문맥에서 LLM의 추론 성능과 언어 일관성 사이의 트레이드오프를 해결하기 위한 새로운 강화학습 프레임워크입니다. 언어 조건부 힌트와 점진적 감쇠 스케줄을 통해 영어로의 언어 드리프트 현상을 방지하고 다국어 추론 능력을 향상시킵니다.
5월 22일0
arXiv논문
누구의 목소리가 중요한가? 미국 정부에 제출된 공공 의견을 통한 AI에 대한 이해관계자 관점 매핑
미국 AI 실행 계획에 대한 공공 의견을 분석하여 이해관계자별 AI 인식을 조사한 연구입니다. 토픽 모델링을 통해 학계, 개인, 민간 부문의 관점 차이를 규명하고 정책 반영의 불균형을 지적합니다.
5월 22일0
arXiv논문
온도를 넘어: 후기 단계의 기하학적 확장으로서의 하이퍼피팅 (Hyperfitting)
소규모 데이터셋 미세 조정 시 발생하는 '하이퍼피팅' 현상이 단순 온도 조절이 아닌, 마지막 트랜스포머 블록의 기하학적 확장과 동적 순위 재정렬에 의한 것임을 밝힌 연구입니다. 이를 바탕으로 효율적인 생성 성능을 위한 Late-Stage LoRA 전략을 제안합니다.
5월 22일0
arXiv논문
뉴스 중개자로서의 상용 AI 챗봇 평가
상용 AI 챗봇의 뉴스 중개 능력을 평가한 연구로, Gemini, Grok, Claude, GPT 모델을 대상으로 6개 지역의 최신 뉴스를 분석했습니다. 연구 결과, 모델들은 객관식에서는 높은 정확도를 보였으나 자유 응답 시 정확도가 하락하며, 검색 편향과 잘못된 전제에 취약함을 드러냈습니다.
5월 22일0
arXiv논문
행동 미세 조정 (Behavioral Fine-Tuning)을 통한 언어 모델 내 병리적 유사 행동 패턴 모델링
LLM의 정책을 수정하여 특정 행동 패턴을 유도하는 행동 유도 프레임워크를 제안합니다. 우울증 및 편집증과 같은 부적응적 행동 데이터를 통해 미세 조정한 모델이 생성 분포에서 체계적이고 일반화된 변화를 보임을 입증했습니다.
5월 22일0
arXiv논문
APM: 임의의 선호도 매핑을 통한 LLM의 스타일 개인화 평가
LLM의 암시적 스타일 선호도를 평가하기 위한 새로운 벤치마크인 APM을 제안합니다. APM은 사용자 속성과 응답 특성 간의 무작위 매핑을 통해 모델이 대화 이력에서 선호도를 정확히 추론하는지 검증합니다.
5월 21일0
arXiv논문
ArPoMeme: 정치적 이데올로기와 양극화를 위한 주석이 달린 아랍어 멀티모달 데이터셋
아랍어 정치 밈의 이데올로기적 성향과 양극화 양상을 분석하기 위한 대규모 멀티모달 데이터셋 ArPoMeme을 제안합니다. 약 7,300개의 밈을 수집하여 정치적 프레이밍과 적대감 등을 정밀하게 주석 처리했습니다.
5월 21일0
arXiv논문
LASH: 대규모 언어 모델(LLM)의 블랙박스 탈옥을 위한 적응형 의미론적 하이브리드화
LASH는 다양한 공격 전략을 적응적으로 결합하여 LLM의 안전 가드레일을 우회하는 블랙박스 탈옥 프레임워크입니다. 유전 알고리즘과 2단계 적합도 함수를 사용하여 대상 모델과 유해 카테고리에 최적화된 프롬프트를 생성합니다.
5월 21일0
arXiv논문
암시적 감성 분석을 위한 인지적 평가 기반의 태스크 라우팅 혼합 전문가 모델 (Task-Routed Mixture-of-Experts with
인지적 평가 이론을 활용하여 암시적 감성 분석 성능을 높이는 새로운 MTL 프레임워크를 제안합니다. 태스크 간 간섭을 줄이기 위해 태스크별로 전문가 조합을 제어하는 Task-Routed Mixture-of-Experts(TRMoE) 구조를 채택했습니다.
5월 21일0
arXiv논문
LamPO: 추론 언어 모델을 위한 람다 스타일 정책 최적화
본 논문은 추론 언어 모델의 개선을 위한 강화학습 패러다임에서, 기존 방법들이 놓치던 후보 응답 간의 미세한 관계적 정보를 포착하는 새로운 최적화 기법인 LamPO(Lambda-Style Policy Optimization)를 제안합니다. LamPO는 스칼라 그룹 어드밴티지를 '쌍별 분해 어드밴티지'로 대체하여, 각 응답 쌍 간의 보상 격차와 신뢰도 인식 가중치를 활용해 정교한 비교 학습을 수행합니다. 실험 결과, LamPO는 기존 방법들보다 더 안정적인 훈련 역학 및 샘플 효율성을 보여주며 다양한 추론 과제에서 우수한 성능 향상을 입증했습니다.
5월 21일0
arXiv논문
ChunkFT: 메모리 효율적인 전체 미세 조정(Full Fine-Tuning)을 위한 바이트 스트림 기반 최적화
ChunkFT는 네트워크 구조를 변경하지 않고도 바이트 스트림 기반의 최적화를 통해 메모리 효율적인 전체 파라미터 미세 조정을 가능하게 하는 새로운 프레임워크입니다. 임의의 서브 텐서에 대한 그래디언트 계산을 지원하여 표준적인 밀집 그래디언트 계산의 부담을 줄이며, Llama 3 모델 실험을 통해 메모리 사용량과 성능 면에서 기존 방식보다 우수함을 입증했습니다.
5월 21일0
arXiv논문
문학적 사후 교정에서의 은유: 판도라의 상자를 여는 것인가?
본 논문은 신경망 기계 번역(NMT) 및 대규모 언어 모델(LLMs)이 생성한 문학 텍스트의 은유 표현에 대해 사후 교정자들이 어떻게 대응하는지 분석합니다. 연구 결과, 출력된 은유의 약 33%가 수정되었으며, 교정자들은 기계 번역의 품질을 낮게 평가하고 사후 교정 작업이 신규 번역보다 더 많은 노력을 요구한다고 보고했습니다.
5월 21일0
arXiv논문
LLM은 룩셈부르크어가 무엇을 차용하는지 알고 있는가? 저자원 다국어 모델에서의 어휘적 신조어 탐색
본 연구는 저자원 다국어 모델이 룩셈부르크어의 어휘 차용 및 신조어 패턴을 얼마나 잘 이해하는지 평가하기 위해 LexNeo-Bench 벤치마크를 제안합니다. 실험 결과, 외부 문맥 없이 LLM의 차용 분류 성능은 낮았으나, 언어 지식 그래프를 프롬프트에 주입하는 어휘 인지 프롬프팅을 통해 성능을 대폭 향상시킬 수 있음을 확인했습니다.
5월 21일0