Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
arXivAI 번역논문
장기 생존 캐릭터의 로컬 추론: 게임 NPC를 위한 증분 메모리 유지
본 논문은 게임 NPC의 장기 생존 캐릭터를 위한 증분 메모리 유지 방식을 연구했습니다. 로컬 배포 언어 모델 기반 캐릭터는 대화마다 전체 기억을 재처리해야 하는 비효율성이 있습니다. 제안된 런타임은 사용되지 않는 어텐션 KV 엔트리를 제거하고, 지속되는 순환 상태와 변경되지 않은 KV를 보존하여 메모리 유지 비용을 절감합니다.
9월 17일1
arXivAI 번역논문
결과를 넘어: 효율적인 에이전트 벤치마킹을 위한 이중 관점 관계 학습
본 논문은 높은 평가 비용 때문에 발생하는 에이전트 벤치마크의 비효율성을 해결하기 위해 DualViewEval을 제안했습니다. 이 방법은 최종 결과(outcome)와 프로세스 관계를 결합하여 학습함으로써, 전체 성능을 예측하는 최소한의 태스크 집합을 찾아냅니다. 이를 통해 에이전트 모델 개발에 필요한 진단적이고 효율적인 피드백을 제공합니다.
9월 17일1
arXivAI 번역논문
Align, Integrate, 그리고 발화: 제로샷 음성 LLM을 위한 효율적인 토큰 수준 정렬
본 논문은 제로샷 음성 처리를 위한 'Aligned Continuous Integrate-and-Fire' 프레임워크를 제시합니다. 이 방법은 동적 시간 변형(DTW) 정렬을 활용하여 연속적인 음향 프레임을 목표 텍스트의 이산 토큰 길이로 효율적으로 압축합니다. 이를 통해 계산 비용이 높은 LLM 순방향 통과 없이도 강력한 음성-의미론적 연결 고리를 구축하고, 메모리 효율적인 지식 증류를 통해 뛰어난 성능을 달성했습니다.
9월 17일1
arXivAI 번역논문
프롭 시프트가 공정성 해결책이 아닌 이유: 음성 모델에서의 표현 제어(Representation Steering)의 한계
본 연구는 ASR 시스템의 화자 그룹별 오류율 격차를 줄이기 위해 내부 표현에 개입하는 '표현 제어(Representation Steering)' 기법을 탐구했습니다. Whisper, HuBERT 등 다양한 인코더를 사용하여 성별/성, 연령, 억양 등의 메타데이터 기반 방향성을 주입했으나, WER 감소 효과는 미미하거나 통계적으로 유의하지 않았습니다.
9월 17일1
arXivAI 번역논문
합성 언어 생성을 위한 변분 양자 트랜스포머 아키텍처
본 논문은 NISQ 환경에 적합한 변분 양자 트랜스포머 아키텍처를 제안하며, 기존의 자기회귀적 토큰 인터페이스를 유지합니다. 이 모델은 어텐션 및 피드포워드 서브레이어를 양자 인코더 블록 등으로 대체하여 QNLP 시퀀스 모델링을 수행합니다. 평가 결과, 고전적 트랜스포머 기준선이 더 정확하고 안정적인 성능을 보였습니다.
9월 17일0
arXivAI 번역논문
뉴런 약화(Weakening Neurons): 트랜스포머의 입력-출력 기능성 분석
본 논문은 LLM에서 GLU 기반 뉴런의 입력 및 출력 동작을 분석하고, 코사인 유사도를 이용해 '약화 뉴런(weakening neuron)'이라는 개념을 제안합니다. 이 연구를 통해 약화 뉴런이 주로 후기 레이어에 나타나며 모델 동작에 큰 영향을 미치고, 게이트 값이 음수일 때도 강력한 기능성을 가짐을 밝혀냈습니다.
9월 17일1
arXivAI 번역논문
무엇이 RL 메모리 에이전트를 학습시키는가: 메모리 증강 QA에서의 커리큘럼 효과에 관한 실증적 연구
외부 메모리를 사용하는 LLM 에이전트 학습 시 커리큘럼 구성이 성능에 미치는 영향을 실증적으로 분석한 연구입니다. 혼합 벤치마크 학습이 가장 높은 성능을 보였으며, 단일 GPU 환경에서 GRPO를 사용할 때의 보상 함수 설계 전략을 제시합니다.
5월 25일1
arXivAI 번역논문
X로서 Y를 수행하라: 지시어 튜닝된 LLM에서 페르소나와 태스크가 결합하는 방식
역할 프롬프트에서 페르소나와 태스크가 잔차 스트림 내에서 선형적으로 분해된다는 사실을 발견했습니다. 하지만 페르소나 효과는 단일 벡터로 압축될 수 없으며, 생성 과정 전반에 걸쳐 어텐션 메커니즘을 통해 분산되어 작용함을 증명했습니다.
5월 25일1
arXivAI 번역논문
서버는 무엇을 보는가? 분할 추론 (Split Inference) 시 대규모 언어 모델 (LLMs)의 개인정보 유출 이해
분할 추론(Split Inference) 환경에서 LLM의 중간 활성화 값을 통해 클라이언트 입력을 재구성할 수 있는 보안 취약성을 분석합니다. 새로운 공격 기법인 ActInv와 취약성 지표인 PAF를 제안하며, 이를 방어하기 위한 PriPert 방법론을 제시합니다.
5월 25일1
arXivAI 번역논문
자기 개선형 인컨텍스트 러닝 (Self-Improving In-Context Learning)
테스트 시점에 퓨샷 프롬프트의 연속적 임베딩을 최적화하여 인컨텍스트 러닝(ICL) 성능을 개선하는 새로운 방법을 제안합니다. 로그 확률을 활용한 자기 지도 학습 기반의 신뢰도 대리 지표를 통해 파인튜닝 없이도 모델의 추론 능력을 향상시킵니다.
5월 25일1
arXivAI 번역논문
AraHopeCorpus: 아랍어 소셜 미디어 위기 담론 내 희망적 발화(Hope Speech)를 위한 주석 가이드라인 및 데이터셋
가자 지구 전쟁 관련 YouTube 댓글 10,000개를 분석하여 아랍어 희망적 발화(Hope speech)를 분류한 AraHopeCorpus 데이터셋을 소개합니다. 이 데이터셋은 종교적 격려와 연대 등 건설적인 디지털 담론 연구를 위한 주석 프레임워크를 제공합니다.
5월 25일1
arXivAI 번역논문
수어 대화에서의 감정 인식
수어 대화의 맥락을 반영한 감정 인식 연구를 위해 eJSL Dialog 데이터셋을 제안합니다. 기존의 고립된 문장 중심 데이터셋의 한계를 극복하고, 멀티모달 대화 아키텍처를 통한 체계적인 벤치마킹을 수행했습니다.
5월 25일1
arXivAI 번역논문
정치적 담론을 위한 거대 언어 모델의 문화적 적응 (Cultural Adaptation)
본 논문은 LLM을 정치적 담론 분석에 활용할 때 발생하는 문화적 편향 문제를 다룹니다. 영어 중심 데이터의 한계를 극복하기 위해 번역, 담론, 온톨로지 수준의 문화적 적응 방법론과 새로운 평가 매트릭스를 제안합니다.
5월 25일1
arXivAI 번역논문
정확성에서 선호도로: 개인화된 에이전트 강화학습 (Personalized Agentic Reinforcement Learning)을 위한
사용자마다 다른 선호도와 계획 전략을 반영하기 위한 개인화된 에이전트 강화학습(PAR) 프레임워크를 제안합니다. PARPO 알고리즘을 통해 작업 품질과 개인 선호도 보상을 분리하여 학습 안정성을 높이고, PSGM 메모리를 통해 개인화된 기술 검색을 지원합니다.
5월 25일1
arXivAI 번역논문
음향 모음 역동성(acoustic vowel dynamics)의 변이 원인으로서의 조음 전략
본 연구는 음향 모음 역동성이 개별 화자의 조음 전략에 의해 결정된다는 사실을 입증합니다. 초음파 혀 영상 데이터를 통해 구개 모음 /i/ 생성 시의 혀 모양과 포먼트 전이 사이의 상관관계를 분석하였습니다.
5월 25일1
arXivAI 번역논문
대규모 언어 모델(LLM)은 얼마나 인간과 유사한가? 레지스터 인지 언어 평가 프레임워크
LLM이 생성한 텍스트의 언어적 유사성을 평가하기 위해 코퍼스 언어학 관점의 새로운 프레임워크를 제안합니다. MMD와 67가지 어휘-문법적 특징을 활용하여 문맥(register)에 따른 인간 유사성을 측정하며, 모델 크기보다 레지스터 적합성이 중요함을 밝힙니다.
5월 25일1
arXivAI 번역논문
데이터 제약 조건 하에서의 어휘적 개입을 통한 다국어 지식 전이
데이터가 부족한 언어를 위해 고자원 언어의 지식을 효과적으로 전이하는 LINK 방법론을 제안합니다. 이중 언어 어휘집을 활용한 어휘 치환 방식을 통해 추가 학습 비용 없이 다국어 모델의 성능과 학습 속도를 크게 개선했습니다.
5월 25일1
arXivAI 번역논문
방어하기 더 어려워진 공격: 암시적 강화 및 은폐 재작성을 통한 중국어 독성 공격 연구
중국어 환경에서 LLM의 독성을 평가하기 위한 새로운 프레임워크인 CITA를 제안합니다. CITA는 유해 의도 학습, 암시성 강화, 은폐 변형의 3단계를 통해 기존 탐지기를 우회하는 공격을 수행하며, 이를 통해 방어 모델의 강건성을 높이는 연구를 다룹니다.
5월 22일1
arXivAI 번역논문
GHI: 속성 기반 감성 분석 (ABSA)을 위한 조건부 하이퍼그래프 인시던스 기반 Graphormer
GHI는 속성 기반 감성 분석(ABSA)을 위해 설계된 조건부 하이퍼그래프 인시던스 기반 Graphormer 프레임워크입니다. 토큰과 하이퍼엣지 간의 관계를 활용하여 구조적 추론을 강화하며, 적은 파라미터로도 대규모 모델에 근접하는 성능을 보여줍니다.
5월 22일2
arXivAI 번역논문
안전 분류기(Safety Classifiers)에 대한 경계 타겟 멤버십 추론 공격 (Membership Inference Attacks)
안전 분류기가 민감한 데이터로 학습될 때 발생하는 개인정보 보호 취약점을 분석한 연구입니다. 경계 타겟 선택 전략을 통해 모델의 암기 현상을 이용한 멤버십 추론 공격(MIA) 성능을 기존보다 3.5배 향상시켰습니다.
5월 22일1