Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
본 페이지의 콘텐츠는 AI가 공개된 소스를 기반으로 자동 수집·요약·번역한 것입니다. 원 저작권은 각 원저작자에게 있으며, 각 게시물의 “원문 바로가기” 링크를 통해 원문을 확인할 수 있습니다. 저작권자의 삭제 요청이 있을 경우 신속히 조치합니다.
본 연구는 긴 문맥 처리 시 KV 캐시 효율을 높이는 블록 어텐션(Block attention)의 한계를 극복하기 위해 자동 세그멘테이션과 블록 증류(Block distillation) 기법을 제안합니다. SemanticSeg 데이터셋을 활용해 텍스트를 의미 있는 단위로 자동 분할하는 경량 세그멘터를 학습시키고, 동결된 풀 어텐션 모델을 교사 모델로 사용하는 효율적인 학습 프레임워크를 구축했습니다. 이를 통해 블록 어텐션 모델이 풀 어텐션에 근접한 성능을 유지하면서도 실용적인 확장성을 가질 수 있음을 입증했습니다.
AI 감정 동반자의 안전성과 사용자 유대감 사이의 상충 관계를 해결하기 위해 단계적 개입 프로토콜인 SLIP과 신호 분류 체계인 ETHICS 프레임워크를 제안합니다. 연구 결과, 모델의 성능이 향상됨에 따라 위기 상황에 대한 탐지율은 개선되었으나, 사용자의 상태를 병리화하지 않으려는 원칙과 안전 조치 사이의 설계적 긴장이 여전히 존재함을 확인했습니다.
본 연구는 기존 Decoder-only LLM 중심의 강화학습 미세 조정 연구를 넘어, 인코더-디코더(Seq2Seq) 구조인 NLLB-200 모델에 GRPO를 적용한 사례를 다룹니다. 병렬 데이터 없이 LaBSE와 COMET-Kiwi를 활용한 하이브리드 참조 없는 보상 방식을 통해 13개 언어에서 일관된 성능 향상을 확인했습니다. 특히 데이터가 부족한 언어일수록 보상 판별력이 높아져 더 큰 성능 이득을 얻는다는 패턴을 입증했습니다.
본 연구는 LLM을 활용한 교차 문화 설문 시뮬레이션 시, 기존의 사회인구학적 페르소나 방식이 가진 한계를 극복하기 위해 가치 기반 페르소나 구축 방법을 제안합니다. 텍스트 기술어를 통해 핵심 문화적 가치를 포착하고 보정 절차를 도입함으로써, 국가 간 예측 오차를 줄이고 과소 대표된 인구 집단의 응답 다양성을 향상시켰습니다.
LLM-as-a-judge 패러다임에서 출력 형식의 변화가 평가 결과의 불일치를 유발하는 내부 메커니즘을 분석한 연구입니다. PEAP 기법을 통해 Gemma-3, Qwen2.5, Llama-3 모델 내에서 판단을 담당하는 공통된 '잠재 평가자(Latent Evaluator)' 서브 그래프를 발견했습니다. 연구 결과, 모델은 공유된 계산 경로를 통해 판단 신호를 생성하지만, 이를 출력 형식에 맞게 매핑하는 과정에서 형식 특화적인 브랜치가 개입하여 불일치가 발생함을 밝혀냈습니다.
본 논문은 스마트 미터링, 생성형 AI, 그리고 양자 영감 조합 최적화 기술을 결합하여 스마트 에너지 인프라를 관리하는 통합 프레임워크를 제안합니다. 이 프레임워크는 지능형 가스 배분, 공공요금 청구, 탄소 분석 등 에너지 유틸리티 기업의 핵심 운영 효율성을 높이는 데 중점을 둡니다.
기존의 S2ST 시스템이 언어 정보를 단순한 평면 임베딩으로 처리하여 언어 간 구조적 관계를 놓치는 문제를 해결하기 위해 S2ST-Omni 2 프레임워크를 제안합니다. 이 모델은 유형론적 사전 정보를 활용하여 계층적 언어 인코딩, 동적 게이트 방식의 Dual-CTC, 유형론 인지 LLM 프롬프팅을 통해 다국어 적응 성능을 높였습니다. 실험 결과, 적은 양의 데이터로도 우수한 번역 성능을 보이며 데이터 효율적인 다국어 S2ST 가능성을 입증했습니다.
본 연구는 LLM의 세법 추론 능력이 실제 추론인지 아니면 데이터 오염에 의한 결과인지 분석합니다. 연구 결과, 단일 LLM보다 법률 조문을 형식적 표현으로 변환하여 기호적 솔버와 결합한 신경-기호적(Neuro-Symbolic) 하이브리드 시스템이 미학습 문서에 대한 일반화와 신뢰성 측면에서 더 우수함을 입증했습니다.
DebiasRAG는 대규모 언어 모델(LLMs)의 사회적 편향 문제를 해결하기 위해 제안된 튜닝 프리(tuning-free) 방식의 RAG 프레임워크입니다. 미세 조정 없이도 모델의 고유한 표현 능력을 보존하면서, 쿼리 특정적인 편향 제거 컨텍스트를 생성하고 재순위화하여 공정성을 높입니다. 이를 통해 인종, 성별, 연령 등과 관련된 편향된 응답을 효과적으로 완화합니다.
본 연구는 자발적 발화 데이터의 부족과 클래스 불균형 문제를 해결하기 위해 LLM 기반의 데이터 증강 프레임워크를 제안합니다. GPT-5를 활용해 서면 응답을 구어체 독백으로 변환하여 합성 데이터를 생성하고, 이를 통해 Hasegawa Dementia Scale 점수 예측 성능을 향상시켰습니다. 특히 유사도 가이드 방식의 증강 전략이 소수 그룹인 저점수 참가자에 대한 예측 오차를 효과적으로 감소시킴을 입증했습니다.
기계 생성 텍스트(MGT) 탐지 시 발생하는 토큰 수준 점수의 무작위성 편향 문제를 해결하기 위한 새로운 프레임워크를 제안합니다. 마르코프 정보 보정 모듈을 통한 국소적 관계 모델링과 논리 규칙 기반의 전역적 관계 추론을 결합하여 탐지 성능을 높였습니다. 실험 결과, 낮은 계산 비용으로도 다양한 LLM 및 도메인 환경에서 뛰어난 탐지 성능을 입증했습니다.
SGR은 LLM이 복잡한 논리적 추론 과정에서 발생하는 노이즈와 사실 오류를 줄이기 위해 제안된 단계적 추론 프레임워크입니다. 외부 지식 베이스에서 질문에 특화된 서브그래프를 생성하고, 이를 기반으로 모델이 구조화된 정보를 따라 점진적으로 추론하도록 유도합니다. 실험 결과, SGR은 기존 베이스라인 대비 추론 정확도와 사실적 신뢰성 측면에서 유의미한 성능 향상을 보여주었습니다.
LLM 에이전트가 환경 정보를 충분히 습득하기 전 행동을 결정하는 '조기 착취(Premature Exploitation)' 문제를 해결하기 위해 Explore-then-Act 패러다임을 제안합니다. 이 방식은 에이전트가 먼저 상호작용 예산을 통해 환경 지식을 습득한 후 작업을 수행하도록 하여, 자율적 탐색 능력을 강화하고 일반화 성능을 높입니다.
Google의 AntiGravity 코딩 에이전트와 LLM 기반 트리 탐색 알고리즘(ERA)을 결합하여 고효율 3차원 태양광(3DPV) 구조체를 자율적으로 설계하는 연구를 소개합니다. 이 시스템은 물리적 제약 조건을 반영하여 알고리즘적 보상 해킹을 방지하며, 기존 평면형 패널보다 높은 에너지 밀도를 가진 최적의 구조를 생성합니다. 이를 통해 AI 코딩 시스템이 과학적 가설 생성 및 설계 최적화 도구로 활용될 수 있는 가능성을 제시합니다.
본 연구는 적대적 POMDP 환경인 CybORG CAGE-2를 대상으로 복합 LLM 에이전트의 설계 요소가 성능과 비용에 미치는 영향을 분석했습니다. 실험 결과, 복잡한 숙고(Deliberation) 도구를 남용하기보다 프로그래밍 방식의 상태 추상화와 효율적인 작업 분해에 집중하는 것이 비용 대비 성능(RPTS) 측면에서 훨씬 유리함을 입증했습니다.
배전 유틸리티를 위해 요금 청구, 탄소 배출 분석, 부하 계획을 통합한 엔드 투 엔드 생성형 AI 프레임워크를 제안합니다. 이 시스템은 구조화된 수치를 자연어 명세서로 변환하는 생성형 AI 에이전트와 트랜스포머 기반의 소비 예측기를 포함하여 지속 가능한 자원 최적화를 지원합니다.
임상 의사 결정 지원 시스템(CDSS)의 투명성을 높이기 위해 데이터 출처부터 학습 프레임워크, 평가 프로토콜까지 전 과정을 공개하는 'Fully Open Meditron' 파이프라인을 제안합니다. 이 파이프라인은 임상 의사가 검증한 데이터셋과 엄격한 오염 방지 절차를 포함하며, 다양한 베이스 모델에 적용했을 때 기존 모델보다 뛰어난 의료 성능을 입증했습니다. 특히 Apertus-70B-MeditronFO는 새로운 FO SoTA를 기록하며 완전 개방형 방식의 효용성을 증명했습니다.
본 연구는 뇌 손상으로 인한 실어증 개념을 응용하여 언어 모델(LMs)의 내부 언어 기능 조직을 분석하는 새로운 기법을 제안합니다. 모델 파라미터를 의도적으로 손상시켜 나타나는 증상을 임상적 실어증 지표로 측정하였으며, 그 결과 모델의 구성 요소와 레이어 깊이에 따라 서로 다른 언어적 결함이 나타남을 확인했습니다.
Argus는 심층 연구 에이전트의 효율성을 높이기 위해 Searcher와 Navigator가 협력하는 증거 조립 시스템입니다. 기존의 병렬 롤아웃 방식이 정보의 중복 문제를 겪는 것과 달리, Argus는 증거 그래프를 기반으로 누락된 정보를 전략적으로 수집하여 추론 효율을 극대화합니다. 이를 통해 적은 컨텍스트 토큰을 사용하면서도 기존의 독점 에이전트들을 능가하는 성능을 보여주었습니다.
FORGE는 그래디언트 업데이트 없이 자연어 메모리 진화를 통해 LLM 에이전트의 의사결정 능력을 향상시키는 개체군 기반 프로토콜입니다. 성찰 에이전트가 실패한 경로를 규칙(Rules)이나 예시(Examples)로 변환하고, 성능이 우수한 메모리를 개체군 전체에 전파하는 방식을 사용합니다. 실험 결과, 기존 Reflexion 방식보다 높은 수익률을 기록하며 특히 성능이 낮은 모델의 역량을 효과적으로 보완함을 입증했습니다.