Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
본 페이지의 콘텐츠는 AI가 공개된 소스를 기반으로 자동 수집·요약·번역한 것입니다. 원 저작권은 각 원저작자에게 있으며, 각 게시물의 “원문 바로가기” 링크를 통해 원문을 확인할 수 있습니다. 저작권자의 삭제 요청이 있을 경우 신속히 조치합니다.
본 연구는 지식 그래프를 텍스트로 변환하는(KG-to-text) 최신 LLM의 성능을 실증적으로 분석했습니다. 참조 기반 및 그래프 기반 두 가지 평가 지표를 사용하여 모델들을 비교한 결과, LLM은 기존 파인튜닝 모델 대비 전반적인 성능 향상을 보였습니다. 특히 오류 검출에 강점을 가진 그래프 기반 지표에서 우위를 입증하며, 두 평가 방식이 포착하는 품질 측면의 차이를 제시했습니다.
스페인 MIR 전공의 시험을 통해 개방형 LLM 네 가지를 테스트한 연구입니다. 모델들은 상위권에 들었으나 여전히 합격까지는 거리가 있었습니다. 의료 미세 조정은 과신만 줄였고, 임상적 추론이나 맥락 이미지 사용 측면에서 명확한 한계가 발견되었습니다.
본 논문은 블랙박스 LLM 공격을 위해 연속 잠재 공간 프레임워크를 활용합니다. 기존의 무작위 매핑으로 인한 부자연스러운 프롬프트 문제를 해결하기 위해, 연구진은 연속 확산 언어 모델(dLLM)을 결합하는 방법을 제시했습니다. 이 접근 방식은 자연스러운 프롬프트를 기반으로 위험 추정치를 제공하며, RareTrap 및 ThinkTrap 설정에서 낮은 퍼플렉시티를 확인했습니다.
본 연구는 대규모 언어 모델(LLMs)에서 은유 표현을 탐지하고 제어하는 방법을 제시합니다. 기계론적 해석 가능성 기술을 활용하여 LLM의 인과적 부분 공간을 식별했으며, 이를 통해 분류 및 생성 작업 모두에서 출력의 은유성을 성공적으로 조향할 수 있음을 입증했습니다.
본 연구는 이중 언어 모델(Bilingual LM)을 활용하여 제2언어 읽기 시 독자의 모국어(L1)가 미치는 영향을 조사했습니다. 다양한 L1 배경의 독자들의 시선 추적 데이터를 분석한 결과, 독자의 L1과 일치하도록 학습된 이중 언어 모델이 L2 읽기 시간 예측 능력을 향상시키는 것을 입증했습니다. 이는 이중 언어 LM이 언어 간 전이 효과를 포착함을 보여줍니다.
HiddenLens는 자연어 기반의 소프트웨어 요구사항에 숨겨진 가정을 탐지하고, 분류하며, 해결하기 위해 설계된 다층 LLM 프레임워크입니다. 이 프레임워크는 BERT와 여러 단계의 LLM 추론을 결합하여 모호성을 넘어선 깊이 있는 분석을 수행합니다. HiddenLens Corpus (HLC)라는 새로운 데이터셋과 함께 제시되어 소프트웨어 요구사항 명확화 분야에 기여했습니다.
엔터프라이즈 에이전트가 문서를 기반으로 작동할 때, 일반적인 수집(ingestion) 과정에서 텍스트의 시각적 서식 정보(하이라이트, 색상 등)를 손실하는 문제가 발생합니다. 이로 인해 에이전트는 작성자가 의도한 의미를 놓치고 자신감 있게 틀린 답변을 내놓게 됩니다. 본 연구는 이러한 서식 기반 단서가 에이전트의 정확성에 미치는 영향을 분석하고 해결책을 제시합니다.
본 논문은 불투명한 AI 텍스트 탐지기를 인간이 이해할 수 있는 개념으로 변환하는 새로운 파이프라인을 제시합니다. SAE(sparse autoencoders)를 활용하여 탐지기의 잔여 스트림에 직접 훈련시키고, 해석 가능한 특징만을 추출해 경량 분류기를 구축했습니다. 이 방법은 높은 해석성과 더불어 OOD 텍스트에서 강력한 성능을 입증했습니다.
Agent Behavior Map은 공유된 레퍼런스 트래젝토리를 기반으로 LLM 에이전트의 행동 로그-가능도를 나타내는 새로운 방법론입니다. 이 방식은 타겟 에이전트로부터 실제 환경 롤아웃을 요구하지 않으면서도, 좌표 거리와 트래젝토리 KL 간의 관계를 통해 행동적 유사성을 측정하고 성능 예측을 지원합니다.
본 논문은 Uniform diffusion language models (UDLMs)에 선택적 루핑(selective looping)을 적용하여 모델의 훈련 효율성을 개선하는 방법을 제안합니다. 이 방법은 기존 UDLM과 동일한 성능을 유지하면서도 최대 2.8배 적은 FLOPs로 학습할 수 있게 합니다. 또한, 최적의 추론 효율성을 위해 작은 루프 카운트를 더 자주 샘플링하는 전략도 제시했습니다.
본 논문은 대규모 다국어 모델의 높은 배포 비용 문제를 해결하기 위해, 원시 텍스트에서 작동하는 간결한 베트남어 인코더 패밀리인 GoiBERT를 제안합니다. GoiBERT는 두 개의 교사(teacher)로부터 지식을 증류하여 학습되었으며, 다양한 NLP 작업에서 강력한 성능을 입증했습니다.
본 논문은 기존 시그니처 엔진의 한계와 생성 모델의 느린 속도 문제를 해결하기 위해, 타입 지정되고 보정된 결정 프리미티브를 출력하는 소규모 다중 헤드 네트워크 'VX-One'을 제안합니다. VX-One은 경계 분류(Perimeter triage)에서 높은 탐지율과 효율성을 보여주었으며, 기존 모델들과의 비교 분석 및 성능 평가 결과를 제시했습니다.
본 연구는 P와 NP-완전(NPC) 문제 쌍의 난이도 차이를 테스트하기 위해 P2NPCBench라는 새로운 벤치마크를 제안합니다. 적대적 다중 에이전트 프레임워크인 AgentGAN을 사용하여, 기존 모델들이 실패하는 방식으로 문제를 재작성하여 총 2,114개의 난이도가 높아진 진술을 생성했습니다. 테스트 결과, 모든 평가 모델은 NPC 문제에서 P 쌍둥이보다 현저히 낮은 성능을 보였습니다.
Environment Duels는 LLM의 능력을 평가하는 동적 에이전트 기반 벤치마크입니다. 이 시스템은 모델들이 특권적인 힌트를 가진 환경을 작성하고, 그 안에서 문제 해결 능력을 동시에 측정합니다. 연구 결과, 강력한 문제 해결 능력과 환경 생성 능력은 별개이며, 작은 모델도 상호작용을 통해 큰 학습 효과를 얻는다는 점이 밝혀졌습니다.
기존 순차 추천 모델들은 모든 아이템에 고정된 계산 예산을 할당하는 비효율성을 가집니다. 본 논문은 아이템별로 필요한 깊이가 다르다는 점을 지적하며, 이를 해결하기 위해 LoopRec이라는 적응형 재귀 구조를 제안합니다. LoopRec은 경량 게이트를 통해 각 아이템의 처리 필요성에 따라 동적으로 계산을 종료하거나 계속 진행하여 효율성과 성능을 모두 높입니다.
본 논문은 외부 데이터 없이도 LLM이 자체적으로 장문맥 추론 능력을 향상시킬 수 있는 LongZero를 제안합니다. 기존의 RL 방식들이 비용과 데이터 부족 문제에 직면했던 것과 달리, LongZero는 모델 스스로 질문/답변을 구조화하고 이를 다중 문서 문맥으로 확장하는 다단계 추론 작업을 수행합니다. 실험 결과, LongZero가 다양한 장문맥 벤치마크에서 우수한 성능을 보여주었습니다.
본 논문은 POPE 벤치마크를 사용하여 VLM(Vision-Language Model)의 환각 평가에 대한 체계적인 감사를 수행했습니다. 연구진은 기존 보고된 F1 점수가 판독 방식(readout choice)과 토큰 로짓 처리 방식의 차이로 인해 과대평가되었음을 발견했습니다. 특히, 공백 바이트 처리가 모델 출력에 혼란을 야기하는 프로토콜 수준의 문제를 지적하며, 정확한 평가를 위해서는 일관된 판독 및 정밀도 기준 확립이 필수적임을 강조합니다.
본 논문은 대형 추론 모델(LRMs)의 과도한 사고(overthinking) 문제를 해결하기 위해 '일관성 인식 로짓 마스킹(CALM)'이라는 훈련 불필요 디코딩 개입 방법을 제안합니다. CALM은 단계 경계의 행동 전환 지점(ATP) 토큰에 로짓 마스킹을 적용하여 중복적인 전이 추론을 효과적으로 억제합니다. 실험 결과, CALM은 CoT 추론 시 토큰 소비를 크게 줄이는 동시에 성능 유지 및 정확도 향상을 입증했습니다.
본 논문은 장문맥 언어 모델(LCLM)의 세 가지 핵심 능력인 리콜, 상태 추적, 패턴 학습을 종합적으로 평가하는 새로운 벤치마크 LEAPS를 소개합니다. LEAPS는 에이전트 워크플로우 및 복잡한 예측 능력을 측정하며, 기존 벤치마크가 간과했던 상태 추적 및 패턴 학습의 중요성을 강조합니다.
EvoSkill v2는 에이전트가 주어진 스킬(지침)을 수정하는 세 가지 시스템입니다. 이는 벤치마크 어댑터와 상태 기반 코딩 에이전트를 활용하여, 솔버의 학습 과정을 읽고 매 에포크마다 스킬을 재작성합니다. 이 방식은 기존 최적화 기법보다 높은 성능과 효율성을 보여주며, 상대적으로 낮은 모델도 스스로 개선할 수 있게 합니다.