Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
본 페이지의 콘텐츠는 AI가 공개된 소스를 기반으로 자동 수집·요약·번역한 것입니다. 원 저작권은 각 원저작자에게 있으며, 각 게시물의 “원문 바로가기” 링크를 통해 원문을 확인할 수 있습니다. 저작권자의 삭제 요청이 있을 경우 신속히 조치합니다.
본 연구는 세 가지 오픈소스 이미지 편집 모델(Qwen-Image-Edit, FireRed-Image-Edit, LongCat-Image-Edit)을 사용하여 파인튜닝 없이도 제로샷 비전 예측 능력을 체계적으로 평가했습니다. 단안 깊이 추정, 표면 법선 추정, 의미론적 분할 등 다양한 기하학적 및 의미론적 임무에서 이 모델들이 우수한 성능을 보였습니다. 특히 FireRed-Image-Edit는 표면 법선 추정에서 기존 SOTA 모델을 능가했으며, Qwen-Image-Edit와 LongCat-Image-Edit 역시 깊이 추정 및 분할 작업에서 강력한 제로샷 성능을 입증했습니다.
본 기사는 SemEval-2026 Task 8 (MTRAGEval)에서 우승한 'Judge-Orchestrated LLM 앙상블' 시스템을 소개합니다. 이 시스템은 GPT-4o-mini 판사를 활용하여 최적의 후보를 선택하는 두 가지 프롬프트 변형이 포함된 총 7개의 이종(heterogeneous) LLM으로 구성되어 있습니다. 이를 통해 26개 팀 중 1위를 차지하며 강력한 성능을 입증했습니다. 또한, 비용 효율적이면서도 강력한 7B 도메인 적응 모델인 Meno-Lite-0.1을 제시하고, MTRAGEval의 분석을 통해 주석(annotation)의 한계와 향후 개선 방향을 논의합니다.
본 연구는 대규모 언어 모델(LLM)의 신뢰성을 높이기 위한 불확실성 정량화(UQ) 기법으로, 샘플링에 의존하지 않는 그래디언트 기반 방법을 제안합니다. 기존 방법들이 파라미터 공간에서 작동했던 것과 달리, 본 연구는 의미 공간(semantic space)에서의 그래디언트를 고려하는 '의미 보존 점수(SPS)'를 도입했습니다. 이를 통해 LLM이 의미적으로 동등한 입력 변화에도 안정적인 출력을 유지해야 한다는 직관을 구현하며, 효율적이고 효과적인 불확실성 추정 방법을 제시합니다.
본 논문은 대형 언어 모델(LLM)이 입력 프롬프트를 의미적으로 변형(Paraphrase)할 때, 원래 요청했던 출력 형식과 구조를 유지하지 못하는 '출력 모드 붕괴' 현상을 발견했습니다. 특히 온도가 0인 경우에도 이러한 실패가 발생하며, 이는 닫힌 형식(closed-form) 답변이 필요한 작업에서 심각한 문제를 야기합니다. 연구진은 이를 측정하기 위해 대규모 데이터셋 PARACONSIST를 구축하고 '의미 일관성 점수'를 제안했습니다.
본 논문은 시간 지식 그래프(Temporal Knowledge Graph, TKG) 추론의 핵심 과제인 역사적 증거와 진화적 역동성을 통합적으로 활용하는 새로운 프레임워크 CHE-TKG를 제안합니다. 기존 방법들이 이 두 출처 중 하나에만 집중했던 한계를 극복하기 위해, CHE-TKG는 두 관점을 명시적으로 분리하고 함께 모델링하여 상호 보완적인 예측 신호를 학습합니다. 이를 통해 장기적 구조와 단기 변화 모두를 포착하며 TKG 추론 성능을 향상시킵니다.
본 논문은 도구 통합 Text-to-SQL 파싱의 크레딧 할당 문제를 해결하기 위해 FineStep이라는 새로운 프레임워크를 제안합니다. 기존 강화학습 접근법은 최종 결과물에만 보상을 집중하여, 중간 단계가 비효율적이거나 오류를 포함해도 모델이 동일한 보상을 받는 근본적인 문제가 있었습니다. FineStep은 독립적인 과정 보상 설계와 각 추론 단계의 가치를 정량화하는 단계 수준 크레딧 할당 메커니즘을 도입하여, 모델이 효율적이고 일반화된 방식으로 SQL을 생성하도록 유도합니다.
Gyan은 기존 트랜스포머 기반 대규모 언어 모델(LLM)의 한계점, 즉 구성적 문맥 포착 실패, 환각 현상, 높은 컴퓨팅 자원 요구 등의 문제를 해결하기 위해 설계된 새로운 설명 가능한 신경 기호 언어 모델입니다. 이 모델은 수사적 구조 이론, 의미역할 이론 등 지식 기반 계산언어학에 기반을 두어 완전한 구성적 문맥을 포착하며 '세계 모델'로 확장하여 인간의 이해를 모방합니다. Gyan은 특히 신뢰성과 투명성이 필수적인 임무 중요(mission critical) 사용 사례에서 높은 성능과 신뢰성을 제공할 수 있음을 입증했습니다.
본 논문은 다중모달 대형 언어 모델(MLLMs)의 환각 문제를 해결하기 위해 '불확실성 인지 탐색적 직접 선호 최적화(UE-DPO)'라는 새로운 방법을 제안합니다. 이 방법은 토큰 수준의 인식적 불확실성을 활용하여, 모델이 자신의 지식적 결함을 스스로 발견하고 적극적으로 수정하도록 유도하는 것이 핵심입니다. UE-DPO는 불확실성 인지 탐색 강도를 기반으로 시각적 결핍 토큰에 대한 학습 압력을 강화함으로써, MLLMs의 정렬(alignment)을 더욱 깊고 견고하게 만듭니다.
본 연구는 알려진 원시 요소들의 새로운 조합을 올바르게 해석하는 '구성적 일반화' 문제를 해결하기 위해 강화학습(RL)의 적용 가능성을 탐구했습니다. 기존의 감독식 미세 조정 방식은 전역적인 구성 구조를 포착하는 데 한계가 있어, 본 연구는 최종 결과에 대한 피드백을 활용하는 그룹 상대 정책 최적화(GRPO) 프레임워크를 제안합니다. 실험 결과, RL이 단순한 이진 보상뿐만 아니라 추가적인 구성 피드백을 제공하는 복합 보상을 통해 감독 학습보다 구성적 일반화를 효과적으로 개선함을 입증했습니다.
본 논문은 데이터가 부족한 희소 관측 환경에서 대규모 언어 모델(LLM)을 대리 모델로 활용하는 방식을 연구합니다. LLM이 유도하는 '대리 신념'이 프롬프트 텍스트와 쿼리 프로토콜에 크게 의존함을 밝히고, 이를 측정하기 위한 불확실성 정렬 기준을 제안했습니다. 실험 결과, 구조화된 프롬프트를 사용하면 효과적인 사전 확률로 작용하며, 다양한 쿼리 방식(POINTWISE, JOINT)과 순차적 증거는 비모노토닉하고 순서에 민감한 신뢰도 업데이트를 유발함을 보여주었습니다.
본 기술 기사는 기존의 직접 선호 최적화(DPO)가 가진 유창성 편향(verbosity bias) 문제를 해결하기 위해 RLearner-LLM이라는 하이브리드 학습 프레임워크를 제안합니다. 이 방법은 DeBERTa-v3 NLI 신호와 verifier LLM 점수를 결합하여 자동화된 선호 파이프라인을 구축함으로써, 인간 주석에 의존하지 않고 논리적 정확성(NLI)과 유창성을 동시에 개선하는 것을 목표로 합니다. 실험 결과, RLearner-LLM은 다양한 학술 도메인 및 소형 모델에서 SFT 대비 높은 NLI 향상률을 보였으며, 이는 LLM이 지식 집약적인 생성 작업에 필요한 논리적 추론 능력을 효과적으로 강화했음을 입증합니다.
본 논문은 현재의 LLM 벤치마크가 사회과학 과제를 충분히 포함하지 못하여 평가와 연구 발전에 한계를 초래한다고 지적합니다. 벤치마크는 AI 개발에 필수적인 요소이지만, 사회과학 분야의 복잡하고 문맥에 민감한 데이터셋이 부족합니다. 이에 저자들은 계산 사회과학자들이 주석한 데이터셋으로 구성된 새로운 벤치마크인 'BenCSSmark'를 제안하며, 이를 통해 LLM의 일반화 능력과 사회적 관련성을 높이고 AI 시스템의 투명한 발전을 촉진하고자 합니다.
본 논문은 혁신의 출현이 특허 데이터의 집단적인 언어적 변화를 통해 예측될 수 있음을 제시합니다. 연구진은 국제 특허 분류(IPC) 코드를 단어로 취급하고 트랜스포머 기반 모델인 TechToken을 개발하여, 이 코드 임베딩 간의 문맥 유사성을 측정함으로써 기술적 조합의 초기 신호를 포착하는 방법을 제안했습니다. 이를 통해 수천 개의 특허에 걸친 집단적인 변화를 분석하여 미래의 혁신을 높은 정확도로 예측할 수 있음을 입증했습니다.
본 논문은 대형 언어 모델(LLM)의 환각 현상을 분석하며, 특히 주의 메커니즘을 통해 정보 흐름의 방향성(운송 능력)을 진단하는 기존 스펙트럼 방법론의 근본적인 한계를 지적합니다. 연구진은 특정 주의 연산자가 구조적으로 방향에 무관함을 수학적으로 증명하고, 비대칭 계수를 방향 제어 변수로 설정하여 인과 관계를 정량화했습니다. 이 결과를 바탕으로, 모델의 병목 현상(bottleneck)과 확산(diffusion) 같은 실패 모드가 단순히 크기만 다른 것이 아니라 근본적인 '극성' 차이를 가지며, 이를 통해 해석 가능한 진단 신호를 제공할 수 있음을 보여줍니다.
본 기술 기사는 에이전트 기억 시스템에 대한 기존 접근 방식의 한계를 지적하며, 'True Memory'라는 새로운 검색 중심 아키텍처를 제안합니다. True Memory는 저장 스키마 대신 정문(event)에 초점을 맞춘 다단계 검색 파이프라인을 사용하여, 쿼리가 발생하기 전에 폐기되는 콘텐츠 손실 문제를 해결합니다. 이 시스템은 단일 SQLite 파일로 상용 CPU에서 실행 가능하며, 다양한 대화 및 장기 기억 평가 벤치마크에서 기존의 최신 모델들보다 높은 성능을 입증했습니다.
본 연구는 50개의 대형 언어 모델(LLM)을 대상으로 다양한 심리측정 설문지를 적용하여 LLM들이 공유하는 주요 심리측정적 변동 축을 식별했습니다. 분석 결과, 모델 간의 가장 지배적인 차원은 전통적인 성격 특성보다는 '현상적 경험의 원천으로서 자신을 제시하는 정도'와 '행동 반응 시스템으로 자신을 제시하는 정도'를 구분하는 Pinocchio 축($ ext{Pinocchio Axis}$)임이 밝혀졌습니다. 이 축은 모델이 자신의 존재 방식을 어떻게 자기 표현(self-represent)하는지에 대한 훈련 기반의 경향성을 반영하며, 이는 후속 미세 조정 과정의 영향을 강하게 받음을 시사합니다.
본 기술 기사는 SemEval-2026 과제 11(대규모 언어 모델에서 내용과 형식 추론 분리)에 제출된 시스템을 소개합니다. 이 시스템은 소수 파라미터의 작은 LLM과 기호 증명기를 결합한 효율적인 모듈형 신경 기호 접근법을 사용합니다. 주요 구성 요소로는 자연어 시론을 일차 논리(FOL)로 변환하는 LLM 기반 파서, 자동 정리 증명기, 그리고 다국어 처리를 위한 기호 검색 컴포넌트가 포함됩니다.
본 기술 기사는 자연어 처리(NLP) 분야에서 주로 사용되던 임베딩 패러다임을 표 데이터(tabular data)에 적용하는 어려움을 지적하며 시작합니다. 이를 해결하기 위해, 연구진은 표 이해 능력을 평가하는 종합 벤치마크인 TabBench를 소개하고, 표 분류와 검색을 단일 공유 임베딩 공간에서 통합한 새로운 모델 TabEmbed를 제안했습니다. TabEmbed는 대규모 대비 학습과 정교한 네거티브 마이닝 기법을 활용하여 표의 구조적 및 수치적 뉘앙스를 효과적으로 포착하며, 기존 최첨단 모델들을 능가하는 성능을 보여주었습니다.
Conceptors는 기존 LLM 제어 방식인 활성화 기반 스티어링의 한계를 극복하기 위해 제안된 새로운 개념적 스티어링 방법론입니다. 이는 단일 방향 대신, 개념 전체의 다차원 부분공간을 보존하는 부드러운 투영 행렬(soft projection matrices)을 사용하여 LLM의 행동을 제어합니다. Conceptors는 닫힌 형태의 논리 연산(AND, OR, NOT)을 지원하며, 여러 의미론적 차원에서 개념 분리성을 평가하고 다차원 레이어에서 높은 성능과 안정성을 입증했습니다.
본 논문은 LLM 정렬의 핵심 요소인 보상 모델(Reward Models)이 단순히 지시사항 준수 여부를 넘어 사회적 바람직성을 얼마나 잘 포착하는지 분석합니다. 기존 평가는 이러한 사회적 측면을 간과하여 중요한 '사회적 정렬 실패'를 놓칠 수 있습니다. 연구진은 편향, 안전성, 도덕성 등 네 가지 사회적 영역으로 벤치마킹 범위를 확장하고 새로운 프레임워크를 제시했습니다. 그 결과, 현재의 보상 모델들은 강력한 사회적 지능에 미치지 못하며, 종종 사회적으로 부적절한 응답을 선호하는 경향과 체계적인 편향 분포를 보이는 것으로 나타났습니다.