Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
© 2026 Molayo
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
본 페이지의 콘텐츠는 AI가 공개된 소스를 기반으로 자동 수집·요약·번역한 것입니다. 원 저작권은 각 원저작자에게 있으며, 각 게시물의 “원문 바로가기” 링크를 통해 원문을 확인할 수 있습니다. 저작권자의 삭제 요청이 있을 경우 신속히 조치합니다.
OpenAI의 연구를 바탕으로 장기 실행 모델(long-horizon models)이 자율성을 가질 때 발생하는 '표류(drift)' 현상을 분석합니다. 시간이 흐름에 따라 컨텍스트가 중간 작업물로 채워지며 모델의 행동이 원래 지침에서 벗어날 수 있음을 경고합니다.
모델, 데이터, 컴퓨팅 파워, 전력의 관계를 단순한 자원 축적이 아닌 열역학적 엔트로피 감소와 정보 밀도 변환의 관점에서 분석합니다. 미래 AI 경쟁은 단순 규모 확장이 아닌 에너지 효율과 데이터 밀도, 물리적 제약 극복에 달려 있음을 강조합니다.
정보 협곡을 알고리즘의 문제가 아닌, 인지 엔트로피 증가에 대응하려는 인간의 능동적 심리 방어 기제로 분석합니다. 정보의 폐쇄 루프가 초래하는 의미론적, 논리적, 사회적 구조 붕괴 과정을 심층적으로 다룹니다.

Moonshot AI가 2.8조 개의 파라미터를 가진 대규모 모델 Kimi K3를 발표했습니다. 이 모델은 주요 벤치마크에서 Claude 및 GPT 시리즈와 경쟁하며, 높은 성능과 효율적인 토큰 사용량을 보여줍니다.

OpenAI가 듣기와 말하기를 동시에 수행하는 전이중(Full-duplex) 음성 AI 모델인 GPT-Live-1 및 mini를 출시했습니다. 기존의 순차적 방식에서 벗어나 실시간 대화가 가능하며, 기존 Advanced Voice Mode를 대체합니다.
arXiv 논문 12,750편을 분석하여 AI 작성 판정 비율의 변화와 탐지 도구의 한계를 다룹니다. ChatGPT 출시 이후 컴퓨터 과학 분야의 AI 판정률이 급증했으나, 이는 실제 AI 사용뿐만 아니라 탐지기의 오탐 및 AI 보조 편집의 영향일 수 있음을 지적합니다.
에이전트 기반 컴퓨터 사용(CUA) 연구에서 단일 실행 결과 보고가 초래하는 통계적 오류를 지적합니다. 데이터 추출과 실행 간 비결정성으로 인해 발생하는 높은 분산을 분석하며, 신뢰할 수 있는 평가를 위해 멀티 시드 기반 보고의 필요성을 강조합니다.
표준 SAE의 한계를 극복하기 위해 특징의 지속성을 학습하는 Persistent Sparse Autoencoders(Persistent SAEs)를 제안합니다. 이 모델은 빠른 특징과 느린 특징의 시간 척도를 학습하여, 주제 수준의 정보를 지속적인 상태로 유지하며 언어 모델의 해석 가능성을 높입니다.
자원이 부족한 아삼어의 음성 인식을 위해 Whisper 모델을 미세 조정(Fine-tuning)하는 연구를 제안합니다. 하드웨어 인지 최적화 파이프라인을 통해 성능을 크게 개선하였으며, 기존 Zero-shot 방식 대비 WER 및 CER 등 주요 지표에서 유의미한 향상을 달성했습니다.
고전적 Rate-Distortion 이론에 지각(Perception) 축을 추가한 RDP 이론을 다룹니다. 분포 유사성을 기반으로 한 RDP 함수(RDPF)의 계산 방법과 최적화 메커니즘을 설명하며, 정보 이론적 관점에서의 새로운 압축 한계를 제시합니다.
자원이 제한된 엣지 환경에서 MoE 모델의 추론 효율을 높이기 위한 OrderMoE 프레임워크를 제안합니다. 전문가 간의 기능적 유사성을 활용하여 통신 오버헤드를 줄이고 지연 시간을 단축하는 것이 핵심입니다.
Node4All은 데이터셋별 최적화 없이 임의의 그래프 데이터셋에 적용 가능한 범용 노드 표현 학습 모델입니다. Channel Graph Transformer와 합성 그래프 기반 자기지도 학습을 통해 뛰어난 일반화 성능을 구현했습니다.
Transformer 기반 LLM의 산술 작업 성능을 개선하기 위해 인간의 학습 전략을 적용한 연구입니다. 모델이 인간과 유사한 학습 패턴을 보임을 입증하고, 하위 작업 분해 및 인지 강화 방법을 통해 정확도를 향상시켰습니다.
불균형 회귀 문제를 해결하기 위해 밀도 정보를 활용하는 DADIR 프레임워크를 제안합니다. 타겟 공간의 적응형 분할과 DR-CVAE를 통한 희소 영역 보존을 통해 데이터 불균형을 효과적으로 해소합니다.
LLM 사후 학습의 한계를 극복하기 위해 RL과 온-정책 증류(OPD)를 결합한 'Distilled RL'을 제안합니다. 이 방식은 미세한 입도의 가이드를 제공하여 새로운 지식을 효과적으로 전달하며, 기존 방식보다 뛰어난 성능을 입증했습니다.
DynImmune-BERT는 Neural ODE를 활용하여 T 세포 수용체 레퍼토리의 종단적 변화를 모델링하는 연속 시간 Transformer 모델입니다. 기존 정적 모델의 한계를 넘어 클론의 확장, 수축, 재출현 등 동적인 면역 상태를 효과적으로 예측합니다.
학습된 모델의 함수를 파괴하지 않고 용량을 확장하는 '정확한 네트워크 수술(Exact Network Surgery)' 기술을 제안합니다. 비트 단위로 정확한 함수 보존과 함께, 삽입된 파라미터가 즉시 학습 가능한 상태를 유지하도록 하는 이론적 정리와 구현을 제시합니다.
AoA는 언어의 추상 구문 트리(AST)를 기반으로 설계된 새로운 정리 증명 에이전트입니다. 기존의 텍스트 기반 방식에서 발생하는 높은 토큰 비용과 상태 관리 문제를 해결하기 위해 증명 과정을 JSON 형태의 AST로 처리합니다.
Transformer 아키텍처의 이산적 연산을 연속 기하학적 프레임워크로 모델링하는 새로운 연구를 제시합니다. 미분 기하학 및 확률 미적분학을 통해 RMSNorm, Attention, SGD 등 핵심 구성 요소를 정량적으로 분석하고 예측합니다.
LLM 에이전트의 전사 과정에서 발생할 수 있는 개인정보 및 자격 증명 유출을 방지하는 SlotGuard를 제안합니다. 기존 비식별화 방식의 한계를 극복하여 에이전트의 성능을 유지하면서도 민감한 데이터를 효과적으로 보호합니다.