NorthCUA: 대규모 경험을 통한 컴퓨터 사용 에이전트의 성능 향상

원문 발행 2026. 11. 03. 15:43원문 언어 영어AI 한국어 번역Reddit AI Engineering 원문 보기

요약

NorthCUA는 대규모 경험을 활용하여 컴퓨터 사용 에이전트의 성능을 향상시키는 통합 시스템입니다. 'Experience Flywheel'과 재귀적 자기 개선 메커니즘을 통해 다양한 작업을 수행하며, Staged Learning 및 joint desktop-web 강화학습으로 GUI 역량을 개발합니다. 이를 기반으로 Nano, Mini, Pro 등 최첨단 결과를 달성하는 에이전트군을 제공합니다.

핵심 포인트

NorthCUA는 대규모 경험을 통해 컴퓨터 사용 에이전트를 개선하는 통합 시스템입니다.
'Experience Flywheel'은 작업 기록과 검증된 궤적 선별에 핵심적인 역할을 합니다.
Staged Learning 및 joint desktop-web 강화학습으로 GUI 역량을 개발합니다.
Nano, Mini, Pro 제품군은 오픈 소스 모델 중 최첨단 결과를 달성했습니다.

개별적인 행동에서 복잡한 소프트웨어 작업으로 컴퓨터 사용 에이전트를 확장하려면, 결정과 완전한 결과 사이를 연결하는 경험이 필요합니다. 우리는 NorthCUA라는 통합 시스템을 발표하며, 이를 통해 대규모 경험을 바탕으로 컴퓨터 사용 에이전트의 성능을 향상시킵니다. 이 시스템은 'Experience Flywheel'을 제공하여 다양한 실행 가능한 작업을 NorthCUA Harness에 공급하고, 이는 장시간 상호작용을 유지하며, 결정을 기록하고, 작업 결과를 확인합니다. 이 플라이휠은 이러한 기록들을 사용하여 검증된 궤적(verified trajectories)을 선별합니다. 해결되지 않은 작업의 경우, 재귀적 자기 개선(recursive self-improvement)이 재사용 가능한 기술을 발전시키고 검증된 마일스톤을 보존하여 후속 시도가 이전 진행 상황을 기반으로 구축할 수 있게 합니다. 'Staged Learning'은 이러한 경험을 플라이휠에서 얻은 접지 데이터(grounding data)와 결합하여, 훈련 중간 단계 및 장기 지평의 지도 미세 조정(supervised fine-tuning)을 통해 GUI 역량을 개발합니다. 이후 정책(policy)은 동일한 Harness 내에서 통합 데스크톱-웹 강화학습(joint desktop-web reinforcement learning)을 통해 새로운 시도들로부터 학습하며, 경험 생산과 정책 개선 사이의 루프를 완성합니다. 그 결과로 탄생한 Nano, Mini, Pro 제품군은 보고된 평가 환경 설정 하에서 GUI 접지, 데스크톱 실행, 웹 상호작용 전반에 걸쳐 오픈 소스 모델 중 최첨단(state-of-the-art) 결과를 달성했습니다. 더욱 반응성이 뛰어난 웹 워크플로우를 위해 NorthCUA-Ultrafast는 사전 강화학습(pre-RL) Nano 기반에서 직접적인 행동 선택과 개방형 생성을 페어링하여, 측정 가능한 품질-지연 시간 트레이드오프를 제공합니다. 이 모든 발전은 NorthCUA를 높은 성능을 가진 모델군이자, 복잡한 소프트웨어 작업을 의도부터 완료까지 수행하는 에이전트를 위한 재사용 가능한 기반으로 확립합니다.

https://github.com/beipo-ai/NorthCUA
https://beipo.top/blog/northcua/
https://arxiv.org/abs/2611.02102
weights https://huggingface.co/china-beipo/NorthCUA-Nano
https://huggingface.co/china-beipo/NorthCUA-Mini
https://huggingface.co/china-beipo/NorthCUA-Pro

AI 자동 생성 콘텐츠

원문 바로가기

NorthCUA: 대규모 경험을 통한 컴퓨터 사용 에이전트의 성능 향상

요약

핵심 포인트

댓글