본문으로 건너뛰기
arXiv논문2026. 11. 21. 15:28
Option-GRPO: 미지의 SDK를 위한 코드 생성에서 AI 슬롭에 대응하는 계층적 RL 대표 이미지

Option-GRPO: 미지의 SDK를 위한 코드 생성에서 AI 슬롭에 대응하는 계층적 RL

원문 발행 2026. 11. 18. 08:52원문 언어 영어AI 한국어 번역arXiv cs.CL 원문 보기

요약

LLM이 생성하는 코드의 비효율성(AI slop) 문제를 해결하기 위해 계층적 강화학습(HRL) 프레임워크인 Option-GRPO를 제안합니다. 이 프레임워크는 소스 코드만으로 미지의 SDK에 적응하며, 기능적 정확성과 코드 우아함을 동시에 최적화하는 것이 핵심입니다. 실험 결과, 기존 방법 대비 높은 성능과 간결성을 입증했습니다.

핵심 포인트

  • Option-GRPO는 HRL을 활용하여 코드 옵션 패턴을 구성하고, 우아함과 정확도를 함께 최적화합니다.
  • 핵심은 SDK 소스 코드에서 재사용 가능한 '코드 옵션'이라는 구조를 발견하는 것입니다.
  • 32B 모델 기반 테스트에서 pass@1 성능이 기존 대비 크게 향상된 61.4%를 달성했습니다.
  • 생성된 솔루션은 API 호출 감소 및 길이 단축을 통해 Slop 문제를 직접적으로 해결합니다.

AI 자동 생성 콘텐츠

본 콘텐츠는 arXiv cs.CL의 원문을 AI가 자동으로 요약·번역·분석한 것입니다. 원 저작권은 원저작자에게 있으며, 정확한 내용은 반드시 원문을 확인해 주세요.

원문 바로가기
0

댓글

0