강화학습 환경을 구축하는 데 새로운 데이터가 필요하지 않습니다.

요약

Hugging Face에서 기존의 오픈 데이터셋(Nayana, FLEURS)을 활용하여 12백만 개 이상의 태스크를 포함하는 두 개의 OpenEnv 환경을 공개했습니다. 이를 통해 강화학습(RL) 환경 구축에 새로운 데이터를 필요로 하지 않습니다. 실제 테스트에서는 Gemma 4 E4B와 GRPO를 사용하여 OCR 및 ASR 성능에서 높은 개선율을 입증했습니다.

핵심 포인트

• 기존 오픈 데이터셋으로 RL 환경 구축 가능
• OpenEnv는 12백만 개 이상의 태스크 제공
• OCR(Nayana)과 ASR(FLEURS) 통합 활용
• Gemma 4 E4B와 GRPO로 성능 검증 완료