한 도메인의 RL이 다른 도메인을 망가뜨리는 이유

요약

다중 도메인 강화학습(RL) 시 발생하는 도메인 간 간섭 문제를 국소 섭동 이론으로 분석합니다. 짧은 리프레시 과정을 통해 기존 기술의 손실을 선택적으로 복구하고 성능을 최적화할 수 있음을 보여줍니다.

핵심 포인트

• 다중 도메인 RL 간섭은 저차원 부분 공간에 집중됨
• 국소 섭동 이론을 통한 간섭 원인 규명
• 짧은 리프레시로 손실된 기술을 효과적으로 복구 가능
• 새로운 도메인 학습 후에도 기존 성능 유지 및 향상