Shapley 값을 통한 예산 제약 하에서의 조합적 다중 팔 무대 (BCMAB-FBF) 의 공정한 성과
요약
본 논문은 예산 제약 하의 조합적 다중 팔 무대(BCMAB) 환경에서 '공정성'을 확보하기 위한 새로운 프레임워크를 제시합니다. 특히, 개별 팔의 기여도를 완전히 알 수 없는 전역 피드백(full-bandit feedback) 설정이라는 어려운 조건에 초점을 맞춥니다. 이를 위해 협력 게임 이론의 Shapley 값을 확장한 $K$-Shapley 값을 제안하고, 이 값을 추정하여 공정한 성과를 달성하는 K-SVFair-FBF 알고리즘을 개발했습니다.
핵심 포인트
- 전역 피드백(Full-Bandit Feedback) 환경의 BCMAB에서 '공정성' 확보는 매우 어려운 문제이며, 기존 연구와 차별화됩니다.
- 팔 기여도를 포착하기 위해 Shapley 값을 확장한 $K$-Shapley 값을 제안했으며, 이 값이 특정 수학적 속성을 만족하는 유일한 해법 개념임을 증명했습니다.
- 제안된 알고리즘 K-SVFair-FBF는 전역 피드백 환경에서 가치 함수를 학습하고 몬테 카를로 노이즈까지 완화하여 공정성(fairness)을 인식합니다.
- 이론적으로, K-SVFair-FBF가 공정성 리그레트(regret)에 대해 $O(T^{3/4})$의 상한을 달성함을 증명했습니다.
우리는 전역 팔 피드백 (full-bandit feedback) 을 갖는 예산 제약 하의 조합적 다중 팔 무대 (Budgeted Combinatorial Multi-armed Bandits, BCMAB) 에서 공정한 성과 (Meritocratic Fairness) 를 위한 새로운 프레임워크를 제안합니다. 반팔 피드백 (semi-bandit feedback) 과 달리, 전역 팔 피드백에서는 개별 팔의 기여도가 완전히 제공되지 않아 이 설정은 훨씬 더 도전적입니다. BCMAB-FBF 에서 팔 기여도를 계산하기 위해 우리는 협력 게임 이론의 고전적인 해법 개념인 Shapley 값을 확장하여, 크기가 $K$ 이하인 집합에 제한된 에이전트의 마진 기여도를 포착하는 $K$-Shapley 값을 제안합니다. 우리는 $K$-Shapley 값이 대칭성 (Symmetry), 선형성 (Linearity), null player, 효율성 (efficiency) 속성을 만족하는 유일한 해법 개념임을 증명합니다. 다음으로, 미지의 가치 함수 (valuation function) 를 추정하며 적응적으로 $K$-Shapley 값을 계산하는 공정성 인식 팔 알고리즘인 K-SVFair-FBF 를 제안합니다. 표준 전역 팔 피드백 문헌과 달리, K-SVFair-FBF 는 전역 피드백 설정 하에서 가치 함수를 학습할 뿐만 아니라 몬테 카를로 근사 (Monte Carlo approximations) 에서 발생하는 노이즈를 완화합니다. 이론적으로, 우리는 K-SVFair-FBF 가 공정성 regret 에 대해 $O(T^{3/4})$ regret bound 을 달성함을 증명합니다. 연방 학습 (federated learning) 과 사회적 영향력 극대화 (social influence maximization) 데이터셋을 통한 실험에서, 우리의 접근법이 공정한 성과를 달성하고 기존 베이스라인보다 더 효과적으로 수행됨을 보여줍니다.
AI 자동 생성 콘텐츠
본 콘텐츠는 arXiv cs.AI의 원문을 AI가 자동으로 요약·번역·분석한 것입니다. 원 저작권은 원저작자에게 있으며, 정확한 내용은 반드시 원문을 확인해 주세요.
원문 바로가기