BeyondArena: 표 형식 파운데이션 모델 (Tabular Foundation Models)은 실제로 범용적인가?

요약

BeyondArena는 표 형식 파운데이션 모델(Tabular FMs)의 범용성을 검증하기 위해 IID, 시계열, 그룹화된 태스크를 포함한 142개 데이터셋 벤치마크를 제시합니다. 연구 결과, Tabular FMs는 소규모 동질적 데이터에서는 강점을 보이나, 복잡한 과제에서는 여전히 트리 기반 및 딥러닝 모델이 우세함을 밝혀냈습니다.

핵심 포인트

• 142개 데이터셋을 활용한 새로운 표 형식 모델 벤치마크 제시
• Tabular FMs는 소규모 동질적 데이터셋에서 높은 성능 발휘
• 복잡한 태스크에서는 트리 기반 및 딥러닝 모델이 여전히 우위
• Data Foundry 큐레이션 툴킷 및 데이터셋 오픈 소스 공개