xAI가 오픈 소스로 공개한 X(Twitter) 'For You' 추천 알고리즘을 소스 코드 수준으로 분해하여, 모든 결론을 구체적인 코드 행 번호로 추적할 수 있는 34페이지 분량의 상호 연결된 아키텍처 Wiki를 생성했습니다.
https://github.com/cclank/x-algorithm-wiki

X의 'For You' 추천 시스템은 오케스트레이션 계층 (Orchestration Layer), 파이프라인 프레임워크 (Pipeline Framework), 포스트 저장소 (Post Repository), ML 리콜 및 랭킹 (ML Recall & Ranking), 콘텐츠 이해 (Content Understanding)의 다섯 가지 주요 부분으로 나뉩니다. 이 Wiki는 전체 내용을 34페이지로 구성하였으며, 11페이지는 코드 지식이 없어도 이해할 수 있는 쉬운 가이드로, 23페이지는 소스 코드를 직접 첨부한 기술 페이지로 구성되었습니다. Rust로 작성된 온라인 서비스는 후보 파이프라인 오케스트레이션 (Candidate Pipeline Orchestration), 점수 산정 및 랭킹 (Scoring & Ranking), 필터링 (Filtering) 및 광고 혼합 배치 (Ad Mixed-ranking)를 담당합니다. Thunder는 사이트 내 포스트의 메모리 저장 및 Kafka 실시간 쓰기를 관리하며, Phoenix는 양방향 타워 리콜 (Two-tower Recall)과 Grok transformer 랭킹을 수행합니다. Grox는 VLM을 사용하여 콘텐츠 분류 및 멀티모달 임베딩 (Multimodal Embedding)을 수행합니다.