온라인 백과사전은 정치적 의견을 형성하고, 이를 통해 민주적 담론에 영향을 미칩니다. 2025년 말, Grok이 작성한 내용으로만 이루어진 백과사전인 Grokipedia가 출시되었습니다. 이 프로젝트의 동기 중 하나는 '좌파' 및 '진보적(liberal)' 편향성이라는 비난에 직면했던 Wikipedia에 대한 편견 없는 대안을 제공하는 것이었습니다. 하지만 LLM이 작성한 백과사전이 더 큰 중립성을 제공할까요, 아니면 단순히 다른 이념을 내재하고 있을 뿐일까요? 우리는 9가지 전문가 코딩된 이념 차원을 따라 정부 구성원들을 설명하는 1,394개 기사 쌍에 대해 Grokipedia와 Wikipedia의 대규모 정치적 편향성 연구를 수행했으며, 이를 위해 네 개의 LLM 심판(Grok, Claude, Mistral, DeepSeek)을 사용했습니다. LLM 자체도 편향될 수 있기 때문에, 우리는 그들의 판단에서 나타나는 패턴 또한 조사했습니다. 우리는 Grok을 포함한 모든 LLM 심판들이 Grokipedia를 Wikipedia보다 덜 중립적이라고 평가한다는 것을 발견했습니다. 두 백과사전 모두 전반적으로 정치인들을 호의적으로 묘사하지만, 서로 다른 이념 집단에 대해서는 다르게 나타났습니다. Grokipedia는 특히 경제적으로 우파(right-wing) 정치인들에게 유리하며 사회적으로 진보적인(liberal) 정치인들에게는 불리한 경향을 보이는 반면, Wikipedia는 후자에게 호의적으로 편향된 것으로 평가되었습니다.