다양한 LLM의 특징 (Various LLM smells)

작년 말에 저는 수학 블로그를 쓰기 시작했고, 제 글쓰기를 다듬고 향상시키기 위해 LLM을 사용하기로 결정했습니다. LLM이 생성한 글은 제가 쓴 글보다 확실히 훨씬 좋게 느껴졌습니다. 어휘가 더 풍부하고, 문장 구조도 흥미로웠습니다 등등. 당시에는 저에게 AI가 만든 듯한 조잡함(AI-slop)처럼 느껴지지 않았다고 확신합니다. 그런데 약 3개월 후, 저는 정확히 그 문장 구조들이 온 인터넷에 걸쳐 나타나는 것을 보게 되었습니다. 그리고 저에게 흥미로운 점은, 이 'ai-smell'이 현재 여러분이 쉽게 알아챌 수 있는 다양한 AI 지원 작업 전반에서 나타나는 일종의 인공물(artifact)처럼 느껴진다는 것입니다. 제가 지금까지 모은 몇 가지 예시를 통해 두 영역에 걸친 'ai-smells'을 보여드리겠습니다:

1. LLM 글쓰기 (명백한 대시 기호 너머):

제 수학 블로그(현재는 삭제됨)와 그에 수반된 초안들 중 몇 가지 예시

너무 많은 결론 문장 (punchlines)

• "인간은 대칭성에서 지능이 가시화되는 것처럼 느끼기 때문에 신뢰한다."
• "Tiger는 이야기에 맞았고. Jin-yong은 물리학에 맞았다."
• "대칭성은 함정이 된다."

연속적인 짧은 문장들

• "하지만 그 기울어짐은 우연이 아니다. 그것은 최적의 형태이다."
• "그러자 AlphaEvolve가 도착했다. 그것은 대칭성에 대한 선호도가 없었다. 미학적 사전 지식도, 조화를 보존하려는 본능도 없었다."
• "이 예시들은 장식이 아니다. 이것들은 분산된 논리를 형성한다."

"X는 Z의 Y이다"

• "Cringe은 당신이 선택한 기울기(gradient)를 따라 움직이는 가시적인 흔적이다."

"단순히 X가 아니라, 그것은 Y다"

• "단지 제약 조건을 만족하는 것을 넘어 미학적 본능을 충족시키는 해결책들"

2. AI 생성 웹사이트

"JetBrains Mono" 글꼴

image

이 정확한 글꼴로 된 모든 웹페이지의 "단계(step)" 및 글머리 기호:

image

바로 이 버튼들

image

이 카드들

image

배지 컴포넌트의 깜빡이는 점(blinking-dot)

image

각주

• 저는 창작 작업에 LLM/AI 사용을 반대하지 않습니다. 이것은 단지 제가 무언가를 알아차렸다는 것일 뿐입니다.