Wikipedia's Cleanup of AI-Generated Content

누가, 무엇을

IEEE Spectrum 피처 에디터 Eliza Strickland가 위키백과 자원봉사 프로젝트 WikiProject AI Cleanup의 공동 창립자 Ellia Lebleu를 인터뷰했어요. 2023년에 시작된 이 프로젝트는 위키백과 지침을 어기는 AI 생성 글을 찾아 지워요. Lebleu는 프랑스 Inria(렌 대학 센터)에서 AI 박사 과정을 밟고 있어요.

어떻게 시작됐나

2023년 12월쯤 위키백과 Discord에서 편집자들이 이상한 문서를 공유했대요. "stands as a testament", "rich cultural heritage" 같은 표현을 반복하고, 결론 섹션이나 "왜 중요한가?" 같은 섹션이 붙어 있었어요. 2023–2024년 초 ChatGPT의 전형적인 버릇이라 알아보기 쉬웠고, 그래서 공식 프로젝트를 만들었대요.

요즘은 어떻게 알아보나

• 2025년부터 흔적이 더 미묘하고 구조적으로 바뀌었어요. "셋으로 나열하기", 부정 병렬 구문 같은 것들이 하나로는 결정적이지 않지만 쌓이면 의미가 생겨요.
• 문서 밖도 봐요. 5분 만에 수천 단어짜리 문서 다섯 개를 쓰면 의심할 이유가 있죠.
• 출처 문제가 커졌어요. 아예 지어낸 인용은 RAG 덕분에 줄었지만, 실제 출처를 찾아 놓고 내용을 완전히 틀리게 옮기는 경우가 아주 흔하대요.

얼마나 걸러지나

영어 위키백과는 최근 LLM으로 문서를 생성하는 것을 금지했어요. Lebleu는 AI 탐지 회사 Pangram과 비율을 추정했는데, ChatGPT 이전 글에서 오탐이 없어 보수적인 하한선이라고 해요.

| 시점 | 새 문서·초안 중 AI 판정 | |---|---| | 2025년 말 | 약 20% | | 2026년 초 | 15–16% |

정책 효과인지, 모델이 좋아져 Pangram이 못 따라가는 건지는 아직 모른대요.

AI로 AI 막기

다른 편집자가 만든 AI 출처 검증기는 페이지의 출처가 주장과 맞는지 확인해요. 완벽하진 않지만 대규모로 뻔한 사례를 거르는 첫 단계로 좋대요. 위키미디어 재단은 챗봇에서 그대로 붙여 넣은 글을 표시하는 Paste Check를 만들고 있어요. Claude가 "위키백과 정책에 어긋나 문서를 쓸 수 없다"고 거절하는 경우도 봤다며, 주요 AI 회사가 다 그렇게 하면 초보 사용자 문제는 줄 거라고 해요. AI 글은 대부분 초보 편집자가 올려서 환영 메시지와 도움말에 규칙을 잘 보이게 했대요.

원문 인터뷰의 마지막 질문(AI가 정말 믿을 만한 문서를 쓰게 되면?)에 대한 답은 일부만 읽어 옮기지 않았어요.