2 months (meme-d) research, Do People Notice the Difference Between AI Models?

r/LocalLLaMA 이용자가 두 달 동안 진행한 반쯤 장난스러운 실험 기록이에요. 지인들에게 최신 ChatGPT를 무료로 쓰게 해 주겠다며 자신의 웹 UI(OpenWebUI 개조판)를 쓰게 한 뒤, 뒤에서는 Qwen 3.6 27B·35B-A3B, Gemma 26B-A4B, Qwen 3.5 9B, Gemma 12B·E4B·E2B 같은 로컬 모델을 번갈아 돌렸어요. 표본은 8명이고 글쓴이 스스로 진지한 연구가 아니라고 밝히며, 실험 뒤 참가자들에게 공개 허락을 받았다고 해요. 불만은 9B급 이하에서부터 나왔고 주로 '말을 못 알아듣는다'는 내용이었으며, 참가자들은 Gemma 모델의 답변을 더 좋아했다고 해요. 요청 7,912건 중 높은(high) 추론을 쓴 건 51건뿐이었고, 용도는 절반가량이 문서 작성, 그다음이 문법 교정, 나머지는 대부분 검색형 질문이었어요. 코딩 용도는 거의 없었다고 해요.