화려한 AI 탐지기는 잊어라: 20년 된 '고전' 머신러닝이 챗봇 글을 더 잘 잡는 역설

요즘 온라인에 올라오는 글, 이거 사람이 쓴 걸까요 챗봇이 쓴 걸까요. 이 질문에 답하려는 시도는 많았습니다. 그런데 최근 해커뉴스에서 흥미로운 접근 하나가 화제가 됐습니다. 거대한 딥러닝 모델이 아니라, 20년도 더 된 고전 머신러닝으로 챗봇 글을 잡아낸다는 이야기입니다.

이 글은 2026년 7월 16일 해커뉴스에 올라온 “Detecting LLM-Generated Texts with Classical Machine Learning"이라는 논의를 바탕으로 합니다. 무려 151점, 댓글 103개가 달리며 뜨거운 반응을 얻었습니다. 참고로 이 주제는 최근 30일 사이 관련 논의가 많지 않아, 이 한 건의 토론을 중심으로 짚어보겠습니다.

왜 ‘고전’이 다시 소환됐나

AI가 쓴 글을 잡는 탐지기라고 하면, 보통 우리는 또 다른 거대 AI를 떠올립니다. 신경망으로 신경망을 잡는 그림이죠. 그런데 이번에 주목받은 방식은 정반대입니다.

여기서 말하는 ‘고전’ 머신러닝은 딥러닝 이전 시대의 기법들을 말합니다. 로지스틱 회귀, 서포트 벡터 머신(SVM), 나이브 베이즈 같은 것들인데요. 텍스트를 단어 빈도나 통계적 특징으로 바꾼 뒤, 이 숫자 패턴을 보고 분류하는 방식입니다. GPU 몇 장이 필요한 무거운 모델과 달리, 노트북 한 대에서도 가볍게 돌아갑니다.

핵심은 이겁니다. 챗봇이 쓴 글에는 사람 글과 다른 통계적 지문이 남습니다. 특정 단어를 얼마나 자주 쓰는지, 문장 길이 분포가 어떤지, 어휘의 다양성이 어느 정도인지. 이런 미세한 패턴을 고전 머신러닝이 의외로 잘 집어냅니다.

무겁지 않아서 오히려 강하다

이번 논의에서 가장 눈길을 끈 반응은 ‘크기’에 관한 것이었습니다. 한 참여자는 “분류기가 그렇게 크지 않아 보인다"며, 이 정도라면 브라우저 확장 프로그램으로 만들어 화면에 뜨는 모든 문단에 실시간으로 돌려볼 수 있지 않겠냐는 아이디어를 던졌습니다.

이게 왜 중요할까요. 거대 딥러닝 탐지기는 성능이 좋아도 무겁습니다. 서버로 텍스트를 보내야 하고, 응답을 기다려야 하고, 비용도 듭니다. 반면 가벼운 고전 모델은 사용자 기기 안에서 그냥 돌아갑니다. 프라이버시도 지키고, 속도도 빠르고, 공짜에 가깝습니다.

실제로 이런 접근은 텍스트 분류만의 이야기가 아닙니다. 한 참여자는 수천 건의 데이터시트를 분류하고 정리하는 데 비슷한 방식을 썼다고 밝혔습니다. 여기에 아주 단순한 이미지 분류기를 붙여, 도표나 그림 위주의 페이지를 골라내는 작업까지 처리했다고 합니다. 거창한 모델 없이도 실무에서 충분히 쓸 만하다는 증언인 셈입니다.

“오늘까진, 되겠죠"라는 뼈 있는 한마디

물론 마냥 장밋빛은 아닙니다. 토론에서 나온 짧지만 뼈 있는 코멘트가 하나 있었습니다. “오늘은, 되겠죠(today, sure).” 지금은 통하지만 내일도 그럴지는 모른다는 회의적인 시선입니다.

이건 AI 탐지 분야의 근본적인 딜레마를 정확히 찌릅니다. 탐지기가 챗봇 글의 특정 패턴을 학습하면, 다음 세대 챗봇은 그 패턴을 지우는 방향으로 발전합니다. 창과 방패의 경쟁이죠. 오늘 잘 잡던 탐지기가 새 모델이 나오면 무용지물이 될 수 있습니다.

고전 머신러닝은 학습한 데이터의 통계에 강하게 묶여 있습니다. 그래서 특정 시점, 특정 모델의 글을 잡는 데는 날카롭지만, 완전히 새로운 스타일이 등장하면 다시 학습시켜야 합니다. 가볍다는 장점이 여기서는 유지보수 부담으로 되돌아옵니다.

그래서 우리가 얻는 교훈

이 사례가 던지는 메시지는 명확합니다. 문제를 풀 때 무조건 가장 크고 화려한 도구부터 꺼낼 필요는 없다는 겁니다.

AI가 쓴 글을 잡는다는, 지극히 ‘AI스러운’ 문제조차 20년 된 통계 기법으로 상당 부분 해결됩니다. 게다가 가볍고, 빠르고, 설명 가능하고, 내 기기에서 돌아갑니다. 요즘처럼 모든 걸 거대 모델에 맡기려는 흐름 속에서, 오히려 신선한 반례입니다.

다만 이 방패가 영원하지 않다는 점도 잊지 말아야 합니다. 탐지와 생성의 경쟁은 계속되고, 오늘의 정답이 내일도 정답이라는 보장은 없습니다.

여러분은 어떻게 생각하시나요. 화면 위 모든 문단이 “사람 작성"인지 “AI 작성"인지 실시간으로 표시되는 브라우저를, 우리는 정말 원하고 있을까요. 그리고 그 판정을 우리는 얼마나 믿을 수 있을까요.