해커뉴스 톱의 절반이 AI 글이라고? 그 숫자부터 다시 봅시다

해커뉴스 프론트페이지를 보다가 같은 문장을 두 번 읽은 듯한 기분이 든 적 있을 겁니다. 모델 출시, 에이전트 데모, 내 일을 바꿨다는 회고가 하루걸러 올라오니까요. 그 와중에 일일 톱의 절반이 AI가 쓴 글이라는 측정이 다시 돌고 있습니다.

이 문장이 맞다면 우리가 매일 읽는 테크 공론장의 절반은 사람 이야기가 아닙니다. 다만 논쟁의 핵심은 점수 하나가 아닙니다. 무엇에 점수를 매겼느냐입니다.

절반이라는 숫자가 다시 도는 이유

Pangram은 AI가 생성한 텍스트를 가려낸다고 주장하는 탐지기입니다. 보안 연구자 lcamtuf, 본명 미하우 잘레프스키가 이 측정과 해커뉴스 글을 겹쳐 보면서 질문을 다시 꺼냈습니다. 우리가 스크롤하는 프론트페이지는 얼마나 사람 손이냐는 질문입니다.

최근 한 달 커뮤니티 쪽 토론은 원본 논쟁 때처럼 시끄럽지는 않았습니다. 숫자만 남아 다시 떠오른 쪽에 가깝습니다. 그런데도 이 헤드라인이 먹히는 이유는 단순합니다. 매일 톱에 AI 제품과 벤치마크와 코딩 에이전트가 보이기 때문입니다.

주제가 이미 AI로 가득한데 글도 AI가 썼다는 주장은 직관적으로 들립니다. 직관은 편리합니다. 표본은 그렇지 않습니다.

주제가 AI인 것과, AI가 쓴 글은 다릅니다

해커뉴스에서 AI가 많이 보이는 것과, AI가 많이 쓰는 것은 다른 현상입니다.

프론트페이지를 하루만 봐도 모델 발표, GPU, 에이전트, 생산성 회고가 섞입니다. 이건 수요입니다. 독자가 그걸 누르니까요. 스타트업과 연구실이 그걸 올리니까요. 주제가 AI인 글이 많은 건, 그 게시판이 2023년 이후 줄곧 그래 왔기 때문입니다.

반면 Pangram류 탐지기가 잡는 것은 문장의 통계적 지문입니다. 매끄러운 접속사, 고른 문장 길이, 위험을 피하는 결론. 영어권 테크 블로그는 원래 그 문체를 좋아합니다. 탐지기가 AI답다고 찍는 글 중 일부는, 사람이 그 문체를 맞춰 쓴 결과일 수 있습니다.

반대로 AI가 초고를 쓴 뒤 창업자가 이름만 올린 글도 있습니다. 겉보기엔 사람 블로그입니다. 탐지기 없이 티가 안 날 수도 있습니다. 그래서 주제가 AI인 비율과 저자가 AI인 비율을 한 숫자로 묶으면 이야기가 바로 기울어집니다.

Pangram이 잡는 것, lcamtuf가 의심한 것

AI 탐지기는 법정 증거가 아닙니다. 오탐이 납니다. 특히 영어가 모국어가 아닌 사람이 고친 글, 템플릿에 가깝게 쓴 릴리즈 노트, 편집자가 다듬은 스타트업 블로그에서 점수가 높게 나옵니다.

lcamtuf가 이 주제를 건드린 맥락도 여기에 가깝습니다. 보안 연구자는 탐지 도구의 거짓 양성을 본능적으로 의심합니다. 절반이라는 헤드라인은 잘 퍼집니다. 그런데 표본이 일일 톱인지, 댓글인지, Show HN인지, 외부 블로그 본문인지에 따라 의미가 완전히 달라집니다.

일일 톱 30개 중 15개가 AI 이야기여도 그중 모델이 초고를 쓴 글은 더 적을 수 있습니다. 사람 이름 아래 올라온 회고가 탐지기에는 AI로 찍힐 수도 있습니다. 숫자가 틀린 게 아니라, 숫자가 가리키는 칸을 안 밝힌 겁니다.

탐지 업계의 고질도 여기 있습니다. 모델이 바뀌면 지문이 바뀝니다. 사람이 탐지기 문체를 피하려고 문장을 부러 거칠게 다듬으면 점수는 또 흔들립니다. 해커뉴스처럼 짧은 문장과 코드와 링크가 섞인 글에서는 그 흔들림이 더 큽니다.

이 논쟁은 “Pangram이 맞다, 틀리다"로 끝나면 별로 남는 게 없습니다. 남는 질문은 이겁니다. 우리가 사람 글로 읽은 문장 중, 실제로 사람이 책임질 수 있는 문장은 몇 줄인가.

메아리실인지는 비율이 아니라 반복으로 보입니다

진짜 불편한 건 48이냐 52냐가 아닙니다. 같은 레퍼토리가 반복되느냐입니다.

해커뉴스는 오래전부터 메아리실이라는 말을 들어 왔습니다. 베이 에어리어, 스타트업, 유닉스 취향. 지금은 그 자리에 모델 평가와 에이전트 데모가 앉았습니다. AI가 글을 쓰지 않아도 사람이 AI 이야기를 서로에게 되돌려 주면 피드 모양은 비슷해집니다.

반응이 갈리는 지점도 여기입니다. 한쪽은 요즘 Show HN이 비슷한 래퍼만 올린다고 합니다. 다른 쪽은 탐지기가 기술 글을 사람 글로 못 읽는다고 합니다. 둘 다 부분적으로 맞습니다. 전자는 주제가 좁아진 문제고, 후자는 측정 도구의 문제입니다. 한데 묶으면 “절반이 AI"가 됩니다.

메아리실은 AI가 만들어서 생기는 것만은 아닙니다. 추천 알고리즘과 업보트 취향이 같은 링크를 위로 올리면 사람은 그걸 상식이라고 읽습니다. 모델은 그 상식을 더 매끈하게 다시 씁니다. 입구가 같아지면 출구 문장도 같아 보입니다.

우리가 할 수 있는 제일 싼 점검은 헤드라인을 믿기 전에 단위를 확인하는 일입니다. 일일 톱인지 댓글인지. 링크 제목인지 본문인지. 주제가 AI인지 저자가 AI인지. 그 네 칸을 나누지 않은 채 절반이라고 하면 그 숫자 자체가 메아리가 됩니다.

이 논쟁의 쓸모는 탐지기 승부가 아닙니다. 매일 읽는 테크 피드 안에 사람 경험과 모델 초고와 마케팅 문장이 한줄로 섞여 있다는 점을 인정하는 쪽에 가깝습니다. 오늘 해커뉴스에서 손이 간 글, 그 첫 문장을 누가 쳤다고 보십니까?