ZeroGPT는 정확한가? ‘AI 점수’가 의미하는 것

ZeroGPT는 아마도 대부분의 학생이 처음으로 접하게 되는 AI 탐지기일 것입니다. 무료이고 로그인도 필요 없으며, 에세이를 약 10초 만에 그대로 붙여 넣을 수 있습니다. 그래서 글에 무서운 빨간색 퍼센트가 뜨면 공식적이고 권위 있는 것처럼 느껴지기 쉽습니다.

하지만 그렇지 않습니다. ‘ZeroGPT가 정확한가?’라는 진짜 질문에 대한 답은 혈압을 조금은 낮춰줄 만합니다. 즉, 점수의 일관성이 충분히 낮아 어떤 한 번의 결과도 ‘무엇이든 증명’하는 근거로 취급해서는 안 됩니다. 도구가 글을 통과시키든, 경고하든 마찬가지입니다.

우리는 탐지기 결과를 이해하도록 연구자와 학생들을 돕는 데 상당한 시간을 씁니다. 그런데 ZeroGPT는 거의 모든 다른 도구보다 더 혼란스럽고 불안한 메시지를 생성하는 편인데, 그 이유는 대부분의 사용자가 맨 처음 손대는 도구가 바로 그것이기 때문입니다. 아래는 그 점수가 실제로 무엇을 뜻하는지, 그리고 무엇을 뜻하지 않는지입니다.

ZeroGPT는 정확한가? 짧은 답

ZeroGPT는 약 98%의 정확도를 광고합니다. 그러나 독립적인 경험은 그 수치와 일치하지 않습니다. 실제 테스트에서는 ZeroGPT가 넓고 불규칙한 변동을 보이며, 어떤 경우에는 명백히 AI 생성 텍스트를 ‘대체로 인간이 쓴 것’처럼 평가하고, 다른 경우에는 분명한 인간의 글을 ‘기계가 만든 것’으로 플래그하기도 합니다. 동일한 문단도 어떻게 ‘덩어리로 자르느냐’에 따라 점수가 달라질 수 있습니다.

무료이고 마찰이 없다는 점이 핵심 매력입니다. ZeroGPT는 요금을 받지 않고, 계정도 요구하지 않으며, 한 번에 대략 15,000자까지 입력을 허용합니다. 바로 이런 접근성 때문에 널리 쓰이게 되었고, 그 결과가 권위 있는 것처럼 인용되기도 합니다.

무료라는 것은 곧 엄밀성이 낮다는 뜻이기도 합니다. 로그인도 비용도 없는 도구는, 98%라는 주장을 정당화할 만큼 지속적으로 벤치마킹된 모델을 실행하고 있지 않을 가능성이 큽니다. 독립적인 검토자가, 이미 출처를 알고 있는 텍스트를 넣어 주면, 점수는 신뢰할 만한 분류기가 보일 법하지 않은 방식으로 흔들립니다.

가짜 ZeroGPT 사이트를 조심하세요

ZeroGPT에만 해당하는 두 번째 문제가 있습니다. 이름이 인기가 높다 보니, 그 이름과 레이아웃을 유사하게 사용해 검색 트래픽을 노리는 복제 사이트들이 생겨났습니다. 유일하게 정식 도구는 zerogpt.com입니다.

이 ‘미러 도메인’은 두 가지 이유에서 중요합니다. 첫째, 그 결과는 원본보다 더 신뢰하기 어렵습니다. 어떤 것(있다면)이 실제로 그 뒤에서 돌아가고 있는지 알 수 없기 때문입니다. 둘째, 검증할 수 없는 임의의 사이트에 미발표 논문 원고나 학위논문을 붙여 넣는 행위는 실제 개인정보 보호상의 위험이 됩니다. ZeroGPT를 사용한다면, 먼저 주소 표시줄을 확인하세요.

ZeroGPT 경고는 왜 당황할 만큼의 증거가 아닌가

AI 탐지기는 사용자의 논지를 이해하지 못합니다. 대신 글이 얼마나 예측 가능한지, 그리고 문장의 리듬이 얼마나 다양하게 변하는지를 추정합니다. 문장이 깔끔하고 일정하며 표현이 분명한 텍스트는 통계적으로 ‘모델이 생성한 텍스트’와 비슷하게 보이기 때문에, 정교하고 세심한 글은 늘 자주 걸립니다.

그래서 무료 도구에서 나온 플래그는 알려주는 것이 거의 없습니다. 훈련을 통해 도달하려고 배워 온, 명확하고 일관된 글쓰기는 탐지기에 ‘기계의 시그니처’처럼 보일 수 있습니다. 영어가 모국어가 아닌 학습자의 경우에는 상황이 더 나빠집니다. 어휘가 더 단순하고 직접적인 표현을 쓰는 경우가 많기 때문입니다.

따라서 ZeroGPT의 빨간 숫자는 사용자가 잘못을 했다는 증거가 아니며, 초록 숫자 역시 건강진단서처럼 믿을 만한 ‘합격’ 신호가 아닙니다. 이 범주의 도구들 가운데 가장 덜 엄밀한 도구가 내는 거칠고 불안정한 추정치일 뿐입니다. 주요 탐지기들이 실제로 얼마나 잘하는지에 대한 더 넓은 그림을 보려면, how accurate AI detectors are에 대한 우리의 리뷰가 기대치를 조정하는 데 더 적절합니다.

ZeroGPT 결과를 받았을 때 무엇을 해야 하나

점수는 공포의 판결이 아니라, 생각해 보라는 ‘프롬프트’로 취급하세요.

숫자를 낮추기 위해 무작정 다시 쓰지 마세요. ZeroGPT의 점수는 너무 불안정해서 그에 맞춰 최적화하기 어렵고, 그 점수를 만족시키기 위해 문장을 ‘해킹’하듯 조정하면 대개 사용자가 공들여 만든 글의 질이 떨어집니다.

기관이 실제로 사용하는 도구로 교차 확인하세요. 학교는 아마 ZeroGPT가 아니라 Turnitin에 의존할 가능성이 큽니다. 무료 도구의 점수는 공식 점검이 무엇을 보고할지와 무관하며, 인간화된 텍스트가 여전히 적발되는지에 대한 핵심 질문은 Turnitin can detect humanized AI에 실린 내용에서 다룹니다.

내가 쓴 증거를 남기세요. Google Docs 또는 Word의 버전 기록은, 어느 쪽이든 어떤 탐지기 퍼센트보다 저작(작성) 증거로 훨씬 강력합니다.

만약 작업의 일부를 AI 도움을 받아 초안 작성했다면, 책임 있는 방향은 무료 탐지기를 ‘속이려’ 하는 것이 아닙니다. 해당 텍스트를 수정해 자신의 목소리로 읽히게 만들고, 의미와 인용을 그대로 유지하며, 해당 과정 또는 저널 정책에 따라 지원 사실을 공개하는 것이 핵심입니다. ‘탐지를 지우겠다고 약속하는’ 도구들이 실제로 그런 효과를 내는지 여부는 정당한 질문이며, 우리는 do AI humanizers actually work에서 그 문제를 파고듭니다.

더 차분하고 오래가는 접근법

무료 탐지기에서 초록불을 쫓는 것은 러닝머신 위에서의 달리기입니다. 점수는 불안정하고, 기관이 사용하는 도구는 다르며, 해당 범주 전체도 계속 업데이트됩니다. 에너지를 더 잘 쓰는 방법은 글을 ‘진짜로’ 좋게 만들고 ‘진짜로’ 내 것으로 만드는 데 집중하는 것입니다.

바로 그 목적을 위해 우리 text humanizer가 설계되었습니다. 인용을 주요 문체 전반에 걸쳐 보존하면서, AI 지원 초안을 자연스러운 학술 문장으로 바꾸고, 기술 용어를 유지하며, 숫자와 주장에 담긴 의미를 안정적으로 유지합니다. 우리는 그것을 Turnitin, GPTZero, Copyleaks, ZeroGPT, Originality.ai로 테스트해 보고, 한계에 대해서도 솔직히 말합니다. 매달 바뀌는 ‘움직이는’ 대상에 대해서는 신뢰할 만한 도구가 보장된 점수를 약속할 수 없기 때문에, 우리는 ‘보장 점수’를 약속하지 않습니다.

ZeroGPT를 읽었다는 사실은 10초짜리 호기심에 가깝습니다. 실제로 버티게 해 주는 것은 당신의 목소리, 근거, 그리고 명확한 공개입니다.

ZeroGPT는 어떻게 글에 점수를 매기며, ‘안전한 점수’는 무엇을 뜻하나

그렇다면 ZeroGPT는 내부에서 어떻게 작동할까요? 대부분의 무료 탐지기처럼, 의미를 읽지 않습니다. 통계로 읽습니다. 대부분의 역할을 하는 신호는 두 가지입니다. 첫째는 퍼플렉서티(perplexity)로, 단어 선택이 얼마나 예측 가능한지를 측정합니다. 둘째는 버스티니스(burstiness)로, 문장 길이와 리듬이 얼마나 자주 달라지는지를 측정합니다. 매끈하고 균일한 텍스트는 더 ‘기계 같은’ 점수를 받으며, 점수가 올라갑니다. 반대로 문장이 여기저기 튀고(긴 문장 다음에 짧은 문장), 리듬이 들쑥날쑥한 글은 더 ‘인간 같은’ 것으로 점수가 나옵니다. 도구는 의심스럽다고 판단한 문장을 표시하고, 맨 위에 단 하나의 퍼센트 점수를 출력합니다.

모두가 그 퍼센트에 집중하기 때문에, 읽는 방법을 아는 것이 도움이 됩니다. 그 숫자는 사용자의 글 중 얼마나 많은 부분이 AI 생성처럼 보이는지에 대한 ZeroGPT의 추정치이지, 사용자가 실제로 AI를 썼는지의 여부를 측정한 값이 아닙니다. 40% 결과가 나온다고 해서 논문의 40%가 기계가 쓴 글이라는 뜻은 아닙니다. 모델이 문장들이 통계적으로 ‘평탄한’ 비율이 그만큼 된다고 판단했다는 의미입니다. 서로 다른 주장이고, 그 차이의 간극이 문제의 시작점이 됩니다.

이제 정확도 질문입니다. ZeroGPT는 약 98%의 정확도를 광고합니다. 독립적인 테스트는 더 복잡한 이야기를 들려줍니다. 같은 ‘알려진 AI’ 문단을 몇 번 돌리거나, 단어 몇 개만 바꿔도 점수는 크게 흔들릴 수 있습니다. 이런 불일치가 바로 ‘ZeroGPT는 정확한가’에 대한 진짜 답이며, 그렇기 때문에 한 번의 판독만으로는 어느 쪽으로도 결론을 내리기 어렵습니다.

더 큰 문제는 ‘실수로’ 누구에게 불이익이 가는가입니다. ZeroGPT의 오탐(false positive)은 영어 비(非)모국어 및 ESL(영어 제2언어) 작성자에게 특히 더 크게 영향을 미칩니다. 명확하고 단순하며 문법적으로 정확한 영어는 낮은 퍼플렉서티로 읽히는데, 이 탐지 도구들이 말하는 ‘AI’ 패턴과 정확히 일치하기 때문입니다. Liang et al. (2023)은 이러한 유형의 탐지기 7종이 비원어민 TOEFL 에세이의 약 61%를 AI로 플래그한 반면, 원어민은 약 5%에 불과하다는 점을 발견했습니다. 영어가 두 번째 언어라면, 단어 하나를 붙여 넣기 전에 이미 기초 비율(base rate)이 불리하게 쌓여 있습니다. 우리는 why AI detectors flag non-native writers에서 이 연구를 풀어 설명합니다.

독립적인 그림과 대비되는 주장 세트는 다음과 같습니다.

그렇다면 ZeroGPT 점수 중 무엇이 ‘안전’할까요? 어떤 임계값도 증거로 취급하기에는 충분히 안전하지 않습니다. 낮은 점수는 사용자를 ‘통과’시키지 못하고, 높은 점수도 ‘유죄’를 입증하지 못합니다. ZeroGPT의 기본 정확도가 그 무게를 지탱하기에 너무 불안정하기 때문입니다. 자신의 목소리로 진정으로 강력한 글을 쓰고, 기관 정책에 따라 AI 사용을 공개하며, 퍼센트는 판결이 아니라 수정하기 위한 거친 프롬프트로 취급하세요. AI 지원 초안을 자신의 문체로 되돌려 편집하는 상황이라면, 점수 추적용 어떤 요령보다 academic humanizer처럼 인용과 용어를 보호하는 도구를 사용하는 편이 더 나은 선택입니다.

자주 묻는 질문

Q: ZeroGPT는 정확한가요?

ZeroGPT는 약 98% 정확도를 주장하지만, 독립적인 결과는 일관되지 않으며 출처가 알려진 텍스트에서도 점수 변동 폭이 큽니다. 주류 탐지기 가운데 가장 덜 엄밀한 편이므로, 단 한 번의 ZeroGPT 점수는 어느 방향으로도 신뢰할 만한 증거가 아닙니다. 판결이 아니라 ‘거친 호기심’ 정도로 취급하세요.

Q: ZeroGPT 점수를 믿어야 하나요?

그 자체만으로는 어렵습니다. 점수가 불안정하고 대부분의 기관이 사용하는 도구가 아니기 때문에, ZeroGPT 결과는 공식 점검과 거의 관련이 없습니다. 의사결정이 중요하다면 여러 도구로 교차 확인하고, 버전 기록 같은 글쓰기 과정의 증거에 기대는 것이 좋습니다.

Q: ZeroGPT는 무료인가요?

네, ZeroGPT는 무료이고 로그인도 필요 없으며, 한 번 점검당 대략 15,000자 정도의 입력 한도가 있습니다. 다만 주의할 점이 있습니다. 많은 복제 사이트가 그 이름과 레이아웃을 모방하고, 정식 도구는 오직 zerogpt.com뿐입니다. 미확인 미러 사이트에 미발표 작업물을 붙여 넣는 것은 개인정보 보호상의 위험이 될 수 있습니다.

Q: ZeroGPT는 오탐을 하나요?

자주 그렇습니다. 그 불일치 때문에, 진짜 인간이 쓴 글도 AI로 플래그될 수 있습니다. 특히 명확하고 단순한 문장처럼 읽기 쉬운 텍스트나, 영어 비(非)모국어 사용자의 글이 더 많이 걸립니다. ZeroGPT에서 경고가 떴다고 해서 사용자가 잘못한 일을 했다는 증거가 되지는 않습니다.

Q: ZeroGPT는 어떻게 AI 점수를 계산하나요?

ZeroGPT는 의미를 기준으로 점수를 매기기보다 통계적으로 평가합니다. 주로 퍼플렉서티(perplexity, 문장 표현이 얼마나 예측 가능한지)와 버스티니스(burstiness, 문장 리듬이 얼마나 달라지는지)를 사용합니다. 매끈하고 고르게 이어지는 텍스트는 더 기계적인 것으로 읽혀 점수가 올라가고, 들쭉날쭉하고 덜 예측되는 글은 더 인간적인 것으로 읽혀 점수가 낮아집니다. 결과는 실제로 어떻게 작성되었는지를 증명하는 것이 아니라, 사용자의 텍스트가 얼마나 AI처럼 보이는지에 대한 추정치입니다.

Q: ZeroGPT 점수는 어느 수준이 안전하다고 보나요?

ZeroGPT 점수 중 ‘보장’으로 취급할 수 있는 것은 없습니다. 정확도가 일관되지 않고, 동일한 문단도 판독할 때마다 점수가 달라질 수 있기 때문입니다. 낮은 숫자는 글이 괜찮다는 증거가 되지 않고, 높은 숫자도 일탈이나 부정행위를 입증하지는 못하므로, 단 하나의 임계값만으로 사용자를 통과시키거나 유죄로 결론내릴 수는 없습니다. 대신 자신의 목소리로 강력하게 쓰고, 기관 정책에 따라 AI 사용을 공개하는 데 집중하세요. 목표 퍼센트를 맞추려는 방식으로 쫓아가지는 마세요.

학술용 AI Text Humanizer

인용문, 용어, 의미를 그대로 유지하면서 AI 보조 글쓰기를 본인의 학술적 문체로 바꿔 보세요.