Copyleaks는 AI를 감지하나요? 정확도와 대처 방법

교수님이 잠깐 언급합니다. 학과에서 제출물을 Copyleaks로 돌린다고요. 순간 가슴이 철렁 내려앉습니다. 혹시 글의 한 섹션을 정리하는 데 ChatGPT의 도움을 받았을 수도 있습니다. 아니면 애초에 AI를 전혀 건드리지 않았는데도, 끔찍한(?) 사례담을 읽은 탓에 불안할 뿐일 수도 있죠. 어떤 경우든, 매주 수천 명의 학생이 똑같이 묻는 질문이 있습니다.

그래서 Copyleaks는 AI를 감지할까요? 짧게 답하면, 네, Copyleaks는 대학과 기업 전반에서 쓰이는 실제 AI 탐지 도구이며, 기능도 나쁘지 않습니다. 하지만 더 긴 답(그리고 당신에게 진짜 도움이 되는 답)은 ‘얼마나 잘 맞추는지’, ‘어디서 틀리는지’, 그리고 ‘플래그가 의미하는 바가 무엇인지’를 따져보는 것입니다.

이 글은 누군가를 속이는 방법을 안내하지 않습니다. Copyleaks라는 도구가 여러분과 성적(또는 급여) 사이에 놓일 때, 패닉보다 더 나은 판단을 내리고 싶은 사람들을 위한 설명서입니다. 이제 Copyleaks가 무엇을 측정하는지, 정확도는 어느 정도인지, 그리고 내 글이 플래그를 받았을 때 무엇을 해야 하는지 차례로 살펴보겠습니다.

Copyleaks는 AI를 감지하나요, 그리고 어떻게 작동하나요?

Copyleaks는 엔터프라이즈 및 교육용 플랫폼으로 출발했으며, 표절 탐지에서 시작해 대형 언어 모델이 본격적으로 확산되며 AI 탐지를 추가했습니다. Copyleaks는 텍스트를 분석해 기계 글쓰기의 통계적 ‘지문’을 찾아, 글이 사람이 쓴 것인지 AI가 쓴 것인지에 대한 판정을 내립니다. 이 과정은 종종 문장 단위까지 내려갈 정도로 정교할 수 있습니다. 30개가 넘는 언어를 지원한다는 점도, 국제 학생 수가 많은 기관들이 도입한 이유 중 하나입니다.

네, Copyleaks는 ChatGPT, Claude, Gemini 등 주요 모델의 출력물을 잡도록 설계되어 있으며, 편집되지 않은 AI 텍스트에서 실제로도 종종 그렇게 작동합니다. 특정 도구를 ‘인식’할 필요가 없습니다. 대부분의 탐지기가 그렇듯, Copyleaks는 여러분의 글을 알려진 AI 정답 라이브러리와 대조하는 방식이 아니라, 글이 얼마나 예측 가능하고 얼마나 균일한지를 봅니다. AI 탐지 시스템의 전반적인 거동에 대한 더 넓은 맥락이 필요하다면, AI 탐지기의 정확도는 얼마나 되는지라는 글에서 해당 카테고리 전체를 다룹니다.

Copyleaks는 Turnitin과 같은 엔터프라이즈 영역에 속하며, 두 제품은 자주 비교됩니다. 하지만 당신에게 중요한 차이는 ‘이번 달에 어떤 브랜드가 더 날카로운가’가 아닙니다. 둘 다 확률 기반의 추정 도구라는 점, 그리고 점수를 매기는 입장에서 그 ‘틀림’이 어떤 방식으로든 실제 사람에게 의미 있게 작용할 수 있다는 점이 핵심입니다.

Copyleaks의 정확도는 얼마나 되나요? 주장 vs 독립 테스트

Copyleaks는 업계에서 가장 대담한 숫자들을 제시합니다. 범주 내에서 약 99% 수준의 정확도와, 소위 “industry-low”로 표현되는 0.2% 안팎의 오탐률을 내세우죠. 그 수치를 그대로 믿으면, 대략 500개 문서 중 1개꼴로 사람이 쓴 글이 잘못 플래그되는 셈입니다. 하지만 독립적인 테스트에서는 그에 가까운 재현 결과가 나오지 않았습니다.

오탐률이 0.2%와 6%~11%라는 건 전혀 다른 세계입니다. 예를 들어 200편짜리 수업이 있다면, 그 차이는 ‘진짜 논문 1편을 찾아낸다’와 ‘그보다 훨씬 많은, 수십 편, 을 오탐으로 잡아낸다’ 사이의 간극이 됩니다. 마케팅 수치와 실제 측정 수치는, 실제 사람들에게는 전혀 다른 수준의 위험을 뜻합니다. 따라서 단일 점수가 ‘판결(베리딕트)’처럼 취급될 때, 그 점수 자체보다 이 숫자를 염두에 두어야 합니다.

이 차이가 ‘스캔들’이라기보다는, 이런 주장이 어떤 방식으로 만들어지는지 보여주는 경고에 가깝다는 점도 중요합니다. 판매자는 유리한 조건에서 선별된 데이터로 테스트합니다. 반면 독립 연구자는 더 지저분하고 현실적인 샘플로 검증하는데, 학생들이 실제로 마주치는 환경은 바로 ‘지저분한’ 쪽에 가깝습니다.

왜 Copyleaks는 사람의 글을 플래그하나요?

AI 탐지에서 가장 불편한 패턴은 ‘실제로는 누구를 실수로 잡느냐’입니다. 탐지기는 퍼플렉서티(perplexity), 즉 단어 선택이 얼마나 예측 가능한지를 측정하는 지표에 기대는 경우가 많습니다. 그리고 우연히도 글이 깔끔하고 평이하며, 단어를 신중하게 골라 쓰인 사람의 글은 퍼플렉서티가 낮게 점수화될 수 있는데, 모델은 이 낮음을 기계적 특성으로 읽습니다. 결국 ‘단순함’이 불이익을 받는 구조가 됩니다.

가장 큰 비용은 비원어민 영어 작성자에게 돌아갑니다. 동료심사(peer-reviewed) 연구인 학술지 Patterns( Liang and colleagues, 2023 )에 실린 사례에서, 연구진은 비원어민이 쓴 TOEFL 에세이를 7개의 탐지기에 넣고 평균적으로 약 61%가 AI로 분류되는 것을 확인했습니다. 반면 영어 원어민이 쓴 에세이는 약 5% 수준이었죠. 잘못 분류된 에세이들은 어휘력이 더 낮았는데, 이는 퍼플렉서티 기반 탐지기가 정확히 찾아내려는 대상이기도 합니다. Copyleaks는 많은 언어를 지원한다고 보고하지만, 독립 테스트는 비원어민 영어 텍스트에서 그 오탐률이, 동료 제품들처럼, 상승한다는 신호를 보여줍니다.

그래서 Copyleaks 플래그가 단독으로 대화를 끝내는 근거가 되어서는 안 됩니다. 그것은 ‘고백(자백)’이 아니라 ‘더 자세히 확인하라’는 신호입니다. 수백 편 중 여러 번씩—정교한 국제 학생의 글이 챗봇으로 오인된다면—그 대시보드가 암시하는 확실성을 전달하고 있는 것이 아닐 수 있습니다.

Copyleaks가 내 글을 플래그했다면 무엇을 해야 하나요?

여러분의 대응은 사안의 ‘진실’에 전적으로 달려 있으니, 먼저 그 점부터 냉정하게 확인하고 그에 맞추어 사실 그대로 시작해야 합니다.

직접 작성했다면, 근거를 모으세요. 초안, 버전 기록, 메모, 출처를 유지하세요. 이는 처리 과정(process)을 보여 주며, 오탐(false flag)에 대한 가장 강력한 반박 자료가 됩니다. 탐지기를 만족시키기 위해 실제 작업을 다시 쓰면, 자연스러운 문장이 오히려 더 의심스러워 보일 수 있으니 피하는 게 좋습니다.

플래그가 당신에게 불리하게 사용되고 있다면, 차분히 이의 제기하세요. 점수는 증명이 아니며, 공정한 재검토를 받을 권리가 있습니다. 오탐(false AI-detection flag)을 이의 제기하는 방법 안내 글에서는 무엇을 준비해야 하는지, 대화를 어떤 틀로 구성해야 하는지 다룹니다.

AI를 실제로 사용했다면, 그것을 자신의 작업으로 재작성하고 다듬으세요. 아이디어를 자신의 말로 다시 구성하고, 자신의 분석을 덧붙이며, 인용은 정확히 유지하고, 학교나 저널이 요구하는 경우 AI 지원 사실을 공개하세요. 이는 정당한 경로이며, 기계가 쓴 텍스트를 자기 글인 것처럼 ‘위장’하는 일과는 분명히 다른 문제입니다.

AI 보조 초안을 다듬는 중이라면, 의미를 보호하는 도구를 쓰세요. 일반적인 리라이터(rewriter)는 인용을 깨뜨리고, 정밀한 용어를 모호한 표현으로 바꾸는 경향이 있습니다. 이는 한 문제를 다른 더 나쁜 문제와 맞바꾸는 셈이 됩니다.

마지막 포인트에서 학술 수준의 휴머나이저(humanizer)가 도움이 됩니다. 우리의 텍스트 휴머나이저는, 인용문과 용어, 논증을 보존하면서 AI 보조 학술 글쓰기를 자연스러운 산문으로 재구성하도록 설계되었습니다. 이 도구는 Copyleaks, Turnitin, GPTZero, ZeroGPT, Originality.ai에 대해 테스트되었고, ‘보장’이 아니라 ‘테스트된 성능’으로 결과를 설명합니다. 탐지기는 지속적으로 업데이트되며, 어떤 도구도 모든 버전에 영구히 앞서 있을 것을 약속할 수는 없기 때문입니다.

만약 걱정의 대상이 교실이 아니라 출판 측(투고 시스템)에서의 탐지라면, 같은 논리가 적용됩니다. 동일한 단계를 적용해 Originality.ai 점수를 낮추는 방법도 가능합니다. 단, 자신의 작업을 훼손하지는 않아야 합니다. 결론의 핵심은 동일합니다. 실제 품질과 명확한 공개가, 룰이 계속 바뀌는 ‘점수 게임에서 이기려는 시도’보다 더 오래 갑니다.

Copyleaks는 텍스트에 어떤 점수를 매기며, 어떤 점수가 ‘안전’한가요?

Copyleaks는 여러분의 아이디어를 읽지 않습니다. 문장에 담긴 통계적 ‘결’(texture)을 읽습니다. 대부분의 역할을 하는 신호는 두 가지입니다. 퍼플렉서티는 단어 선택이 얼마나 예측 가능한지를 측정하고, 버스트니스(burstiness)는 문장 길이와 리듬이 얼마나 다양해지는지를 측정합니다. 사람의 글은 대체로 예측 가능성이 낮고 들쭉날쭉한 경향이 있습니다. 반면 AI 초안은 매끄럽고 고르고, 예측하기 쉬운 편입니다. 그렇다면 Copyleaks는 실제로 어떻게 작동할까요? 글을 세그먼트 단위로 스캔해 각 부분에 점수를 매기고, 기계 생성으로 판단하는 구절을 하이라이트합니다.

돌려받는 리포트는 판결이 아니라 확률(probability)입니다. Copyleaks는 전체 AI 가능성을 표시하고, 의심스럽다고 판단한 개별 문장이나 단락을 표시합니다. 숫자가 높다는 것은 모델이 AI와 연관된 패턴을 다수 발견했다는 뜻입니다. 다만 누가 썼는지를 증명하지는 못하며, Copyleaks 스스로도 결과를 확률로 프레이밍합니다.

여기서 Copyleaks 정확도는 복잡해집니다. 회사는 강한 헤드라인 수치를 광고합니다. 독립 테스트는 더 부드러운(덜 낙관적인) 이야기를 들려줍니다.

그렇다면 Copyleaks는 정확한가요? 기본 설정에서 명확히 AI가 생성한 텍스트라면 종종 그렇습니다. 하지만 여러분에게 중요한 간극은 Copyleaks의 오탐률입니다. 주장된 0.2%와 관측된 6%~11%는, 성적이나 논문이 걸린 상황에서는 매우 다른 위험을 의미합니다.

이 위험은 고르게 퍼지지 않습니다. 비원어민 영어로 작성된 글이 훨씬 더 자주 플래그됩니다. Liang et al.(2023)은 비원어민 화자가 쓴 TOEFL 에세이에 7개 탐지기를 돌려, 약 61%가 AI로 잘못 표시된 반면 원어민 작성자는 약 5%였다고 보고했습니다. 거의 5명 중 1명 꼴, 즉, 5편 중 거의 1편, 은 모든 탐지기에서 동시에 플래그가 되었을 정도입니다. 원인은 퍼플렉서티가 ‘처벌하는’ 것과 정확히 같습니다. 더 단순하고 더 예측 가능한 어휘는, 평이함을 자동화와 동일시하는 모델에게 “기계적”으로 읽힙니다. 영어가 제2언어라면, 본인 잘못이 아니라도 이 위험을 더 많이 감수하게 됩니다. 우리는 이 패턴에 대해 왜 AI 탐지기는 비원어민 글을 플래그하는가에서 더 자세히 설명합니다.

그렇다면 Copyleaks의 어떤 점수가 ‘안전’할까요? 그 질문 자체가 잘못되었습니다. 공개된 임계값(threshold)이 존재하지 않습니다. Copyleaks는 일부 탐지기처럼 낮은 점수를 억제하지 않기 때문에, 진짜 사람의 글도 0이 아닌 AI 확률이 나타날 수 있습니다. 특정 숫자를 쫓는 행위는 글을 더 나쁘게 만들 수 있는 편집으로 이어질 수 있습니다. 대신, 진짜로 본인이 쓴 작업을 목표로 하되, 기관이 요구하는 곳에서는 AI 지원 사실을 공개하고, 점수가 낮더라도 그 낮음이 ‘조작’이 아니라 자연스러운 결과가 되도록 글의 완성도를 갖추는 편이 낫습니다. 본인의 AI 보조 초안을 편집하는 중이라면, Turnitin, GPTZero, Copyleaks, ZeroGPT, Originality.ai에 대해 테스트된 우리의 학술용 휴머나이저는 의미와 인용을 보호하도록 설계되었습니다.

자주 묻는 질문(FAQ)

Q: Copyleaks는 ChatGPT와 Claude를 감지하나요?

네. Copyleaks는 ChatGPT, Claude, Gemini를 포함한 주요 모델의 출력물을 감지하도록 설계되었고, 편집되지 않은 AI 텍스트를 정확하게 플래그하는 경우가 많습니다. 이는 특정 도구와의 일치 여부를 보는 것이 아니라 통계적 패턴을 읽기 때문에, 어떤 모델이 글을 생성했는지 알 필요가 없습니다.

Q: Copyleaks의 AI 탐지는 얼마나 정확한가요?

Copyleaks는 약 99%의 정확도와 0.2% 안팎의 오탐률을 주장하지만, 독립 테스트에서는 오탐이 6%~11% 수준에 더 가깝게 보고됩니다. 또한 비원어민 영어 작성자에서 오탐이 더 높게 나타납니다. 명확한 AI 텍스트에서는 비교적 신뢰할 만하지만 회색지대에서는 불확실성이 커지므로, 단일 점수는 판결이 아니라 ‘하나의 신호’로 취급해야 합니다.

Q: Copyleaks는 사람의 글을 플래그하나요?

그럴 수 있습니다. 깨끗하게 다듬어졌거나(클린) 비원어민 영어로 작성된 글이 특히 위험도가 높습니다. 탐지기는 낮은 퍼플렉서티(단순하고 예측 가능한 단어 선택)를 AI와 연관짓기 때문에, 세심하게 쓴 사람 글도 때때로 플래그될 수 있습니다. 글을 본인이 직접 썼다면, 도구에 맞추려고 실제 글을 편집하기보다 초안과 메모를 보존하세요.

Q: Copyleaks는 휴머나이즈된 AI 텍스트를 감지할 수 있나요?

때때로 가능합니다. 전반적으로 탐지기들은 휴머나이즈 및 패러프레이즈 텍스트에 대한 방어를 계속 추가해 왔고, 독립 연구들은 가장 강력한 방어들이 점차 더 잘 잡아내는 경향을 보여줍니다. 따라서 어떤 도구도 영구적으로 ‘보이지 않음’을 약속할 수는 없습니다. 지속 가능한 접근은 보장된 0점을 쫓는 것이 아니라, 휴머나이저를 통해 AI 보조 글쓰기를 실제로 더 잘 만들고 AI 사용 사실을 공개하는 것입니다.

Q: Copyleaks의 AI 탐지 결과에 대해 어떻게 이의를 제기하나요?

Copyleaks의 플래그는 다툴 수 있습니다. 점수는 증거가 아니라 확률이기 때문입니다. 먼저 근거부터 모으세요. 더 이른 초안, 개요, 연구 메모, 그리고 글이 어떻게 발전했는지 보여 주는 문서 버전 기록입니다. 독립 테스트는 특히 비원어민 영어에서 의미 있는 Copyleaks 오탐률이 존재한다고 보고하므로, 단 하나의 숫자가 단독으로 ‘비난(accusation)’의 근거가 되어서는 안 됩니다.

Q: Copyleaks는 영어 이외의 언어에서도 AI를 감지하나요?

Copyleaks는 30개가 넘는 언어에서 AI 탐지를 제공한다고 광고하므로 영어에만 국한되지 않습니다. 실제 사용에서는 비원어민 및 다국어 작성에서 오탐률이 상승하는 경향이 나타나기 때문에, 제2언어로 글을 쓰는 저자는 플래그를 더 각별히 주의 깊게 읽어야 합니다. 자신의 다국어 글에서 점수가 높게 나왔다면, 죄책감을 가정하기보다 리포트를 면밀히 확인하는 이유가 됩니다.

학술용 AI 텍스트 휴머나이저

인용문, 톤, 의미를 보존하면서 AI 보조 초안을 자연스러운 학술 산문으로 다시 다듬으세요.