Detektor AI firmy Grammarly: co oznacza jej miejsce #1 w rankingu RAID

Detektor AI firmy Grammarly jest skuteczny w wykrywaniu zwykłego, nieedytowanego tekstu tworzonego przez AI. Grammarly twierdzi, że osiąga 99% dokładności i zajmuje miejsce #1 pod kątem jakości w RAID, opublikowanym benchmarku, w którym porównuje się detektory na wspólnych danych. Tak wysoka pozycja odzwierciedla wyniki w ramach jednego dużego, stałego zestawu próbek tekstu. Nie gwarantuje jednak konkretnego wyniku dla Twojego własnego eseju, słownictwa właściwego dla Twojej dziedziny ani draftu, który był wielokrotnie poprawiany.

Co sprawdza detektor AI Grammarly

Detektor AI firmy Grammarly to bezpłatne narzędzie do skanowania na grammarly.com. Wklejasz tekst lub przesyłasz plik i klikasz Scan for AI. Narzędzie pokazuje procentowy wynik określający, ile tekstu wygląda na wygenerowane przez AI, podzielony na dwie kategorie: „Resembles AI text” oraz „No AI text patterns found”. Ogólny procent to udział dokumentu w kategorii „Resembles AI text”. Niektóre osoby szukają tego narzędzia jako „Grammarly AI checker”, czyli tego samego bezpłatnego detektora.

Detektor to jedno z narzędzi w pakiecie do pisania Grammarly, obok sprawdzarki gramatyki, sprawdzarki plagiatów i humanizera AI. Grammarly twierdzi, że identyfikuje treści generowane przez AI od Grammarly oraz z narzędzi takich jak ChatGPT, Gemini i Claude.

Grammarly Pro dodaje agenta AI Detector, który idzie dalej niż jedna ocena. Oznacza konkretne fragmenty wyglądające na wygenerowane przez AI, wyjaśnia, dlaczego dana fraza wygląda w ten sposób, i oferuje jedną operacją przepisaną wersję tego samego fragmentu przy pomocy Grammarly's AI Rewriter.

Grammarly podaje również, że detektor został zaprojektowany tak, aby unikać błędnego flagowania tekstu tworzonego przez człowieka, oraz że jego model jest aktualizowany na bieżąco, gdy pojawiają się nowe modele AI. Grammarly promuje to narzędzie w różnych typach pisania, w tym w pracach badawczych, raportach, artykułach oraz zadaniach szkolnych, jako kontrolę do uruchomienia przed oddaniem któregokolwiek z nich.

Co to jest RAID i co oznacza pozycja #1 Grammarly

RAID to akademicki benchmark, a Grammarly go nie stworzyło. Podstawowa praca, prowadzona przez badacza Liamo Duganę i współautorów, została zaprezentowana na konferencji Association for Computational Linguistics w 2024 roku. Jej streszczenie trafia wprost w sedno. Wiele komercyjnych i open source detektorów deklaruje dokładność 99% lub wyższą, ale bardzo niewiele z nich jest testowanych na zbiorach danych zbudowanych tak, by były trudne.

Zbiór danych RAID jest duży z założenia.

Na tych 12 detektorach autorzy pracy znaleźli spójną słabość. Obecne detektory da się łatwo oszukać atakami adwersarialnymi, zmianą strategii próbkowania, karami za powtórzenia oraz modelami generatywnymi, których detektor nie widział podczas treningu. Autorzy opublikowali pełny zestaw danych oraz uruchomili ranking na żywo, aby inni mogli testować.

Ten publiczny ranking jest jednym z powodów, dla których RAID da się zweryfikować. Inni badacze oraz firmy produkujące detektory mogą uruchomić ten sam zestaw danych w swoich narzędziach i porównać wyniki. To coś innego niż wskaźnik dokładności, który pojedyncza firma podaje bez możliwości zewnętrznej weryfikacji.

Autorzy pracy opisują swoją ewaluację jako test „odporności na dane spoza domeny oraz odporności adwersarialnej”. Najprościej rzecz ujmując, nie sprawdzili wyłącznie, jak detektor radzi sobie z tekstem podobnym do tego, na którym był szkolony. Sprawdzili też, jak każdy detektor działa na domenach, modelach i atakach, na które mógł nie być przygotowany.

Własny blog Grammarly twierdzi, że Grammarly zajęło miejsce #1 pod względem jakości w tym rankingu. Opisuje RAID jako test obejmujący ponad 670 000 tekstów, z uwzględnieniem różnych stylów pisania, modeli AI oraz prób oszukania detektorów. Na blogu Grammarly jest też wprost napisane, że żaden detektor AI nie jest w 100% dokładny, nawet ten, który plasuje się na pierwszym miejscu.

Pozycja w rankingu to wynik relatywny mierzony jednorazowo w oparciu o jeden wspólny, stały zestaw tekstów. Informuje, jak dany detektor wypadł na tym konkretnym zestawie danych.

Nie przewiduje, jak ten sam detektor oceni Twój własny esej. Twój esej ma własne, dziedzinowe słownictwo oraz własne nawyki pisania, a poza tym mógł przejść przez kilka rund Twojej własnej korekty. Zestaw danych RAID testuje takie wzorce w kontrolowany sposób. Nie jest stworzony, aby odtwarzać realny esej konkretnej osoby, a żaden wynik benchmarku, nawet bardzo duży, nie zastępuje bezpośredniego sprawdzenia własnego draftu przed złożeniem.

Funkcje Grammarly oparte na AI i Twój wynik AI

Grammarly's AI detector nie sprawdza wyłącznie tekstu tworzonego przez narzędzia AI innych firm. Na własnej stronie Grammarly podaje, że wykrywa tekst generowany przez AI w Grammarly, jak również w narzędziach takich jak ChatGPT, Gemini i Claude. To zdanie ma znaczenie, jeśli podczas redagowania korzystasz z własnych funkcji Grammarly opartych na AI.

Strona z planami Grammarly wymienia funkcje w osobnych pozycjach. Poprawki gramatyki i pisowni są wskazane w ramach „Pisania bez błędów”, natomiast funkcje generatywne w ramach „Generuj tekst za pomocą podpowiedzi AI”, dostępne w różnych ilościach zależnie od wybranego planu. Są to dwa różne rodzaje wsparcia. Poprawianie literówki lub źle postawionego przecinka nie generuje nowych zdań, podczas gdy poproszenie Grammarly o napisanie albo przepisanie fragmentu już tak.

Intensywne korzystanie z AI Rewriter w Grammarly albo z generatywnych podpowiedzi to ta część draftu, która może pojawić się w Twoim wyniku AI. Szczególnie dotyczy to sytuacji, gdy generujesz całe zdania lub akapity zamiast edytować własne teksty. Student, który ogranicza się do poprawek gramatyki i pisowni, nie korzysta z tej części Grammarly, która generuje nową treść. Sam fakt takiego użycia nie jest jednak prawdopodobnym źródłem flagi z detektora AI Grammarly. W szczególności dla pisania akademickiego nasza recenzja Alternatywa dla Grammarly AI Humanizer do pracy naukowej ocenia, jak funkcje generatywne Grammarly wypadają w pobliżu przypisów i terminów technicznych. Jeśli porównujesz Grammarly z innymi narzędziami do pracy badawczej albo pracy dyplomowej, nasze ProofreaderPro.ai vs Grammarly omawia również ten obszar.

Autorstwo: zapis tego, jak pisałeś

Funkcja Authorship w Grammarly jest niezależna od detektora AI i działa bardziej jak dziennik postępu niż pojedyncza ocena. Śledzi dokument w trakcie pisania i kategoryzuje każdą sekcję: wpisaną przez Ciebie, zaczerpniętą z internetowego źródła albo wygenerowaną za pomocą AI. Authorship jest częścią tego samego pakietu co narzędzie do wykrywania plagiatów Grammarly oraz generator cytowań. Wskazany wynik AI nie jest jedynym zapisem, jaki narzędzia Grammarly mogą wygenerować dla tekstu.

Jeśli instruktor lub redaktor kiedykolwiek podważy wynik AI w Twojej pracy, Authorship daje Ci coś, co możesz im pokazać, wykraczając poza samą treść Twoich słów. To ta sama idea, która stoi za zachowywaniem własnych wersji roboczych i historii zmian. Opisujemy to podejście w proces to nowy dowód. Zapis tego, jak rozwijał się fragment tekstu, jest bardziej przekonujący niż pojedynczy procent. Jeśli oznaczenie przekształci się w formalny spór, nasz przewodnik po odwołaniu się od fałszywie oznaczonej detekcji AI omawia kolejne kroki.

Jak Grammarly łączy swój detektor z humanizer AI

Detektor AI Grammarly i humanizer AI to dwa niezależne narzędzia w pakiecie Grammarly, każde z osobną stroną i własnym FAQ. Detektor jest opisywany jako model wytrenowany na próbkach tekstów AI oraz ludzkich. Humanizer jest opisywany jako narzędzie stworzone przez językoznawców i inżynierów Grammarly. Przerabia tekst AI na jeden z czterech wstępnie ustawionych głosów albo na głos niestandardowy, który tworzysz na podstawie próbki pisania.

Obie strony linkują do siebie w sekcji „Wyjdź poza” . Funkcja Authorship w Grammarly spina je razem, pokazując, które fragmenty dokumentu zostały wpisane, skąd pozyskano je online albo wygenerowano za pomocą AI. FAQ dotyczące humanizer AI pyta wprost, czy to narzędzie pomaga Ci obejść detektory AI, a odpowiedź Grammarly brzmi, że nie zostało do tego zbudowane. Opisuje humanizer jako sposób, by pismo wspierane AI brzmiało wyraźniej i bardziej naturalnie.

Grammarly i GPTZero

Grammarly i GPTZero mają wspólnego właściciela. Stopka strony Grammarly wymienia GPTZero w tej samej sekcji „Company” co Superhuman, a własna strona GPTZero opisuje się jako część rodziny Superhuman, która również jest właścicielem Grammarly. Żadna ze stron dotyczących detektora nie informuje, że te dwa narzędzia współdzielą model wykrywania, więc wspólne pochodzenie nie mówi Ci, czy ich wyniki będą się zgadzać dla tego samego tekstu.

W praktyce wynik Grammarly i wynik GPTZero dla tego samego eseju nadal mogą się różnić, ponieważ obie firmy uruchamiają i aktualizują swoje detektory osobno. Jeśli sprawdzisz jedną wersję roboczą w obu narzędziach, porównaj fragmenty, które każde z nich oznacza. Oznaczone fragmenty mówią Ci więcej o Twojej wersji roboczej niż same dwie wartości procentowe. Sprawdziliśmy liczby GPTZero, w tym jego własne twierdzenia dotyczące dokładności, w naszej recenzji GPTZero.

Wersja darmowa a Pro

Skan detektora AI w Grammarly jest darmowy na grammarly.com: wklej lub prześlij tekst, kliknij Scan for AI i otrzymaj wynik procentowy. Grammarly Pro kosztuje US$12 miesięcznie i odblokowuje agenta AI Detector, z oznaczeniami na poziomie fragmentów oraz przepisywaniem jednym kliknięciem przez AI Rewriter. Grammarly Enterprise, dla większych organizacji, korzysta z modelu wyceny Contact Sales zamiast ceny podanej na stronie.

Limit możliwości podpowiedzi AI Grammarly zmienia się również w zależności od planu: 100 miesięcznie w wersji Free, 2 000 miesięcznie w planie Pro oraz nieograniczony limit w planie Enterprise. Te limity dotyczą funkcji generatywnych Grammarly, a nie samego skanera detektora, który nie ma podanego limitu w żadnym planie. Aby przyjrzeć się bliżej temu, czego nie obejmuje darmowy poziom Grammarly pod kątem pisania prac badawczych, zobacz naszą recenzję darmowej alternatywy Grammarly do pisania akademickiego.

Wysokie miejsce w rankingu to cenna informacja, ale nie jest obietnicą dotyczącą twojego własnego eseju. Jeśli szkic, który poprawiłeś przy wsparciu AI, nadal uzyskuje wysoki wynik, nasz humanizer AI do pisania akademickiego jest zbudowany po to, by obniżać ten wynik. Działa w twoim własnym stylu i pozostawia nietknięte cytowania, terminy techniczne oraz liczby.

Najczęściej zadawane pytania

Q: Czy humanizer AI Grammarly korzysta z tego samego silnika co jego detektor AI?

Grammarly opisuje te dwa rozwiązania jako osobne narzędzia, każde ma własną stronę i własne wyjaśnienie tego, jak działają. Detektor jest opisywany jako model wytrenowany na przykładach tekstów ludzkich i tekstów AI, a humanizer jako narzędzie zbudowane przez lingwistów i inżynierów Grammarly. Żadna ze stron nie mówi, że używają tego samego modelu.

Q: Czy humanizer Grammarly jest zaprojektowany tak, aby działał obok detektora?

Tak. FAQ humanizera Grammarly mówi, że narzędzie nie jest przeznaczone do obchodzenia detektorów AI. Zaleca połączenie humanizera z detektorem oraz z funkcjami cytowań i Authorship w Grammarly, aby utrzymać przejrzystość korzystania z AI.

Q: Czy Grammarly promuje humanizer i detektor jako zestawiony, wspólny proces?

Tak. Obie strony odsyłają do siebie nawzajem w sekcji „Go beyond”. Funkcja Authorship łączy je ze sobą, pokazując, które części dokumentu zostały wpisane, skąd je zaczerpnięto online oraz które zostały wygenerowane przy użyciu AI.

Q: Czy użycie Grammarly sprawia, że moje pisanie wygląda jak AI?

Może, jeśli mocno polegasz na generatywnych funkcjach Grammarly. Detektor Grammarly identyfikuje wyjście z własnych narzędzi AI tak samo, jak identyfikuje wyjście z ChatGPT, Gemini i Claude. Korekty gramatyki i pisowni nie wchodzą w skład tego sygnału. Tekst, który wygenerowałeś lub mocno przerobiłeś przy pomocy AI Rewriter, już tak.

Q: Czy kontrola AI Grammarly jest darmowa?

Tak. Narzędzie do skanowania na grammarly.com jest darmowe: wklej lub prześlij tekst i uzyskaj procentowy wynik. Agent AI Detector, z flagami na poziomie fragmentów i przepisywaniem jednym kliknięciem, wymaga subskrypcji Grammarly Pro, która kosztuje US$12 miesięcznie.

Q: Jak Winston AI wypada w porównaniu z detektorem AI Grammarly?

Winston AI deklaruje 99,98% dokładności, czyli nieco więcej niż twierdzenie Grammarly o 99%. Testy niezależne umieściły rzeczywistą dokładność Winstona w przedziale około 75% do 83%, zgodnie z naszym rozbiciem dokładności detektora Winston AI. Grammarly opiera własną liczbę na połączeniu testów wewnętrznych oraz swojego rankingu RAID.

Q: Czy Grammarly jest powiązane z GPTZero?

Tak, poprzez własność. Na stronie Grammarly w stopce firmowej wymienia GPTZero obok Superhuman, a strona samego GPTZero opisuje siebie jako część tej samej rodziny Superhuman, która jest właścicielem Grammarly. Grammarly nie twierdzi, że jego detektor wykorzystuje technologię GPTZero.

Q: Co mierzy ranking RAID Grammarly?

Mierzy, jak detector Grammarly wypadł w porównaniu z opublikowanym zbiorem danych RAID, względem pozostałych detektorów, które RAID ocenił. Własny blog Grammarly opisuje ten zbiór danych jako ponad 670 000 tekstów w różnych stylach pisania oraz modelach AI, w tym celowe próby obejścia działania detektorów. Praca naukowa stojąca za RAID opisuje większy zbiór danych, obejmujący ponad 6 milionów generacji, użyty do testowania detektora, na którym opiera się publiczny ranking. Ranga RAID nie pokazuje, jak ten sam detektor radzi sobie na dowolnym pojedynczym eseju poza tym zestawem danych.

Akademicki AI humanizer

Przeredaguj szkice wspomagane przez AI we własnym stylu, zostawiając cytowania, terminy techniczne i liczby dokładnie tak, jak je napisałeś.