Detektor AI od Grammarly: Co znamená jeho 1. místo v žebříčku RAID

Detektor AI od Grammarly je přesný při odhalování běžného, neupraveného AI textu. Grammarly uvádí, že dosahuje 99% přesnosti a že se umisťuje na 1. místě v kvalitě v RAID, v publikovaném benchmarku, který testuje detektory na sdílených datech. Takové umístění vypovídá o výkonu napříč jednou velkou, pevně danou sadou ukázek psaní. Nezaručuje to konkrétní skóre ve vašem vlastním eseji, v slovní zásobě vašeho oboru ani v konceptu, který jste několikrát upravovali.

Co kontroluje detektor AI od Grammarly

Detektor AI od Grammarly je bezplatný skenovací nástroj na grammarly.com. Vložíte text nebo nahrajete soubor a kliknete na Skenovat pro AI. Nástroj vrátí procentuální skóre toho, jak moc text vypadá jako text vygenerovaný AI, rozdělené do dvou kategorií, „Resembles AI text“ a „No AI text patterns found“. Celkové procento představuje podíl dokumentu v kategorii „Resembles AI text“. Někteří lidé vyhledávají tento nástroj jako „Grammarly AI checker“, což je stejný bezplatný detektor.

Detektor je jeden z nástrojů v psacím balíku Grammarly, vedle kontroloru gramatiky, kontroloru plagiátorství a AI humanizer. Grammarly uvádí, že identifikuje AI generovaný text od Grammarly stejně jako text z nástrojů, jako jsou ChatGPT, Gemini a Claude.

Grammarly Pro přidává agenta AI Detector, který jde dál než jen jedním skóre. Označí konkrétní pasáže, které vypadají jako generované AI, vysvětlí, proč daná fráze působí takovým dojmem, a nabídne přepis jedním kliknutím pro stejnou pasáž prostřednictvím Grammarlyho AI Rewriter.

Grammarly také uvádí, že je detektor navržen tak, aby nesprávně neoznačoval lidské psaní, a že jeho model se průběžně aktualizuje, jakmile jsou vydávány nové AI modely. Grammarly nástroj propaguje pro více typů psaní, včetně výzkumných prací, zpráv, článků a školních zadání, jako kontrolu, kterou je vhodné spustit před odevzdáním čehokoli z toho.

Co je RAID a co znamená #1 umístění Grammarly

RAID je akademický benchmark a Grammarly ho nevytvořilo. základní studie, vedená výzkumníkem Liamem Duganem a dalšími spoluautory, byla představena na konferenci Association for Computational Linguistics v roce 2024. Její abstrakt uvádí přímé sdělení. Mnoho komerčních i open-source detektorů tvrdí 99% přesnost nebo vyšší, ale jen velmi málo z nich je testováno na datasetech postavených tak, aby byly obtížné.

Datový set RAID je záměrně velký.

Mezi těmi 12 detektory autoři práce zjistili konzistentní slabé místo. Aktuální detektory jsou snadno oklamatelné pomocí adversariálních útoků, změn v přístupu k vzorkování, opakovaných penalizací a generativních modelů, které detektor během tréninku neviděl. Autoři následně zveřejnili celé své dataset i průběžný žebříček, který je otevřený pro další společnosti zabývající se detekcí, aby se mohly proti němu otestovat.

Ten veřejný žebříček je součástí toho, proč se u RAID dá provést kontrola podle pořadí. Ostatní výzkumníci a firmy vyrábějící detektory mohou spustit stejný dataset přes své vlastní nástroje a porovnat výsledky. To je něco jiného než údaj o přesnosti, který uvádí jedna konkrétní firma, aniž by existoval vnější způsob, jak si to ověřit.

Autoři práce popisují své vyhodnocení jako test „mimo doménu a adversariální robustnost“. Jednoduše řečeno, nezjišťovali pouze to, jak si detektor vede na textu podobném tomu, na čem byl trénovaný. Zároveň zkoumali, jak si každý detektor vede v doménách, na modelech a při útocích, které nemusely být součástí očekávání, pro která byl navržen.

Vlastní blog Grammarly uvádí, že Grammarly se umístilo na #1 z hlediska kvality v tomto žebříčku. Popisuje RAID jako test proti více než 670 000 textů, které pokrývají různé styly psaní, AI modely a pokusy o oklamání detektorů. Blog Grammarly také výslovně uvádí, že žádný AI detektor není na 100% přesný, ani ten, který se umístil na vrcholu.

Pořadí v žebříčku je relativní hodnocení, jednou měřené proti jedné sdílené, pevné sadě textů. Říká vám, jak si detektor vedl na tom daném datasetu.

Neříká, jak si ten samý detektor povede při hodnocení vašeho vlastního eseje. Vaše esej má vlastní slovní zásobu typickou pro obor a vaše vlastní zvyklosti při psaní a může projít několika koly vaší vlastní revize. RAIDův dataset testuje takové vzorce řízeným způsobem. Není postavený tak, aby kopíroval reálnou esej konkrétní osoby, a žádný benchmark výsledek, i kdyby byl sebevětší, nenahradí kontrolu vlastního návrhu přímo před odevzdáním.

AI funkce Grammarly a vaše AI skóre

Grammarlyho AI detektor nekontroluje pouze texty z AI nástrojů jiných společností. Jeho vlastní stránka uvádí, že umí identifikovat text vygenerovaný AI od Grammarly i od nástrojů jako ChatGPT, Gemini a Claude. Tohle tvrzení je důležité, pokud při tvorbě používáte vlastní AI funkce Grammarly.

Stránka s plány Grammarly uvádí jeho funkce jako oddělené položky. Opravné funkce pro gramatiku a pravopis jsou uvedené pod „Píš bez chyb“, zatímco generativní funkce jsou uvedené pod „Generujte text pomocí AI promptů“ a jsou dostupné v různých množstvích podle vašeho tarifu. Jde o dva různé typy pomoci. Oprava překlepu nebo špatně umístěné čárky nevygeneruje nové věty, zatímco když požádáte Grammarly, aby napsal nebo přepsal pasáž, generování proběhne.

Intenzivní používání funkce Grammarly's AI Rewriter nebo jeho generativních promptů je část návrhu, která se může projevit ve vašem AI skóre. Platí to zejména v případě, že místo úprav vlastního textu vygenerujete celé věty nebo odstavce. Student, který se drží pouze oprav gramatiky a pravopisu, nepoužívá tu část Grammarly, která generuje nový text. Samotné toto použití není pravděpodobným zdrojem upozornění ze strany Grammarlyho vlastního detektoru. Konkrétně pro akademické psaní naše hodnocení Alternativa k Grammarly AI Humanizer pro akademickou práci sleduje, jak Grammarlyho generativní funkce obstojí v blízkosti citací a odborných termínů. Pokud zvažujete Grammarly oproti jiným nástrojům pro výzkumnou práci nebo diplomovou práci, naše srovnání ProofreaderPro.ai vs Grammarly pokrývá i tuhle oblast.

Autorství: záznam o tom, jak jste psal/a

Funkce Grammarly pro autorství je samostatná od nástroje na odhalování AI a funguje spíš jako průběžný záznam než jedno jediné skóre. Sleduje dokument, jak ho píšete, a kategorizuje každou část: napsanou vámi, převzatou z online zdroje, nebo vygenerovanou pomocí AI. Autorství je součástí stejné sady jako Grammarlyho kontrola plagiátů a generátor citací. Označené AI skóre není jediný záznam, který mohou nástroje Grammarly vygenerovat pro daný text.

Pokud by si instruktor nebo editor někdy začal(a) dělat výhrady k AI skóre ve vaší práci, Autorství vám dá něco, co jim můžete ukázat nad rámec vašich vlastních slov. Jde o stejný princip jako při uchovávání vlastních konceptů a historie verzí. Tento přístup pokrýváme v Proces je novým důkazem. Záznam o tom, jak se daný text vyvíjel, působí přesvědčivěji než jedno jediné procento. Pokud se příznak změní ve formální spor, náš průvodce Jak se odvolat proti falešnému upozornění na AI detekci (manuál pro studenty i výzkumníky) popisuje další kroky.

Jak Grammarly propojuje svůj detektor a humanizer

Grammarlyho AI detektor a jeho AI humanizer jsou dva samostatné nástroje v rámci Grammarlyho sady. Každý má vlastní stránku a vlastní FAQ. Detektor je popisován jako model trénovaný na vzorcích AI a lidského textu. Humanizer je popisován jako nástroj vytvořený lingvisty a inženýry společnosti Grammarly. Přepisuje AI text do jednoho ze čtyř přednastavených hlasů, nebo do vlastního hlasu, který si vytvoříte z ukázky psaní.

Obě stránky se navzájem propojují v části s názvem "Přejděte dál". Funkce Grammarly Authorship je propojuje tím, že zobrazuje, které části dokumentu byly napsány, odkud byly převzaty online, nebo vygenerovány pomocí AI. Grammarlyho FAQ k humanizeru se vás přímo ptá, zda vám nástroj pomůže vyhnout se detektorům AI, a odpověď od Grammarly zní, že pro to není určený. Popisuje humanizer jako způsob, jak udělat psaní s pomocí AI srozumitelnější a přirozenější.

Grammarly a GPTZero

Grammarly a GPTZero sdílí mateřskou společnost. Zápatí webu Grammarly uvádí GPTZero v rámci stejné kategorie "Company" jako Superhuman a vlastní web GPTZero se popisuje jako součást rodiny Superhuman, která také vlastní Grammarly. Žádná z firemních stránek o detektorech ale neříká, že by si tyto dva nástroje sdílely detekční model, takže společné vlastnictví neříká nic o tom, zda se jejich skóre shoduje u stejného textu.

V praxi se může skóre od Grammarly a skóre od GPTZero na stejné eseji stále lišit, protože obě společnosti provozují a aktualizují své detektory odděleně. Pokud zkontrolujete jednu verzi v obou nástrojích, porovnejte pasáže, které označí každý z nich. Označené pasáže vám řeknou víc o vaší verzi, než o tom vypovídají dvě procenta. Podívali jsme se na vlastní čísla GPTZero, včetně jeho vlastních tvrzení o přesnosti, v naší recenzi GPTZero.

Porovnání Free vs Pro

Skenování Grammarly's AI detector je zdarma na grammarly.com: vložte nebo nahrajte text, klikněte na Scan for AI a získejte procentní skóre. Grammarly Pro stojí US$12 za měsíc a odemyká agenta AI Detector, včetně příznaků na úrovni pasáží a možností přepisů jedním kliknutím přes AI Rewriter. Grammarly Enterprise, pro větší organizace, používá cenový model Contact Sales místo uvedené ceny.

Povolení pro AI prompty v Grammarly se také liší podle tarifu: 100 za měsíc u Free, 2 000 za měsíc u Pro a neomezené povolení u Enterprise. Tato omezení se týkají generativních funkcí Grammarly, nikoli samotného skenování detektorem, které nemá na žádném tarifu uvedený limit. Podívejte se blíže na to, co bezplatná verze Grammarly pro výzkumné psaní vynechává, v naší recenzi bezplatné alternativy Grammarly pro akademické psaní.

Vysoké umístění v žebříčku je užitečná informace, ale není to slib, že váš esej bude dobře hodnocen. Pokud se návrh, který jste přepracovali s pomocí AI, stále umisťuje vysoko, náš academic humanizer je navržen tak, aby toto skóre snížil. Funguje ve vašem vlastním stylu a ponechává nedotčené vaše citace, odborné výrazy a čísla.

Často kladené otázky

Q: Používá Grammarly's AI humanizer stejný engine jako jeho AI detektor?

Grammarly popisuje oba nástroje jako samostatné věci, každý má vlastní stránku a vlastní vysvětlení, jak fungují. Detektor je popisován jako model natrénovaný na ukázkách lidského i AI textu a humanizer je popisován jako nástroj vytvořený jazykovědci a inženýry Grammarly. Na žádné z těchto stránek není uvedeno, že sdílejí model.

Q: Je AI humanizer navržen tak, aby fungoval společně s detektorem?

Ano. FAQ k Grammarly's humanizer uvádí, že nástroj není určen k tomu, aby lidem pomáhal obejít AI detektory. Doporučuje kombinovat humanizer s detektorem a s funkcemi Grammarly pro citace a Authorship, aby bylo používání AI transparentní.

Q: Propaguje Grammarly svůj humanizer a detektor jako spárovaný postup?

Ano. Obě stránky na sebe navzájem odkazují v sekci „Go beyond“. Funkce Authorship je propojuje tak, že ukazuje, které části dokumentu byly napsány, odkud byly převzaty online, nebo kde bylo použito AI.

Q: Způsobí používání Grammarly, že můj text bude vypadat jako AI?

Může, pokud se silně opřete o generativní funkce Grammarly. Detektor Grammarly identifikuje výstup z vlastních AI nástrojů stejným způsobem, jakým identifikuje výstup z ChatGPT, Gemini a Claude. Opravy gramatiky a pravopisu nejsou součástí tohoto signálu; text, který jste vygenerovali, nebo který jste s AI Rewriterem výrazně přepracovali.

Q: Je Grammarly AI checker zdarma?

Ano. Nástroj pro skenování na grammarly.com je zdarma: vložte nebo nahrajte text a získejte procentní skóre. Agent AI Detector, který nabízí označení na úrovni pasáží a přepisy jedním kliknutím, vyžaduje předplatné Grammarly Pro, které stojí US$12 za měsíc.

Q: Jak se Winston AI srovnává s AI detektorem od Grammarly?

Winston AI uvádí 99,98% přesnost, což je o něco více než tvrzení Grammarly o 99%. Nezávislé testy posunuly reálnou přesnost Winstonu zhruba na 75% až 83%, podle našeho rozboru přesnosti detektoru Winston AI. Grammarly zakládá své vlastní číslo na kombinaci interního testování a svého žebříčku RAID.

Q: Je Grammarly propojené s GPTZero?

Ano, prostřednictvím vlastnictví. Stránka Grammarly uvádí GPTZero v patičce webu vedle Superhuman a web GPTZero popisuje sám sebe jako součást stejné rodiny Superhuman, která vlastní Grammarly. Grammarly neuvádí, že by jeho detektor používal technologii GPTZero.

Q: Co měří žebříček Grammarly RAID?

Měří, jak si detektor Grammarly vedl vůči zveřejněné datové sadě RAID, ve srovnání s ostatními detektory, které RAID vyhodnocoval. Vlastní blog Grammarly popisuje tuto datovou sadu jako více než 670 000 textů napříč různými styly psaní a modely AI, včetně záměrných pokusů obejít detektory. Akademická studie stojící za RAID popisuje větší datovou sadu s více než 6 miliony generací, použitou pro testování detektoru, jež tvoří základ veřejného žebříčku. Umístění v RAID neříká, jak si ten samý detektor vede na libovolné jednotlivé eseji mimo tuto datovou sadu.

Akademický AI humanizer

Přepište koncepty s pomocí AI ve vlastním tónu, ponechte citace, technické termíny a čísla tak, jak jste je napsali.