Co je GPTZero? Jak jej používat k detekci textu generovaného umělou inteligencí

Klíčové věci

• GPTZero je nástroj pro kontrolu umělé inteligence, který pomáhá učitelům rozlišovat mezi původními a uměle generovanými texty pomocí analýzy zmatků a burstity.
• GPTZero nabízí bezplatné a prémiové verze s různými funkcemi a omezeními, které uživatelům umožňují analyzovat miliony slov měsíčně.
• I když se GPTZero snažilo minimalizovat falešně pozitivní výsledky, pedagogové by se na jeho výsledky neměli plně spoléhat a měli by je používat opatrně, aby se vyhnuli nespravedlivému hodnocení.

Od svého spuštění se ChatGPT od OpenAI stal předmětem zájmu vzdělávacích institucí po celém světě, protože jej studenti začali používat k psaní esejů a podvádění při hodnocení. Vzhledem k tomu, jak přirozeně vypadá text generovaný chatbotem, mají instruktoři obtížnější určit, zda je práce studentů originální.

Aby pomohl učitelům při hodnocení úkolů studentů, vyvinul absolvent informatiky GPTZero, nástroj pro kontrolu umělé inteligence, který určuje, zda byl text uměle vytvořen.

To vše zní velmi dobře a dobře, ale dokáže GPTZero detekovat obsah vytvořený AI a jak je přesný?

Co je GPTZero a jak to funguje?

GPTZero je nástroj pro analýzu textu AI vyvinutý Edwardem Tianem, absolventem informatiky, aby pomohl instruktorům odlišit plagiát od původního díla. Nástroj kontroluje zmatenost a shluk textu, aby zjistil, zda je uměle vytvořený nebo vytvořený člověkem.

Aniž bychom zacházeli do podrobností, podívejme se, co tyto pojmy znamenají:

• Zmatenost měří náhodnost textu ve zpracování přirozeného jazyka (NLP). Text napsaný člověkem bývá méně strukturovaný a nepředvídatelnější, takže jeho zmatečnost by měla být vyšší. Naproti tomu text generovaný umělou inteligencí by měl mít nízké skóre zmatenosti.
• Burstiness zvažuje další proměnné, které nejsou zohledněny ve zmatku, aby zlepšila analýzu textu. Termín odkazuje na výskyt neobvyklých položek v náhodných shlucích. Text generovaný AI má tendenci mít konzistentnější strukturu než text psaný lidmi. Burstiness nám to pomáhá identifikovat.

GPTZero Classic je veřejně přístupný od začátku roku 2023 a je zdarma k použití. Bezplatná verze má však limit počtu znaků 5 000 znaků na dokument a najednou můžete analyzovat pouze tři dokumenty.

GPTZero nabízí tři prémiové verze pro uspokojení potřeb uživatelů, kteří chtějí analyzovat miliony slov měsíčně: Essential (cena 10 $ měsíčně), Premium (cena 16 $ měsíčně) a Professional (cena 23 $ měsíčně). Limit počtu znaků na dokument je v prémiových verzích vyšší než v bezplatné verzi a kromě jiných výhod vám umožňují provádět více skenů za hodinu.

Chcete-li se přihlásit k odběru těchto prémiových verzí, postupujte takto:

Navigovat do Web společnosti GPTZero.

Klikněte na kartu Dashboard v pravém horním rohu stránky.

Přihlaste se pomocí svého stávajícího účtu nebo si vytvořte nový účet.

Po přihlášení můžete porovnat dostupné plány a upgradovat na ten, který nejlépe vyhovuje vašim potřebám.

Případně, když jste na domovské stránce GPTZero, klikněte na tlačítko Upgrade ve spodní části textového pole a prohlédněte si, porovnejte a zakupte placený plán.

Jak používat GPTZero k detekci textu generovaného AI

Na rozdíl od ChatGPT není na GPTZero vyžadována žádná registrace. K nástroji se dostanete přes webovou stránku.

Jít do GPTZero.

Zkopírujte a vložte text, který chcete analyzovat, do pole nebo nahrajte soubor.

Klepněte na pole Zkontrolovat původ.

Po dokončení skenování vám GPTZero sdělí, zda text napsal člověk nebo jej vygenerovala umělá inteligence.

Jak používat rozšíření GPTZero Origin k detekci textu generovaného AI

Stažením bezplatného rozšíření Origin od GPTZero do vašeho prohlížeče Chrome můžete skenovat celé webové stránky a Dokumenty Google a hledat text generovaný umělou inteligencí. Tato nová funkce zjednodušuje proces ověřování informací online.

Navigovat do Stránka rozšíření Origin v Internetovém obchodě Chrome.

Kliknutím na Přidat do Chromu stáhněte rozšíření.

Dále potvrďte instalaci a pokračujte.

Po instalaci rozšíření se můžete přihlásit pomocí svého účtu Google nebo si vytvořit nový účet.

Chcete-li naskenovat webovou stránku nebo dokument Google, klikněte na tlačítko Origin na obrazovce a vyberte možnost Skenovat celou stránku.

Nyní budete moci zobrazit výsledky a určit, zda byl obsah napsán osobou nebo vytvořen AI.

Použití GPTZero k analýze vašeho psaní

Funkce, která odlišuje GPTZero od několika dalších nástrojů pro detekci AI, je to, že dokáže analyzovat vaše vzory psaní. Platforma nabízí historii skenování, kterou můžete použít ke kontrole jakéhokoli textu, který jste pomocí tohoto nástroje naskenovali.

Kliknutím na konkrétní výsledek vyhledávání se navíc zobrazí podrobnější údaje o vašem psaní. V podstatě budete moci vidět, proč bylo vaše psaní považováno za vytvořené lidmi nebo AI.

Pokud tedy například GPTZero označilo něco, co jste napsali, jako generované umělou inteligencí, přístup k analýze psaní vám sdělí důvody, proč tomu tak je, například že obsah byl málo komplikovaný a vysoce shlukovaný. Tyto problémy můžete opravit a zlepšit tak kvalitu, čitelnost a autenticitu svého obsahu.

Dokáže GPTZero správně rozpoznat text vygenerovaný AI?

Abychom otestovali, jak přesně GPTZero detekuje text generovaný AI, analyzujeme tři texty v nástroji: text generovaný AI, text psaný člověkem a text generovaný AI, který byl parafrázován jiným nástrojem. Podívejme se, jak GPTZero reaguje na každý vstup.

1. Analýza textu generovaného AI v GPTZero

Chcete-li analyzovat text generovaný umělou inteligencí, nejprve vygenerujte text pomocí ChatGPT, chatbota s umělou inteligencí využívajícího technologii GPT. Chcete-li to provést, postupujte takto:

Jít do OpenAI.

Klikněte na tlačítko Vyzkoušet ChatGPT.

Přihlaste se nebo se zaregistrujte a vytvořte si účet.

Zadejte libovolnou výzvu k vygenerování části textu.

Po dokončení zkopírujte text vygenerovaný nástrojem.

Analyzujte text v GPTZero, jak jsme vysvětlili dříve.

Když jsme provedli tento test, GPTZero reagovalo smíšenými výsledky na řadu textů napsaných AI. Občas nedokázalo žádným způsobem zjistit, že text byl vygenerován AI, zatímco v jiných správně předpokládal, že většinu textu tvoří AI.

Ke generování textu, který chcete analyzovat, můžete také použít jiné nástroje pro psaní AI.

2. Analýza parafrázovaného textu generovaného umělou inteligencí v GPTZero

Pro parafrázování textu si můžete vybrat ze stovek nástrojů pro parafrázování. V tomto případě jsme použili Scribbr. Pokud chcete použít stejný nástroj, postupujte takto:

Jít do Scribbr.

Zkopírujte text vygenerovaný AI, který jsme dříve analyzovali v GPTZero, a vložte jej do nástroje.

Klikněte na tlačítko Parafráze.

Nechte Scribbr parafrázovat text za vás.

Po parafrázování spusťte znovu test GPTZero.

Zjistili jsme, že mírné parafrázování znesnadnilo GPTZero určit, zda byl text vygenerován AI, ale celkově to bylo smíšené. Ještě bych dodal, že parafrázovaný výstup byl hrozné kvality. Text vlevo byl původní, zatímco text vpravo byl parafrázovaná verze.

3. Analýza obsahu psaného člověkem v GPTZero

V některých případech nástroje jako GPTZero vrátí falešně pozitivní výsledek, což znamená, že považují něco za nesprávné, když tomu tak není. Abychom zjistili, zda GPTZero také poskytuje falešně pozitivní výsledky, provedli jsme v nástroji několik testů, které analyzovaly různé kusy textu psané lidmi.

Výsledky GPTZero byly z větší části přesné, přestože jedna věta byla označena jako potenciálně AI.

Měli byste věřit výsledkům GPTZero?

Na základě našeho testování může být spoléhání se pouze na výsledky tohoto nástroje riskantní. Ve skutečnosti se při každém generování výsledku pomocí nástroje objeví prohlášení o vyloučení odpovědnosti, které varuje pedagogy, aby na výsledky tohoto nástroje nespoléhali.

Pokud tedy vývojář nástroje nezaručí, že jeho výsledky jsou spolehlivé, neměli by se na něj pedagogové plně spoléhat. Proč? Protože by bylo nespravedlivé, kdyby student dostal špatnou známku jen proto, že GPTZero vrátilo falešně pozitivní.

Snahy GPTZero minimalizovat falešně pozitivní výsledky

I když má před sebou ještě dlouhou cestu, GPTZero udělalo významný pokrok ve snižování falešných poplachů. Nový model hlubokého učení, který společnost nasadila, tyto snahy poháněl, díky čemuž je nástroj pro detekci AI mnohem spolehlivější než konkurenční služby.

Nový model hlubokého učení využívá rozmanitější ověřovací datovou sadu, která vychází ze zdrojů, jako je vzdělávací text, novinové články, příspěvky na sociálních sítích a obsah otázek a odpovědí. Tato rozšířená a rozmanitá datová sada umožňuje GPTZero lépe rozlišovat mezi daty generovanými lidmi a daty generovanými AI. Kromě toho společnost také tvrdí, že předpovědi GPTZero jsou „jistější“ než dříve.

Nevěřte vždy výsledkům detekce AI

Jako potenciální protilátka na technologii GPT OpenAI má GPTZero velký potenciál; má však před sebou dlouhou cestu. V tuto chvíli to není úplně důvěryhodné. Ale překoná hlavní verze GPTZero všechna omezení a zachytí obsah AI s přesností? Na to si budeme muset počkat.