Hva er GPTZero? Slik bruker du den til å oppdage AI-generert tekst

Siden lanseringen har OpenAIs ChatGPT blitt en bekymring for utdanningsinstitusjoner over hele verden ettersom studenter har begynt å bruke den til å skrive essays og jukse med vurderinger. Gitt hvor naturlig teksten som genereres av chatboten ser ut, har instruktører vanskeligere med å avgjøre om elevenes arbeid er originalt.

For å hjelpe lærere med å evaluere elevenes oppgaver, har en nyutdannet informatikk utviklet et verktøy kalt GPTZero, som avgjør om en tekst er kunstig generert. Denne artikkelen vil forklare hvordan verktøyet fungerer, hvordan du bruker det, og om det kan oppdage AI-generert innhold.

Hva er GPTZero, og hvordan fungerer det?

GPTZero er et AI-tekstanalysatorverktøy utviklet av Edward Tian, ​​en informatikkutdannet, for å hjelpe instruktører med å skille plagiert tekst fra originalt arbeid. Verktøyet sjekker forvirring og utbrudd i en tekst for å finne ut om den er kunstig generert eller laget av et menneske.

Uten å gå i detaljer, la oss se på hva disse begrepene betyr:

• Forvirring er et mål på teksttilfeldighet i Natural Language Processing (NLP). Tekst skrevet av et menneske har en tendens til å være mindre strukturert og mer uforutsigbar, så forvirringsverdien bør være høyere, mens en tekst generert av AI bør ha en lav forvirringsscore.
• Burstiness tar hensyn til andre variabler som ikke er tatt med i forvirring for å forbedre tekstanalysen. Begrepet refererer til utseendet til ikke-vanlige elementer i tilfeldige klynger. Tekst generert av AI har en tendens til å ha en mer konsistent struktur enn tekst skrevet av mennesker. Burstiness hjelper oss å identifisere det.

GPTZero Classic har vært offentlig tilgjengelig siden begynnelsen av 2023, og den er gratis å bruke fra mars 2023. Gratisversjonen har imidlertid en tegngrense på 5000 per dokument, og du kan bare batch-analysere tre dokumenter om gangen.

GPTZero tilbyr to premiumversjoner for å tilfredsstille behovene til lærere og brukere som ønsker å analysere millioner av ord hver måned: GPTZero Educator og GPTZero Pro. Tegngrensen per dokument er høyere i premiumversjoner enn i den gratis, og de lar deg analysere ubegrensede filer i batch-modus.

Følg disse trinnene for å abonnere på disse premiumversjonene:

1. Gå til GPTZero Dashboard.
2. Logg på med din eksisterende konto eller opprett en ny konto.
3. Etter å ha logget inn kan du oppgradere til en premiumversjon etter eget valg.

Slik bruker du GPTZero til å oppdage AI-generert tekst

I motsetning til ChatGPT, er ingen registrering nødvendig på GPTZero. Du kan ganske enkelt få tilgang til verktøyet via nettstedet. La oss se hvordan du kan få tilgang til og bruke det:

1. Gå til GPTZero.
2. Kopier og lim inn teksten du vil analysere i boksen eller last opp en fil.
3. Kryss av i boksen ved siden av Jeg godtar vilkår for bruk.
4. Klikk på Få resultater eske.

Etter fullføring av skanningen vil GPTZero fortelle deg om teksten er skrevet av et menneske eller generert av kunstig intelligens.

Kan GPTZero gjenkjenne AI-generert tekst på riktig måte?

For å teste hvor nøyaktig GPTZero oppdager AI-generert tekst, analyserer vi tre tekster i verktøyet: tekst generert av AI, menneskeskrevet tekst og AI-generert tekst som har blitt omskrevet av en annen verktøy. La oss se hvordan GPTZero reagerer på hver inngang.

Vi vil inkludere instruksjonene om hvordan vi utførte disse testene, slik at du kan kjøre dem selv.

1. Analysen av AI-generert tekst i GPTZero

For å analysere AI-generert tekst, la oss først generere teksten ved hjelp av ChatGPT, en AI-chatbot drevet av GPT-teknologi. For å gjøre det, følg disse trinnene:

1. Gå til OpenAI.
2. Klikk på Prøv ChatGPT knapp.
3. Logg inn eller registrer deg for en konto.
4. Skriv inn en forespørsel for å generere en tekst.
5. Kopier teksten som genereres av verktøyet når den er ferdig.
6. Analyser teksten i GPTZero, som vi forklarte tidligere.

Du kan også bruke andre AI skriveverktøy for å generere teksten du vil analysere.

GPTZero returnerte følgende utdata da vi analyserte AI-generert tekst i verktøyet:

Gitt at teksten var AI-generert, har GPTZero korrekt spådd at den sannsynligvis har blitt generert av AI. For å gjøre testen mer utfordrende, parafraserte vi teksten generert av ChatGPT.

2. Analysen av en parafrasert AI-generert tekst i GPTZero

Du kan velge mellom hundrevis av parafraserende verktøy for å parafrasere teksten. For dette tilfellet brukte vi Scribbr. Hvis du vil bruke det samme verktøyet, følg trinnene:

1. Gå til Scribbr.
2. Kopier den AI-genererte teksten vi analyserte i GPTZero tidligere og lim den inn i verktøyet.
3. Klikk på Omskriv knapp.
4. La Scribbr parafrasere teksten for deg.
5. Kjør GPTZero-testen igjen etter parafrasering.

Her er GPTZeros utgang da vi analyserte den parafraserte AI-genererte teksten:

Litt omskrivning har gjort det vanskelig for GPTZero å avgjøre om teksten er AI-generert.

3. Analysen av menneskelig skrevet innhold i GPTZero

I noen tilfeller returnerer verktøy som GPTZero et falskt positivt resultat, noe som betyr at de anser noe som feil når det ikke er det. For å finne ut om GPTZero også gir falske positiver, kjørte vi tre tester i verktøyet, og analyserte tre forskjellige menneskeskrevne tekster.

Av disse tre testene returnerte verktøyet én falsk positiv ved å oppgi at en original tekst var AI-generert; en gang klarte den ikke å konkludere, og en gang identifiserte den teksten korrekt som menneskeskrevet.

Hvis du vil teste menneskelig skrevet innhold, kan du enten kopiere det fra en autentisk kilde eller skrive noen avsnitt selv.

Bør du stole på GPTZero sine resultater?

Basert på vår testing kan det være risikabelt å stole utelukkende på resultatene av dette verktøyet. Faktisk vises en ansvarsfraskrivelse hver gang du genererer et resultat ved hjelp av verktøyet, som advarer lærere om ikke å stole på dette verktøyets resultater.

Så med mindre utvikleren av verktøyet garanterer at resultatene er idiotsikre, bør ikke lærere stole helt på det. Hvorfor? Fordi det ville være urettferdig for en student å få en dårlig karakter bare fordi GPTZero returnerte en falsk positiv.

Testene ovenfor ble utført i februar 2023. GPTZero er et ganske nytt verktøy for øyeblikket, så nøyaktigheten kan endre seg over tid.

Ikke alltid stol på AI-deteksjonsresultater

Som en potensiell motgift mot OpenAIs GPT-teknologi har GPTZero et stort potensial; den er imidlertid fortsatt i sin spede begynnelse. På dette tidspunktet er det ikke helt til å stole på. Men vil GPTZeros hovedversjon være i stand til å overvinne alle begrensninger og fange AI-innholdet med nøyaktighet? For å finne ut av det, må vi bare vente.

I tillegg til å gi studentene en annen grunn til å jukse med vurderinger, utgjør ChatGPT også en alvorlig cybersikkerhetstrussel.