Viktige poeng
- GPTZero er et verktøy for å identifisere AI-generert tekst, spesielt utviklet for lærere. Det benytter seg av analyser av kompleksitet og variasjon i teksten for å skille mellom originalt og kunstig innhold.
- Verktøyet tilbys i både gratis- og betalingsversjoner, hvor de betalte alternativene gir tilgang til flere funksjoner og muligheten til å analysere større mengder tekst.
- Selv om GPTZero jobber med å redusere feilaktige positive resultater, er det viktig for lærere å ikke stole blindt på verktøyet, men heller bruke det som et supplement i vurderingsprosessen.
Etter lanseringen har OpenAIs ChatGPT skapt bekymring innen utdanningssektoren verden over. Studenter har begynt å bruke den til å generere oppgaver og jukse på eksamener. Siden teksten som produseres av chatboten er så naturtro, har lærere problemer med å avgjøre om elevenes arbeid er deres eget eller generert av en AI.
For å hjelpe lærere med å vurdere studentoppgaver, utviklet en nyutdannet innenfor informatikk, GPTZero, et verktøy som analyserer tekst og identifiserer om den er skapt av kunstig intelligens.
Dette høres ut som en god løsning, men spørsmålet er om GPTZero virkelig kan identifisere AI-skapt innhold, og hvor pålitelig er det?
Hva er GPTZero og hvordan fungerer det?
GPTZero er et analyseverktøy for AI-tekst, skapt av Edward Tian, en utdannet informatiker. Målet er å hjelpe lærere å skille plagiert tekst fra originalt arbeid. Verktøyet analyserer kompleksitet og variasjon i teksten for å finne ut om den er laget av et menneske eller en maskin.
Uten å gå for dypt inn i tekniske detaljer, la oss se nærmere på hva disse konseptene betyr:
- Kompleksitet, eller «perplexity» måler graden av tilfeldighet i en tekst ved hjelp av naturlig språkbehandling (NLP). Menneskelig tekst er ofte mindre strukturert og mer uforutsigbar, noe som gir høyere kompleksitet. AI-generert tekst har som regel lavere kompleksitet.
- Variasjon, eller «burstiness», ser på andre aspekter som ikke fanges opp av kompleksiteten for å forbedre tekstanalysen. Dette begrepet refererer til forekomsten av uvanlige elementer i klynger. AI-tekst tenderer til å ha en jevnere struktur enn menneskelig tekst, og «burstiness» hjelper oss å identifisere det.
GPTZero Classic ble lansert tidlig i 2023 og er tilgjengelig for gratis bruk. Den gratis versjonen har en begrensning på 5000 tegn per dokument, og du kan bare behandle tre dokumenter om gangen.
GPTZero tilbyr tre premiumversjoner for de som ønsker å analysere store mengder tekst: Essential (10 dollar per måned), Premium (16 dollar per måned) og Professional (23 dollar per måned). Premiumversjonene har høyere tegngrenser og lar deg utføre flere analyser per time.
For å abonnere på en premiumversjon, gjør du følgende:
Alternativt kan du klikke på «Oppgrader»-knappen nederst i tekstboksen på GPTZero sin hjemmeside for å se, sammenligne og kjøpe en betalt plan.
Hvordan bruke GPTZero for å identifisere AI-generert tekst
I motsetning til ChatGPT, krever ikke GPTZero registrering. Du kan bruke verktøyet direkte på nettsiden.
Etter analysen, vil GPTZero gi deg en indikasjon på om teksten er skrevet av et menneske eller generert av AI.
Slik bruker du GPTZeros Origin-utvidelse for å identifisere AI-generert tekst
Ved å installere GPTZeros gratis Origin-utvidelse i Chrome, kan du analysere hele nettsider og Google Dokumenter for AI-generert tekst. Dette gjør det lettere å verifisere informasjon på nettet.
Du vil deretter få resultatet som viser om innholdet er skrevet av en person eller generert av AI.
Bruk av GPTZero for å analysere din egen skriving
En funksjon som skiller GPTZero fra andre AI-detektorer, er dens evne til å analysere dine egne skrivemønstre. Plattformen har en skannehistorikk som lar deg se tilbake på all tekst du har analysert.
Ved å klikke på et spesifikt søkeresultat får du tilgang til mer detaljert informasjon om din skriving. Du vil se hvorfor teksten din ble vurdert som menneskelig eller AI-generert.
Hvis GPTZero markerer noe du har skrevet som AI-generert, kan du se analysen for å finne ut hvorfor, som lav kompleksitet og høy variasjon. Du kan deretter endre teksten for å forbedre kvaliteten og lesbarheten.
Kan GPTZero gjenkjenne AI-generert tekst korrekt?
For å teste nøyaktigheten til GPTZero, analyserte vi tre typer tekst: AI-generert tekst, menneskelig tekst og AI-tekst som har blitt omskrevet. La oss se hvordan GPTZero reagerte på hver av dem.
1. Analysen av AI-generert tekst i GPTZero
For å analysere AI-generert tekst, brukte vi ChatGPT for å produsere et tekststykke. Følg disse trinnene:
Resultatene var blandet. Noen ganger klarte GPTZero ikke å identifisere AI-teksten, mens andre ganger konkluderte den korrekt at det meste av teksten var generert av AI.
Du kan også bruke andre AI-skriveverktøy for å generere tekst.
2. Analysen av parafrasert AI-generert tekst i GPTZero
Det finnes mange parafraseringsverktøy tilgjengelig. Vi brukte Scribbr. Følg trinnene nedenfor for å bruke det samme verktøyet:
Vi fant ut at parafrasering gjorde det litt vanskeligere for GPTZero å identifisere AI-teksten, men resultatene var blandet. Den omskrevede teksten var også av dårlig kvalitet. Teksten til venstre er originalen, mens teksten til høyre er den omskrevede versjonen.
3. Analysen av menneskelig skrevet innhold i GPTZero
Noen ganger kan verktøy som GPTZero gi falske positive resultater, som betyr at de markerer noe som feilaktig. For å undersøke dette testet vi ulike menneskeskrevne tekster.
GPTZeros resultater var stort sett korrekte, selv om en setning ble identifisert som potensielt AI-skrevet.
Bør du stole på GPTZeros resultater?
Basert på våre tester, er det risikabelt å stole blindt på resultatene fra dette verktøyet. Verktøyet har en ansvarsfraskrivelse som advarer lærere mot å stole fullt og helt på resultatene.
Med mindre utvikleren garanterer at resultatene er idiotsikre, bør ikke lærere basere karaktersettingen utelukkende på dette verktøyet. Det ville være urettferdig å gi en student dårlig karakter bare fordi GPTZero returnerte et falskt positivt resultat.
GPTZeros arbeid for å redusere falske positiver
Selv om det er rom for forbedring, har GPTZero gjort fremskritt i å redusere falske positive resultater. En ny dyplæringsmodell skal ha gjort det mer pålitelig.
Den nye modellen bruker et bredere datasett, med kilder som pedagogiske tekster, avisartikler, innlegg på sosiale medier og spørsmål og svar-innhold. Dette gjør at GPTZero kan skille mellom menneskeskapt og AI-generert tekst på en bedre måte. Selskapet hevder også at GPTZeros prediksjoner er mer «sikre» enn tidligere.
Stol ikke blindt på AI-deteksjonsresultater
GPTZero har et stort potensial som en mulig motgift mot OpenAIs GPT-teknologi, men det er fortsatt et stykke igjen. Det er ikke fullt pålitelig enda. Spørsmålet er om den endelige versjonen vil være i stand til å identifisere AI-innhold med høy nøyaktighet. Det gjenstår å se.