Vad är GPTZero? Hur man använder den för att upptäcka AI-genererad text

Sedan lanseringen har OpenAIs ChatGPT blivit ett bekymmer för utbildningsinstitutioner över hela världen eftersom studenter har börjat använda den för att skriva uppsatser och fuska med bedömningar. Med tanke på hur naturlig texten som genereras av chatboten ser ut, har instruktörer svårare att avgöra om elevernas arbete är original.

För att hjälpa lärare att utvärdera elevernas uppgifter har en akademiker inom datavetenskap utvecklat ett verktyg som heter GPTZero, som avgör om en text har genererats på konstgjord väg. Den här artikeln kommer att förklara hur verktyget fungerar, hur man använder det och om det kan upptäcka AI-genererat innehåll.

Vad är GPTZero och hur fungerar det?

GPTZero är ett AI-textanalysverktyg utvecklat av Edward Tian, ​​en examen i datavetenskap, för att hjälpa instruktörer att skilja plagierad text från originalarbete. Verktyget kontrollerar förvirring och burstiness i en text för att avgöra om den är artificiellt genererad eller skapad av en människa.

Utan att gå in på detaljer, låt oss titta på vad dessa termer betyder:

• Bryderi är ett mått på textslumpmässighet i Natural Language Processing (NLP). Text skriven av en människa tenderar att vara mindre strukturerad och mer oförutsägbar, så dess förvirringsvärde bör vara högre, medan en text som genereras av AI bör ha ett lågt förvirringsvärde.
• Burstiness tar hänsyn till andra variabler som inte tas med i förvirring för att förbättra textanalysen. Termen hänvisar till förekomsten av icke-vanliga föremål i slumpmässiga kluster. Text som genereras av AI tenderar att ha en mer konsekvent struktur än text skriven av människor. Burstiness hjälper oss att identifiera det.

GPTZero Classic har varit tillgängligt för allmänheten sedan början av 2023, och det är gratis att använda från och med mars 2023. Den fria versionen har dock en teckengräns på 5000 per dokument, och du kan bara batchanalysera tre dokument åt gången.

GPTZero erbjuder två premiumversioner för att tillfredsställa behoven hos lärare och användare som vill analysera miljontals ord varje månad: GPTZero Educator och GPTZero Pro. Teckengränsen per dokument är högre i premiumversioner än i den kostnadsfria, och de låter dig analysera obegränsade filer i batch-läge.

Följ dessa steg för att prenumerera på dessa premiumversioner:

1. Gå till GPTZero Dashboard.
2. Logga in med ditt befintliga konto eller skapa ett nytt konto.
3. Efter att ha loggat in kan du uppgradera till en valfri premiumversion.

Hur man använder GPTZero för att upptäcka AI-genererad text

Till skillnad från ChatGPT krävs ingen registrering på GPTZero. Du kan enkelt komma åt verktyget via webbplatsen. Låt oss se hur du kan komma åt och använda den:

1. Gå till GPTZero.
2. Kopiera och klistra in texten du vill analysera i rutan eller ladda upp en fil.
3. Markera rutan bredvid Jag godkänner användarvillkoren.
4. Klicka på Få resultat låda.

När skanningen är klar kommer GPTZero att berätta om texten är skriven av en människa eller genererad av artificiell intelligens.

Kan GPTZero känna igen AI-genererad text korrekt?

För att testa hur exakt GPTZero upptäcker AI-genererad text analyserar vi tre texter i verktyget: text genererad av AI, mänsklig skriven text och AI-genererad text som har parafraserats av en annan verktyg. Låt oss se hur GPTZero svarar på varje ingång.

Vi kommer att inkludera instruktionerna om hur vi genomförde dessa tester så att du kan köra dem själv.

1. Analysen av AI-genererad text i GPTZero

För att analysera AI-genererad text, låt oss först generera texten med ChatGPT, en AI-chatbot som drivs av GPT-teknik. För att göra det, följ dessa steg:

1. Gå till OpenAI.
2. Klicka på Prova ChatGPT knapp.
3. Logga in eller registrera dig för ett konto.
4. Ange en uppmaning för att skapa en text.
5. Kopiera texten som genereras av verktyget när det är klart.
6. Analysera texten i GPTZero, som vi förklarade tidigare.

Du kan också använda andra AI-skrivverktyg för att generera texten du vill analysera.

GPTZero returnerade följande utdata när vi analyserade AI-genererad text i verktyget:

Med tanke på att texten var AI-genererad, har GPTZero korrekt förutspått att den sannolikt har genererats av AI. För att göra testet mer utmanande parafraserade vi texten som genererades av ChatGPT.

2. Analysen av en parafraserad AI-genererad text i GPTZero

Du kan välja bland hundratals parafraserande verktyg för att parafrasera texten. För det här fallet använde vi Scribbr. Om du vill använda samma verktyg, följ stegen:

1. Gå till Scribbr.
2. Kopiera den AI-genererade texten som vi analyserade i GPTZero tidigare och klistra in den i verktyget.
3. Klicka på Parafras knapp.
4. Låt Scribbr parafrasera texten åt dig.
5. Kör GPTZero-testet igen efter parafrasering.

Här är GPTZeros utdata när vi analyserade den parafraserade AI-genererade texten:

En liten omskrivning har gjort det svårt för GPTZero att avgöra om texten helt är AI-genererad.

3. Analysen av mänskligt skrivet innehåll i GPTZero

I vissa fall returnerar verktyg som GPTZero ett falskt positivt resultat, vilket betyder att de anser att något är felaktigt när det inte är det. För att avgöra om GPTZero också ger falska positiva resultat, körde vi tre tester i verktyget och analyserade tre olika mänskligt skrivna texter.

Av dessa tre tester returnerade verktyget en falsk positiv genom att ange att en originaltext var AI-genererad; en gång lyckades den inte dra en slutsats, och en gång identifierade den korrekt texten som mänsklig skriven.

Om du vill testa mänskligt skrivet innehåll kan du antingen kopiera det från en autentisk källa eller skriva några stycken själv.

Ska du lita på GPTZeros resultat?

Baserat på våra tester kan det vara riskabelt att enbart förlita sig på resultaten av detta verktyg. Faktum är att en ansvarsfriskrivning visas varje gång du genererar ett resultat med hjälp av verktyget, vilket varnar lärare att inte lita på detta verktygs resultat.

Så om inte verktygets utvecklare garanterar att dess resultat är idiotsäkra, bör pedagoger inte helt lita på det. Varför? Eftersom det skulle vara orättvist för en elev att få ett dåligt betyg bara för att GPTZero gav ett falskt positivt resultat.

Ovanstående tester genomfördes i februari 2023. GPTZero är ett ganska nytt verktyg för tillfället, så dess noggrannhet kan ändras med tiden.

Lita inte alltid på AI-detektionsresultat

Som ett potentiellt motgift mot OpenAI: s GPT-teknologi har GPTZero stor potential; den är dock fortfarande i sin linda. Vid det här laget är det inte helt pålitligt. Men kommer GPTZeros huvudversion att kunna övervinna alla begränsningar och fånga AI-innehållet med noggrannhet? För att ta reda på det får vi bara vänta.

Förutom att ge eleverna ytterligare en anledning att fuska med bedömningar, utgör ChatGPT också ett allvarligt hot mot cybersäkerhet.