Hvad er AI-detektorer, og virker de?

Mange AI-detektorer hævder, at de med en vis nøjagtighed kan fortælle dig, om en tekst er skrevet af et menneske eller af en software med kunstig intelligens.

Men disse detektorer er ret kontroversielle. Nogle hævder, at de ikke virker, og andre går endda så langt som til at kalde dem fup. 

Alligevel har skoleledere, marketingchefer, lærere med flere straffet folk for at skrive indhold, der bliver markeret af AI-detektorer. Så hvor nyttige er de egentlig?

Hvad er en AI-detektor egentlig?

En AI-detektor er et softwareværktøj, der er designet til at identificere indhold, der er genereret af systemer med kunstig intelligens (AI). I bund og grund skelner den mellem menneskeskabt indhold og indhold, der er genereret af AI-algoritmer som ChatGPT. 

Hvordan fungerer AI-detektorer?

AI-detektorer ligner meget plagiatkontroller. De tildeler en procentvis score: 0% betyder, at der er 0% chance for, at teksten er skrevet af AI. 100% betyder, at detektoren er 100% sikker på, at teksten er skrevet af AI.

Så når det drejer sig om AI-detektorer, vil vi have lave scorer.

Denne procentmodel kan være misvisende. En score på 40 % kan få det til at lyde, som om 40 % af artiklen er skrevet af AI, men i virkeligheden betyder det, at programmet kun er 40 % sikker på, at teksten er skrevet af AI. (Og hvad betyder det? Egentlig ingenting.) Nogle AI-detektorer fremhæver endda visse dele af teksten, som om det var de dele af teksten, der var skrevet af AI. 

For eksempel kan en lærer, der har brugt plagiatkontrol før, være bekymret over disse procentsatser, for hvis en opgave er 40 % plagieret, vil det være grund til disciplinære foranstaltninger. Men en score på 40 % på en AI-detektor kan være uklar og subjektiv. 

Eksempler på AI-detektorer

Et par eksempler på hjemmesider, der hævder at kunne opdage AI-skrevet tekst, er:

• Originalitet.ai
• Undetectable.ai
• GPTZero
• Quillbot

Er AI-detektorer pålidelige?

Her er et skærmbillede af et AI-detektionsresultat fra Originality.ai, som på sin hjemmeside hævder at have "99% AI-detektionsnøjagtighed".

Programmet er ca. 70% sikker på, at teksten er skrevet af AI, hvilket betyder, at der er en meget stor chance for, at teksten er skrevet af AI-software. En person, der har skrevet denne tekst, kunne få problemer i skolen eller på arbejdet på grund af en så høj AI-score.

Der er bare ét problem: Den tekst, som Originality.ai scannede "med 99 % nøjagtighed" på billedet, er de første 100 ord af The Art of War af Sun Tzu, som blev skrevet i det femte århundrede f.Kr. Så jeg tror, vi kan være 100 % sikre på, at den ikke er skrevet af ChatGPT.

Det fører os til det principielle spørgsmål: Er AI-detektorer nøjagtige? Nej, det er de ikke. 

OpenAI bekræftede, at AI-detektorer ikke virker. Cornell University har udgivet en artikel, der påpeger, at AI-detektorer er forudindtagede over for personer, der ikke har engelsk som modersmål. Alligevel har universitetsprofessorer dumpet hele klasser af studerende, fordi ChatGPT påberåbte sig æren for deres arbejde, når de blev spurgt. 

Når det er sagt, hævder nogle mennesker, at AI-detektorer er troværdige, de giver bare ikke så entydige svar, som de måske ser ud til. 

Disse programmer har en tendens til at have en lav frekvens af falske negativer, men en høj frekvens af falske positiver. Med andre ord, hvis et AI-detektionsprogram siger, at noget ikke er AI, så kan du være ret sikker på, at det ikke er AI. Men hvis den siger, at noget er AI, så betyder det ofte ikke ret meget. Og hvis nogen beskylder dig for at bruge kunstig intelligens, fordi du har fået et højt procentuelt resultat fra en AI-detektor, så spørg dem, om de anvender den samme logik på Sun Tzu.

Så hvordan kan jeg vide, om en forfatter eller studerende bruger AI til at skrive?

Se på tidsstemplerne i Google Docs

Hvis du virkelig vil vide, om nogen bruger kunstig intelligens til at skrive deres arbejde, kan du bede dem om at skrive i Google Docs og give dig linket. På den måde kan du gå ind i dokumenthistorikken og se tidsstemplerne for at tjekke, hvor lang tid det tog dem at skrive det.

Brug Originality.ai-plugin'et (men ignorer AI-scoren)

Originality.ai har et Chrome-plugin, som giver dig mulighed for at se en optagelse af skriveprocessen i et hvilket som helst Google Doc, selv om resultaterne af AI-kontrollen er unøjagtige. På den måde kan du tjekke, om nogen har indsat et stykke tekst på et tidspunkt fra en ekstern kilde. 

Tjek for plagiat

Når det er sagt, bør du først og fremmest tjekke teksten for nøjagtighed og plagiat, før du tjekker for AI. Selvom ChatGPT er det, der har bragt AI i offentlighedens søgelys, laver den stadig mange fejl, som f.eks. at kopiere store tekststykker fra mange kilder på nettet og hallucinere. Der er andre virksomheder (som TypeTone), der tilbyder et produkt af højere kvalitet og ikke plagierer.

Mens en person kan plagiere ved at tage dele af teksten fra et par forskellige kilder, har AI-bots af lavere kvalitet en tendens til at plagiere ved at kopiere små dele af teksten fra mange forskellige kilder. Men når de små plagierede bidder lægges sammen, kan en stor del af teksten stadig være plagieret. Og selv om vi har fastslået, at en høj AI-score ikke betyder meget, er en høj plagiat-score et alvorligt problem i de fleste akademiske miljøer og arbejdsmiljøer. 

Husk på det: En lav score er ikke ensbetydende med god skrivning

Husk ordsproget: "Det er menneskeligt at fejle". Mennesker begår fejl, og det ved AI-detektorerne. Det betyder, at hvis en opgave er fyldt med grammatiske fejl og akavet tekst, så kan det betyde, at den får en bedre score af AI-detektorerne. Nogle gange, når en tekst er grammatisk korrekt, er der større sandsynlighed for, at den bliver markeret som AI-skrevet.

AI er skabt af mennesker, og nogle gange betyder det, at den har menneskelige fordomme. For eksempel er AI-detektorer blevet beskyldt for at være hårdere dommere, når de scanner indhold skrevet af folk, der taler engelsk som andetsprog. Personer, der ikke har engelsk som modersmål, skriver måske på et mere internationalt, neutralt engelsk, der er mindre afhængigt af slang og lokale talemåder. AI-detektorer kan markere dette som mere sandsynligt, at det er skrevet af ChatGPT.

Hvis du bruger software til at hjælpe dig med at læse korrektur og tjekke din grammatik, f.eks. Grammarly, er der større sandsynlighed for, at det, du skriver, også bliver markeret som skrevet af kunstig intelligens af mange af de samme grunde, som er nævnt ovenfor.

På den måde kan det virke, som om AI-detektorer faktisk straffer tekster for at være mere grammatisk korrekte. Så husk dette: En lav AI-score er ikke lig med god skrivning, og en høj AI-score er ikke lig med dårlig skrivning.

Ikke alle AI-programmer er skabt lige

Hos TypeTone anerkender vi vigtigheden af at udtrykke det unikke i din tone og stemme. Kunstig intelligens behøver ikke at producere ukreativt, plagieret og unøjagtigt indhold. Vores digital workers og chatbot er helt på linje med de mest moderne EU-teknologiregler, og vi viser en dedikation til kvalitet, der går ud over sjuskede løfter. 

Typetone leverer AI-medarbejdere og et AI-chatværktøj, der er perfekt til moderne marketingteams. Vores AI-software er bare bedre - den er sikker, følger reglerne (GDPR-overholdelse, tjek!) og matcher dit brand perfekt. 

Prøv Typetone Chat og se, hvordan det kan sætte skub i dine marketingmål. Planlæg en demo i dag!

‍