Bedöm om en text är skriven av en AI
Från Skolbok
AI har blivit en del av vardagen för eleverna. Ser de en uppgift som "onödig" och bara tar tid frånannat de tycker är roligare, är det lätt hänt att de tar hjälp av en AI istället för att anstränga sig. Men hur kan lärarna upptäcka elevtexter som skrivits med hjälp av en AI?
Testprogram
Det finns mängder med olika siter som använder sig av olika tetsprogram för att se om en text är skriven av en AI. Många klrara inte svenska. De flesta kostar pengar efter efter en testperiod eller efter att nog mucket text testats.
En gratisversion är Zero GPT. Den ger ofta felutslag på korta texter. Det finns ett känt exempel på när den testade sidan med tio Guds bud ur bibeln och merparten kom ut som skriven av en AI. Likaså har texter som jag själv skrivit och testat i Zero GPT gett utslag, men aldrig över 60%. Min egen uppfattning är att om elevens text är på minst 200 ord och Zero GPT ger ett utslag på 75% eller högre, så är texten skriven av en AI.
Humanizer
Elever är inte dumma. Precis som det finns testprogram finns det siter på Internet där det går att få texten omskriven så att olika testprogram inte ska ge utslag. Duktiga elevers texter brukar alltid ge lite utslag i testprogrammen, helt enkelt eftersom det är välskrivna texter. Har du en duktig elev som ständigt ligger på 0% på alla tester är det en indikation på att den eleven är så smart att den använder en AI men fixar till alla texterna efteråt.
AI som kontrollant
Ett enkelt sätt är att klistra in texten (anonymiserad) i en AI som ChatGPT och be den avgöra om den verkar vara skriven av en elev eller en AI, och vad grunden för bedömnningen ligger på.
Promptexempel
Du är lärare i svenska i grundskolan. Du har fått in texten TEXT från en elev som är 15 år och du misstänker att den skrivits av en AI. Gör en bedömning av texten och ge ett värde mellan 0 och 100 på hur stor andel av texten du tycker består av text skriven av en AI. 0 innebär att ingen del är skriven av en AI och 100 innebär att allt skrivits av en AI. Förklara dessutom varför du tycker att text verkar skriven av en AI ifall värdet är över 0. (TEXT) elevtext (/TEXT)
Fördelen med detta är att du använder en AI för att avslöja en AI. En elev som vet att du brukar kontrollera texter med tex. ZeroGPT kan aldrig justera texten så att den ger 0% utslag i ett testprogram.
AI som dubbelkontrollant
Ta en text, eller helst två: en prosatext och en sakprosatext, som du vet att en elev har skrivit i ett kontrollerat sammanhang. Ta sedan de två texterna och gör en jämförelse i en AI med den text du är misstänksam mot. På det viset kan du undvika felaktiga bedömningar i procent av ett arbete eftersom det är stilen som bedöms.
Promptexempel
Du är lärare i svenska i grundskolan och har en elev som är 15 år. Eleven har tidigare skrivit TESTTEXT1 och TESTTEXT2. Nu har du fått in texten TEXT från eleven och du misstänker att den skrivits av en AI. Gör en bedömning av TEXT och förklara om du tror att den är skriven av en AI och motivera även varför du tycker att TEXT verkar skriven av en AI, om du tror att någon annan än eleven skrivit TEXT. (TESTTEXT1) testtext1 (/TESTTEXT1) (TESTTEXT2) testtext2 (/TESTTEXT2) (TEXT) elevtext (/TEXT)
Bedöm utan AI
Vill du komma bort helt och hållet från att bedöma texter genom att själv använda en AI, med alla risker det medför att ge felaktiga bedömningar, kan du använda flera andra "traditionella" bedömningar.
LIX
Ett säkert kort är LIX-värdet. Du får lätt fram det genom att klistra in texten i en LIX-räkare: https://www.lix.se/index.php Ju längre text, ju säkrare värde.
Elevers LIX-värde i högstadiet överstiger sällan 35. Riktigt duktiga elever kan komma ända upp runt 50, speciellt i sakprosatexter. AI skriver nästan alltid på 50+. Det gör att det finns en viss risk att anklaga de duktigaste för att de använder AI eftersom värdet hamnar nära varandra.
TTR
Längre ner på samma sida finns TTR. Den ger felutslag på riktigt korta- och riktigt långa texter, men texter som elever skriver ligger sällan över 50% medan AI skrivna teter nästan alltid ligger över 50%.
OVIX
Samma gäller OVIX. Även den påverkas av längden på texten med högre värde ju längre texten är. Precis som med TTR skriver elever sällan texter som ligger över 50% medan AI skrivna texter nästan alltid ligger över 50%.
OVR
OVR slutligen är det bgästa värdet. Här ligger AI ofta över 90% medan de allra duktigaste eleverna sällan kommer över 80% och oftast ligger runt 60%. Fördelen med OVR är att den inte påverkas av textlängden, även om den kan ge felvärden på riktigt korta texter.