Elever motsätter sig verktyg för ögonspårning i ett distansprov

Webbkameror spårar ögon- och huvudrörelser, mikrofoner registrerar rumsljud och algoritmer registrerar hur ofta motivet rör på musen.

Eric Johnson, en integritetsmedveten datavetenskapsstudent som förbereder sig för sitt första år vid University of Miami, var orolig i höstas när han fick veta att två av hans professorer skulle kräva att han skulle använda Proctorios digitala proctoring -programvara för sina klasser, enligt Motherboard.

Programvaran förvandlar elevernas datorer till kraftfulla observatörer: webbkameror spårar ögon- och huvudrörelser, mikrofoner registrerar rumsljud och algoritmer registrerar hur ofta motivet rör på musen, rullar upp och ner på sidan och trycker på tangenter. Programmet flaggar alla beteenden som algoritmen anser vara misstänkta för senare granskning av klassläraren.

Till slut behövde Johnson aldrig använda Proctorio. Strax efter att han började twittra om sina bekymmer och lägga upp en enkel kodanalys av programvaran på Pastebin upptäckte han att hans IP-adress hade förbjudits från företagets tjänster. Han fick också ett direktmeddelande från Proctorios vd Mike Olsen, som krävde att han skulle ta bort inlägg på Pastebin. Johnson vägrade att göra det och väntar nu för att se om Proctorio kommer att vidta mer specifika rättsliga åtgärder, som den har gjort med andra kritiker under de senaste veckorna.

Hans fall är bara ett exempel på hur studenter gör uppror mot användningen av digital proctoring-mjukvara och den aggressiva taktik som används av företag som svar på dessa ansträngningar.

Under de senaste veckorna har studenter lanserat online-petitioner som uppmanar universitet runt om i världen att avstå från verktygen, och fakulteten på vissa campus, som UC Santa Barbara, har lanserat liknande kampanjer, med argumentet att universiteten borde utforska nya former av bedömning snarare än observation. studenter.

"Vi måste verkligen tänka länge och noggrant på hur vi anpassar oss," sa Jennifer Holt, professor i film och media vid UCSB, till Motherboard. "Vi måste skydda våra elever."

Videoövervakning hemma

Algoritmisk kontrollmjukvara har funnits i flera år, men dess användning har skjutit i höjden eftersom covid-19-pandemin har tvingat skolor att snabbt gå över till distansundervisning. Proctoring-företag citerar studier som visar att 50 till 70 procent av studenterna kommer att försöka lura systemet på något sätt och varnar för att fusk kommer att frodas om studenter lämnas utan tillsyn i sina egna hem.

Liksom många andra teknikföretag invänder de också mot förslaget att de är ansvariga för användningen av deras programvara. Medan deras algoritmer upptäcker beteende som anses misstänkt av applikationens utvecklare, hävdar dessa företag att det slutliga beslutet om fusk har ägt rum i händerna på klassläraren.

"Varje plan som kräver att skolor helt enkelt ska sluta använda proctoring kommer att göra fusk vanligare än det redan är, vilket utgör ett allvarligt hot mot all högre utbildning", skrev Scott McFarland, VD för ProctorU, en annan proctoring-tjänsteleverantör, till Motherboard.

Genom att jämföra den avskräckande effekten av hans produkt med den av mer utbredd videoövervakningsteknik, tillade han: "Vi kanske inte gillar tanken på att bli tittade varje gång vi besöker en bank eller butik, men ingen föreslår att filma dem."

Det finns få peer-reviewed bevis på hur digital kontroll påverkar elevernas ärlighet och förmåga att ta prov, och den lilla studien i ämnet ger ingen tydlig konsensus.

En studie från 2018 av 2 686 studenter i 29 kurser visade att de vars prov inte spårades av Proctorio fick 2,2 procent lägre poäng än de vars prov gjorde det. Författarna drog slutsatsen att resultaten sannolikt var resultatet av bedrägeri från studenter som inte använde Proctorio.

Men en studie från 2019 av 631 studenter fann att testpersoner som upplevde högre nivåer av ångest under proven presterade sämre, och att elever som spårades genom övervakningsprogram upplevde mer ångest än de som inte gjorde prov. .

En bild från Proctorios referensmaterial som beskriver hur systemet mäter "misstankenivåer" under studenters prov.

I bakgrundsdokument som Proctorio tillhandahåller till universitet förklarar företaget att dess programvara upptäcker om en testtagares "misstänksamhetsnivå" vid varje givet tillfälle är låg, medel eller hög genom att upptäcka "avvikelser" i deras beteende.

Om en elev tittar bort från skärmen mer än sina kamrater som gör samma prov, flaggas de som onormala. Om de tittar bort mer sällan märks de som onormala. Detsamma gäller hur många tangenttryckningar en elev gör när han tillfrågas hur många gånger de trycker, och en mängd andra mätvärden. Avvikelse från standardavvikelsen resulterar i en flagga.

Denna metod kommer sannolikt att resultera i en ojämlik studie av människor med fysiska och kognitiva funktionsnedsättningar eller tillstånd som ångest, sa Shea Swauger, en forskningsbibliotekarie vid University of Colorado Denvers Auraria Library som studerar utbildningsteknologi, till Motherboard.

"Dessa kodare definierar matematiskt den ideala elevkåren: hur ofta den uppfyller eller inte uppfyller dessa vissa attribut, och allt utanför det idealet anses misstänkt," sa han.

En bild från Proctorios referensmaterial som beskriver hur programvaran upptäcker "outliers" genom att analysera tangentkombinationer.

Proctorio håller inte med om denna bedömning. "Det viktigaste är att vi inte fattar några akademiska beslut, vi tillhandahåller bara ett snabbare sätt för [lärare] att testa elever på ett prov baserat på vad de letar efter", säger Olsen, VD för Proctorio. "Lärare kan välja vilka typer av beteende de ska spåra och avgöra om avvikelse är fusk," tillade han.

Studenter från flera amerikanska skolor sa till Motherboard att även om lärare i slutändan bestämmer om och hur de ska använda examensövervakningsprogram som Proctorio, gör de det ofta utan instruktioner eller begränsningar från skoltjänstemän.

"Såvitt jag vet har varje akademisk avdelning nästan fullständig byrå för att utforma sin läroplan, och varje professor är fri att designa tentor och använda vilken övervakning som helst han tycker är lämplig," sa Rohan Singh, en datoringenjörsstudent vid Michigan State University. Moderkort.

I april försökte en student från University of Colorado övertyga administrationen att lägga ner Proctorio genom att publicera en artikel som var kritisk till algoritmisk proctoring i tidskriften Hybrid Pedagogy. Som svar skickade Proctorio ett brev till tidningen och krävde ett återkallande. Tidningens redaktörer vägrade.

Företagets svar till Ian Linkletter, en inlärningsteknikspecialist vid University of British Columbia i Vancouver, var ännu mer rakt på sak. Efter att Yang började lägga upp instruktionsvideor och Proctorio-dokument på Twitter som förklarade företagets abnormitet, togs videorna bort från YouTube och Proctorio lämnade in ett föreläggande för att hindra Linkletter från att dela hans utbildningsmaterial.

I mars skickade fakulteten vid University of California ett brev till skoladministrationen om att de var oroliga för att ProctorU skulle dela studentdata med tredje part. Fakulteten bad om att säga upp kontraktet med företaget och avråda professorer från att använda liknande tjänster. Som svar hotade ProctorU:s advokat med att stämma fakultetsförbundet för förtal och lagbrott.