Indicatorul de scriere AI al Turnitin: Ce înseamnă scorul și ce trebuie să faci

Ce este Indicatorul de scriere AI al Turnitin?

Indicatorul de scriere AI nu este un produs independent. Este un strat de detecție pe care Turnitin l-a adăugat motorului său de analiză a documentelor existent și l-a lansat pentru abonații instituționali în aprilie 2023. Când un instructor o activează pentru o sarcină, fiecare trimitere de student este automat punctată — nu este necesară nicio acțiune suplimentară din partea niciunui student sau instructor. Indicatorul apare în același vizualizator de documente Turnitin pe care instructorii îl folosesc deja pentru a revizui scorurile de originalitate, ceea ce înseamnă că se integrează în fluxurile de evaluare existente fără a necesita o logare de produs separată sau raport. Indicatorul de scriere AI al Turnitin generează un procent la nivel superior între 0% și 100%, reprezentând partea din document pe care modelul o clasifică ca fiind probabil generată de AI. De asemenea, oferă o vizualizare la nivel de propoziție în care pasajele clasificate ca generate de AI sunt evidențiate, astfel încât instructorii pot examina secțiuni specifice în loc să se bazeze doar pe cifra agregată. Turnitin comercializează indicatorul ca instrument de deschidere a conversației, nu ca o hotărâre. Documentația companiei sfătuiește instituțiile să trateze scorul ca un punct de date alături de alte dovezi — cum ar fi înțelegerea demonstrată de un student a muncii sale trimise și mostre anterioare de scriere pe file.

"Am construit Indicatorul de scriere AI pentru a-i oferi educatorilor un punct de plecare — un semnal că ceva poate merita o conversație, nu un instrument care ia decizii finale." — Chris Caren, CEO Turnitin, 2023

Ce înseamnă procentajul Indicatorului de scriere AI?

Procentajul reprezintă proporția textului analizat pe care modelul o clasifică ca fiind probabil generată de AI. Un scor de 0% înseamnă că Turnitin nu a găsit dovezi statistice semnificative ale modelelor de scriere AI. Un scor de 100% înseamnă că modelul a clasificat esențialmente tot textul analizat ca fiind generat de AI. Majoritatea documentelor care declanșează urmăriri de instructor se situează în intervalul 20%-80%. Turnitin grupează scorurile în trei benzi informale. Sub 20%: documentul prezintă indicatori minimi de scriere AI și nu este de obicei marcat pentru o revizuire suplimentară. Între 20% și 40%: documentul are unii indicatori de scriere AI. Peste 40%: o proporție mai mare a textului se potrivește cu modelele de scriere AI, și Turnitin clasifică aceasta ca trimitere cu indicator ridicat. O nuanță pe care studenții și instructorii o ratează adesea: procentajul este calculat pe baza porțiunii analizate a documentului, nu pe baza numărului total de cuvinte. Turnitin exclude ghilimele bloc corespunzător formatate și secțiunile de referință din analiza AI. Un eseu de 600 de cuvinte cu un singur paragraf de 80 de cuvinte generat de AI nu va marca neapărat 13% — scorul depinde de cum acel pasaj interacționează statistic cu textul înconjurător. Trimiteri scurte sub 300 de cuvinte produc, de asemenea, procente mai puțin fiabile, deoarece nu este text suficient pentru ca modelul să stabilească modele sigure.

Cum se calculează scorul Indicatorului de scriere AI?

Modelul de detecție al Turnitin este un clasificator bazat pe transformator antrenat pe un corpus atât de text scris de om cât și de text generat de modele mari de limbaj, inclusiv GPT-3, GPT-4 și contemporanii lor. Modelul evaluează textul prin două semnale statistice primare — perplexitate și explozivitate — alături de semnale suplimentare pe care Turnitin nu le-a dezvăluit public. Perplexitatea măsoară cât de previzibil este fiecare alegere de cuvinte relativă la cuvintele care au precedat-o. Modelele mari de limbaj sunt optimizate pentru a produce ieșire de înaltă probabilitate și coerentă, deci textul generat de AI are în mod constant o perplexitate scăzută — fiecare cuvânt este aproape exact ceea ce te-ai aștepta având în vedere contextul. Scriitorii umani fac în mod regulat alegeri de cuvinte surprinzătoare sau idiosincratice care cresc perplexitatea, chiar și atunci când scriu într-un registru formal. Explozivitatea măsoară variația lungimii propozițiilor și complexității sintactice pe întregul document. Pasajele generate de AI produc propoziții relativ uniforme — similare în lungime, similare în structură, similare în profunzimea sintactică. Scriitura umană se caracterizează prin inegalitate: o propoziție directă scurtă urmează adesea una lungă și complexă, iar ritmul unui paragraf se schimbă pe măsură ce gândirea scriitorului se dezvoltă. Indicatorul de scriere AI al Turnitin combină aceste semnale într-o estimare de probabilitate pentru fiecare segment de text analizat. Acele estimări la nivel de segment sunt agregate în procentajul final afișat în raportul de trimitere. Deoarece calculul se bazează pe model mai degrabă decât pe bază de date, același document trimis de două ori va primi același scor, presupunând că modelul subiacent nu a fost actualizat între trimiteri.

"Perplexitatea și explozivitatea împreună captează cea mai mare parte din ceea ce deosebește proza AI actuală de scriitura umană — textul AI este în mod consecvent previzibil; textul uman este în mod consecvent imprevizibil."

Pot vedea studenții scorul lor de Indicator de scriere AI?

Dacă un student poate vedea propriile rezultate ale indicatorului de scriere AI al Turnitin depinde de o configurație cu două niveluri: inițialize la nivel instituțional și anulări la nivel de instructor. Turnitin permite instituțiilor să stabilească o politică de linie de bază pentru accesul studenților la rapoartele AI, și instructorii individuali pot apoi să ridice sau să scadă acea inițială în setările fiecărei sarcini. La nivel instituțional, multe universități au ales să restricționeze accesul studenților la rezultatele detecției AI în timpul lansării inițiale, parțial pentru a preveni ca studenții să parcurgă trimiteri în funcție de pragurile de detecție și parțial pentru a controla modul în care scorurile AI sunt comunicate în procesele formale de integritate academică. La nivel de instructor, există trei configurații frecvente: studenții nu văd nimic și nu primesc niciun feedback legat de AI asupra trimiterii lor; studenții văd procentajul general, dar nu defalcarea la nivel de propoziție; sau studenții văd raportul complet, inclusiv vizualizarea pasajelor evidențiate. Dacă dorești să verifici dacă instituția ta a activat accesul studenților, deschide sarcina ta trimisă în platforma cursului — Canvas, Blackboard, Moodle, sau acces direct Turnitin — și caută un link la raportul tău Turnitin. Dacă raportul se încarcă și arată o pictogramă Indicator de scriere AI alături de scorul originalității, dă clic pe ea. Dacă pictograma este selectabilă, deschide vizualizarea detaliată. Dacă nu apare pictogramă AI, sau dacă sunt afișate doar date de originalitate, accesul la raportul AI a fost restricționat la nivel instituțional sau de instructor.

1. Deschide platforma cursului și navigază la trimiterea sarcinii
2. Dă clic pe trimiterea ta pentru a deschide raportul Turnitin, dacă este disponibil
3. Caută pictograma Indicator de scriere AI — apare separat de procentajul de similitudine
4. Dacă pictograma este pe care poți da clic, selectează-o pentru a deschide vizualizarea analizei AI la nivel de propoziție
5. Dacă nu apare nicio pictogramă AI sau raportul complet este blocat, instructorul tău sau instituția ta a restricționat accesul studenților la rezultatele AI

Care sunt limitările cunoscute ale Indicatorului de scriere AI?

Documentația proprie a Turnitin recunoaște mai multe categorii de documente în care indicatorul de scriere AI al Turnitin produce rezultate mai puțin fiabile. Trimiteri scurte sunt cea mai frecvent citată limitare. Turnitin recomandă un minim de 300 de cuvinte pentru detecție AI fiabilă. Documentele sub acest prag pot returna scoruri la extremul ridicat sau scăzut pur și simplu pentru că nu există text suficient pentru ca modelul să identifice modele statistice cu încredere. Un rezumat de eseu trimis de unii, sau o scurtă postare de discuție, va produce aproape întotdeauna un scor nesigur indiferent de cum a fost scris. Scriitura în limba engleză non-nativă este o sursă bine documentată de pozitivi falși. Limba în curs de învățare tinde către alegeri de vocabular mai sigure și mai previzibile — exact modelul de perplexitate scăzută pe care Indicatorul de scriere AI este calibrat să-l detecteze. Un student a cărui limbă maternă nu este engleza poate produce scriituri care citesc fluent pentru un instructor uman, în timp ce obțin un scor ridicat pe indicatorul de scriere AI al Turnitin, deoarece alegerile de cuvinte și structurile propoziției sunt statistic mai previzibile decât cele ale unui coleg vorbitor nativ. Genurile academice formale punctează mai sus în medie decât scriitura conversațională sau personală. Rapoarte de laborator, recenzii de literatură structurate, rezumate de cazuri și rapoarte tehnice impun un format consecvent, cu explozivitate scăzută, prin design. Un student care urmează corect un șablon strict de gen produce scriituri care arată statistic similare cu rezultatul AI, chiar și atunci când fiecare cuvânt este al său. Alte limitări documentate includ: documente cu utilizare abundentă a citărilor lungi corespunzător citate, text tradus și documente care au fost extrem editate de un tutor de centru de scriere sau corector uman (editarea grea netezește irregularitatea naturală a prosei de prim proiect, ceea ce crește semnalul AI aparent).

1. Documentele sub 300 de cuvinte produc scoruri nesigure — Turnitin semnalează aceasta explicit în documentația sa
2. Vorbitorii de engleză non-nativă sunt la risc ridicat de scoruri pozitive false datorită modelelor de vocabular previzibil în limba din curs de învățare
3. Genurile academice tehnice și structurate (rapoarte de laborator, studii de caz, recenzii de literatură) punctează mai sus în medie datorită formatării explozivității scăzute
4. Proiectele proofread greu sau editate pot reduce variația naturală a propozițiilor și pot crește scorurile AI comparate cu aceeași muncă în formă de prim proiect
5. Documentele cu multe citări lungi pot produce scoruri distorsionate dacă textul citat nu este corespunzător formatat ca ghilimele bloc și exclus din analiză

"Documentele scurte și vorbitorii de engleză non-nativă sunt cele două cele mai frecvent documentate surse de pozitivi falși în sistemele actuale comerciale de detecție AI."

Ce trebuie să faci dacă scorul tău de Indicator de scriere AI este ridicat?

Primul pas atunci când primești un rezultat ridicat al indicatorului de scriere AI al Turnitin este să accesezi defalcarea la nivel de propoziție, dacă instituția ta o pune la dispoziție. Procentajul general îți spune cât din document a fost marcat; vizualizarea la nivel de propoziție îți spune care pasaje specifice au declanșat detecția și îți ajută să înțelegi de ce. Uită-te la pasajele evidențiate și identifică dacă împărtășesc un model structural comun. Textul generat de AI tinde să producă propoziții de subiecte foarte curate, tranzițiile de paragrafe netede care conectează ideile fără a adăuga informații noi, și concluzii care rezumă punctele anterioare fără a introduce gândire nouă. Dacă pasajele tale marcate urmează aceste modele, detectorul probabil răspunde la convenții structurale în scriitura ta mai degrabă decât la conținut generat de AI. Înainte de a te întâlni cu instructorul tău, documentează procesul tău de scriere. Strânge orice demonstrează munca în curs de timp: fișiere de proiect cu dată salvate în diferite etape, note de cercetare și surse adnotate, istoric de navigator din sesiuni de cercetare, document de schiță sau brainstorm, și orice note în clasă legate de subiectul sarcinii. Aceste dovezi — demonstrând că munca ta a evoluat pe mai multe sesiuni — sunt de obicei mai persuasive pentru un instructor decât orice explicație tehnică a motivului pentru care indicatorul de scriere AI al Turnitin ar putea fi greșit. Unii studenți-și rulează proiectul printr-un detector AI independent înainte de a trimite la Turnitin. Instrumente precum NotGPT evidențiază propoziții individuale după probabilitatea de asemănare cu AI, dând-ți o șansă să identifici care pasaje sunt cel mai probabil să se înregistreze ca generate de mașină și să revizuești pentru o variație de propoziții mai naturale înainte ca instructorul să vadă vreodată rezultatul Turnitin. Nu este vorba despre a evita detecția utilizării genuine de AI — este vorba despre a te asigura că vocea ta autentică vine clar în text.

1. Deschide raportul tău Turnitin și localizează secțiunea Indicator de scriere AI
2. Dă clic prin vizualizarea la nivel de propoziție și identifică care pasaje specifice sunt evidențiate
3. Notează dacă pasajele marcate sunt structural tipice pentru ieșire AI: propoziții de subiecte curate, tranzițiile generice, concluziile rezumative
4. Strânge proiecte datate, note de cercetare, schițe și adnotări de surse ca dovezi ale procesului tău de scriere
5. Cere o întâlnire cu instructorul tău pentru a discuta scorul înainte de orice proces formal de integritate academică
6. Dacă o fereastră de retrimis este disponibilă, revizuiește pasajele evidențiate pentru mai multă variație naturală de lungime de propoziție înainte de retrimis

Cum accesează instructorii și acționează asupra Indicatorului de scriere AI?

Indicatorul de scriere AI al Turnitin apare în vizualizatorul standard de documente Turnitin — aceeași interfață pe care instructorii o folosesc pentru a revizui rapoartele de similitudine. Procentajul AI este afișat ca indicator colorat alături de scorul originalității; nu este necesară nicio raport separat sau instrument suplimentar. Dând clic pe indicator se deschide vizualizarea evidenție la nivel de propoziție în care pasajele individuale sunt codificate în culoare după probabilitatea lor estimată de AI. Instructorii care doresc să acționeze asupra unui scor ridicat de obicei urmează una din trei căi. Unii tratează orice scor peste un prag definit de instituție ca motiv pentru o referință de integritate academică, urmând o politică stabilită la nivel de departament sau universitate. Alții folosesc scorul ca stimul pentru o conversație directă cu studentul — întrebând-o să-și parcurgă argumentul, să demonstreze familiaritate cu sursele sale, sau să completeze o mostră de scriere scurtă în clasă pe același subiect. O a treia abordare se concentrează pe evidențele la nivel de propoziție mai degrabă decât pe scorul agregat, identificând pasaje specifice pentru a discuta fără a trata procentajul ca o hotărâre independentă. Propria orientare al Turnitin favorizează puternic a doua și a treia abordare. Compania sfătuiește că niciun scor, indiferent cât de ridicat, nu ar trebui să rezulte automat într-o acțiune formală de integritate academică fără investigație suplimentară. Aceasta se datorează parțial riscului documentat de pozitivi falși pentru scriitura academică formală și vorbitorii de engleză non-nativă, și parțial pentru că indicatorul este probabilistic — un scor de 90% înseamnă 90% din textul analizat asemănă statistic cu rezultatul AI, nu că utilizarea AI este confirmată. Instructorii nu pot anula sau apela un scor în Turnitin. Dacă un instructor determină că un scor ridicat este un clar pozitiv fals pe baza istoricului de scriere stabilit al studentului, aceștia gestionează acea judecată în afara sistemului Turnitin și înregistrează raționamentul lor în notele de evaluare.

"Un scor de indicator AI ridicat ar trebui să deschidă o conversație, nu să o închidă. Instructorii ar trebui întotdeauna să se întrebe dacă acest student specific ar fi putut în mod plauzibil să fi scris acest text specific înainte de a lua orice acțiune formală."