Paano Gumagana ang mga AI Detector para sa Mga Sanaysay? Isang Teknikal na Pagsusuri

Ang Pangunahing Tanong: Paano Gumagana ang mga AI Detector para sa Mga Sanaysay?

Ang mga AI detector ay hindi nagsusulat ng iyong sanaysay tulad ng ginagawa ng isang guro. Ang mga ito ay gumagana ng iyong teksto sa pamamagitan ng isang istatistikal na modelo na nagsasama ng iyong mga pagpipilian ng salita laban sa mga pattern na malamang na bubuo ng isang malalaking modelo ng wika. Ang pangunahing ideya ay simple: ang AI-generated na teksto ay may kaugalian na maging labis na makinis at maaasahan, habang ang pagsusulat ng tao ay may higit pang pagbabago, mga error, at mga sorpresa. Ang mga detector ay nagbibigay ng puntuasyon sa pagiging maaasahan na ito at nagbabalik ng posibilidad na ang teksto ay natutunan ng makina. Ang dalawang mga sukat ay nangunguna sa prosesong ito: pagkalito at pagsabog.

Pagkalito: Pagsukat sa Pagiging Maaasahan ng Iyong Pagsusulat

Ang pagkalito ay isang sukat na hiniram mula sa teorya ng impormasyon. Kapag ang isang modelo ng wika ay nagsusulat ng isang pangungusap, sinisikap nitong mahulaan ang bawat susunod na salita. Kung hahanapin nito ang bawat salita na madaling mahulaan, ang teksto ay may mababang pagkalito — isang palatandaan na ito ay kamukha ng output ng AI. Kung ang mga salita ay mas mahirap mahulaan, ang pagkalito ay mataas — mas umaayon sa kusang pagsusulat ng tao. Ang mga modelo ng AI tulad ng GPT-4 ay lumilikha ng teksto sa pamamagitan ng pagpili ng istatistikong maaasahang mga salita, na likas na gumagawa ng mababang output ng pagkalito. Ang isang mahusay na iniangkop na detector ng AI ay naglalapat ng pattern na ito. Gayunpaman, ang direktang academic na pagsusulat — simple na mga pangungusap, pormal na bokabularyo, inaasahang istraktura — ay maaari ding basahin bilang mababang pagkalito, na isa sa mga dahilan kung bakit nangyayari ang mga maling positibo sa mga sanaysay.

Ang pagkalito ay hindi sumusukat ng kalidad o talino. Ito ay sumusukat ng pagiging maaasahan. Ang isang malinaw na isinulat na sanaysay ng tao ay maaaring makakuha ng katulad na puntuasyon sa output ng AI lamang dahil ang dalawa ay iwasan ang hindi pangkaraniwang mga pagpipilian ng salita.

Pagsabog: Bakit Mahalaga ang Pagbabago ng Pangungusap

Ang pagsabog ay tumutukoy sa kung gaano kalaki ang pagbabago ng isang piraso ng pagsusulat sa pagitan ng maikling at mahabang pangungusap. Ang mga manunulat ng tao ay natural na nagsasama ng mga haba ng pangungusap — isang maikling pumasok pagkatapos ng mas mahabang akumulasyon, isang piraso para sa diin. Ang mga modelo ng AI ay may kaugalian na magbunga ng mga pangungusap na patuloy na katamtaman ang haba na may katulad na mga pattern ng ritmo sa buong. Ang isang mataas na puntuasyon ng pagsabog ay nagmumungkahi ng pagsusulat ng tao; ang isang mababang puntuasyon ng pagsabog ay nagpapataas ng pag-aalinlangan. Kapag ang mga detector ay nag-aanalisa ng isang sanaysay, karaniwan ay pinagsasama nila ang isang puntuasyon ng pagkalito at isang puntuasyon ng pagsabog sa isang solong porsyento ng posibilidad ng AI. Ang mga sanaysay na pantay na itinayo — karaniwan sa format na limang talata — madalas na makakakuha ng mga puntuasyon na mas malapit sa teksto na ginawa ng AI sa aksiyang pagsabog, kahit na isinulat ng kamay.

Ang pagsabog ay isa sa mga mas mapagkakatiwalaang signal sa pagtatukoy ng AI — ang mga manunulat ng tao ay bihira na magpanatili ng perpektong pantay na haba ng pangungusap sa ilalim ng isang daang mga salita nang walang talik na pagsisikap.

Ibang Mga Signal na Ginagamit ng mga Detector ng AI sa Mga Sanaysay

Sa malayo ng pagkalito at pagsabog, ang mga detector ay naghahanap ng karagdagang mga pattern na nauugnay sa pagsusulat ng AI. Kasama dito ang distribusyon ng bokabularyo (ang AI ay may kaugalian na paboran ang ilang partikular na salita ng dalas sa gitna sa halip na bihira o napakadaling mga salita), pag-ulit ng simula ng pangungusap, at ang kawalan ng maliit na mga error sa gramatika na natural na lumilitaw sa pagsusulat ng tao. Ang ilang mga detector ay gumagamit din ng mga modelo ng pagpapahiwalay na nagsasanay sa malalaking mga dataset ng kilalang AI at human na teksto. Ang mga modelong ito ay natututo ng mga feature na ang purong pagsusulat ng pagkalito ay napapabayaan — tulad ng mga katangiang pagbabago, labis na paggamit ng mga salitang pangalaga tulad ng "bagaman" o "mahalaga na tandaan," at mga haba ng talata na kapansin-pansing pantay. Ang mas maraming mga signal na pinagsasama ng isang detector, ang mas mataas ang karaniwang antas — ngunit ang mas mahal na ito ay computationally ang pagsusuri.

1. Distribusyon ng bokabularyo: ang AI ay paboran ang istatistikong karaniwan na mga salita ng dalas sa gitna sa halip na bihira o kolokyal.
2. Mga pattern ng simula ng pangungusap: ang mga sanaysay na ginawa ng AI ay madalas na nagsisimula ng mga pangungusap na may katulad na gramatikong konstruksyon nang paulit-ulit.
3. Densidad ng mga salitang pagbabago: ang teksto ng AI ay may kaugalian na labis na gumagamit ng mga pormal na nag-uugnay tulad ng "higit pa," "samakatuwid," at "karagdagan."
4. Pagsama-sama sa haba ng talata: ang mga sanaysay ng tao ay natural na nag-iiba sa haba ng talata; ang output ng AI ay madalas na nag-uumpisa ng mga talata malapit sa parehong bilang ng mga salita.
5. Kakulangan ng maliit na mga error: ang mga error sa pag-type, mga pagsasama ng kuwenta, at mga pormal na parirala ay karaniwan sa pagsusulat ng tao ngunit bihira sa hindi nire-edit na output ng AI.

Bakit ang mga Detector ng AI ay Hindi Mapagkakatiwalaan para sa ilang mga Sanaysay

Ang pag-alam kung paano gumagana ang mga detector ng AI para sa mga sanaysay ay nangangahulugang pag-unawa din kung saan sila nabibigo. Ang pinakamalaking kahinaan ay ang mga maling positibo — pag-marka ng pagsusulat ng tao bilang AI. Ang mga nagsasalitang hindi katutubong Ingles ay lubhang nakakaantig dahil ang kanilang pagsusulat ay may kaugalian na sumunod sa mas ligtas at mas maaasahang gramatikong mga istraktura, na nagbubunga ng mas mababang mga puntuasyon ng pagkalito. Ang maingat na na-edit na akademikong prosa, mga tugon sa pamantayan ng pagsubok, at mga form na application na sanaysay ay nakakakuha din ng mas mataas na mga puntuasyon para sa pagsimilaridad ng AI. Sa kabilang banda, ang isang manunulat ng tao na maingat na nag-edit at nagpapalit ng pagbabago ng haba ng pangungusap ay maaaring hindi sinasadyang bawasan ang pagsabog. Sa kabilang banda, ang sopistikadong engineering na mabilis ay maaaring itulak ang teksto na ginawa ng AI patungo sa mas mataas na pagkalito, na nag-alinlangan sa mga detector na tumanggap ng sanaysay na nakasulat sa makina bilang tao. Walang kasalukuyang detector ang nakakamit ng 100% na katumpakan sa mga sanaysay, at karamihan sa mga nagbibigay ay kinikilala ang mga rate ng maling positibo sa pagitan ng 1% at 9% depende sa istilo ng pagsusulat.

Ang isang pag-aaral ng Stanford noong 2023 ay natuklasan na ang mga detector ng AI ay minarkahan ang mga sanaysay na isinulat ng mga nagsasalitang hindi katutubong Ingles bilang AI-generated sa mga rate na makabuluhang mas mataas kaysa sa mga sanaysay ng mga pinamamahal na nagsasalita — na nagpapataas ng seryosong mga alalahanin sa pagiging patas.

Paano Turnitin at Iba Pang Academic na Platform ay Gumagamit ng Pagtukoy ng AI sa Mga Sanaysay

Ang feature ng pagtukoy ng AI ng Turnitin, na ilunsad sa mga institusyon sa buong mundo, ay gumagamit ng isang modelo na nasanay nang partikular sa academic na pagsusulat. Ito ay nagbabalik ng isang porsyento ng puntuasyon kasama ng isang nag-highlight na bersyon ng sanaysay na nagpapakita kung aling mga bahagi ang itinuturing nitong pinaka-malamang na AI-generated. Ang Canvas LMS, Blackboard, at iba pang mga platform ay nagsama ng third-party na pagtukoy ng AI sa iba't ibang paraan — ang ilan ay awtomatikong nagsasagawa ng mga pagsusuri sa pagpapadala, ang iba ay nangangailangan ng manu-manong pagsusuri. Kung ano ang mayroon ang mga platformang ito ay ginagamit ang pagtukoy ng AI bilang isang signal para sa pagsusuri ng tao, hindi bilang isang huling hatol. Karamihan ng mga patakaran ng institusyon ay nagsasaalang-alang ng mataas na puntuasyon ng AI bilang dahilan upang imbestigahan, hindi bilang tukoy na patunay ng kapintasan. Ang puntuasyon sa sarili ay hindi patunay — ang konteksto, mga draft ng estudyante, at mga halimbawa ng pagsusulat sa klase ay karaniwang kinakailangan bago ang anumang akademikong resulta.

Ano ang Gagawin Kung ang Iyong Sanaysay ay Minarkahan ng isang Detector ng AI

Kung ang isang detector ng AI ay minarkahan ang iyong sanaysay, mayroon kang ilang mga tiyak na hakbang na dapat isagawa. Una, maunawaan na ang marking ay hindi isang konklusyon — ito ay isang punto ng datos. Pangalawa, kolektahin ang anumang patunay ng iyong proseso ng pagsusulat: kasaysayan ng browser, kasaysayan ng pagbabago ng dokumento, mga tala, o mga balangkas. Pangatlo, isaalang-alang ang muling pagsusulat ng mga minarkahang bahagi na may mas maraming pagbabago sa haba ng pangungusap at mas tukoy, personal na mga halimbawa — ang mga detector ng AI ay nakakakuha ng mas mababang mga puntuasyon sa teksto na may idiosyncratic na mga detalye na hindi lalabas sa generic na output ng AI. Kung gumamit ka ng mga tool ng AI habang nagsusulat, ngunit isinulat mo mismo ang huling bersyon, maging transparent sa iyong instructor tungkol sa iyong proseso, dahil maraming institusyon ang may mga patakaran na nagkakaiba sa pagitan ng tulong ng AI at pagpapalit ng AI.

1. Mag-ipon ng lahat ng mga draft at tala na ginawa mo sa panahon ng proseso ng pagsusulat bilang patunay ng iyong trabaho.
2. Suriin ang mga nag-highlight na seksyon sa ulat ng detector — tumutok sa mga bahagi na minarkahan bilang mataas na posibilidad ng AI.
3. Baguhin ang mga minarkahang bahagi sa pamamagitan ng pagdaragdag ng mga tukoy na halimbawa, pagbabago ng haba ng pangungusap, at pag-aalis ng generic na pagbabago.
4. Suriin ang patakaran sa paggamit ng AI ng iyong institusyon upang maunawaan kung anong tulong ang pinapayagan at kung ano ang nangangailangan ng pagbubukod.
5. Kung ang marking ay nabuo ng Turnitin o katulad na platform, hilingin ang isang pagpupulong sa iyong instructor upang talakayin ang puntuasyon sa konteksto.

Ang mataas na puntuasyon ng AI ay isang marking, hindi isang hatol. Ang mga tool sa pagtukoy ay probabilistic — tinatantya nila ang posibilidad, hindi ang intensyon.

Sinusuri ang Iyong Sariling mga Sanaysay Bago ang Paghahatid

Ang pagpapatakbo ng iyong sariling sanaysay sa pamamagitan ng isang detector ng AI bago ang paghahatid ay nagbibigay sa iyo ng pagkakataon na matukoy kung aling mga seksyon ang tumutunog bilang machine-generated at baguhin ang mga ito nang proaktibo. Ang tool ng Pagtukoy ng Teksto ng AI ng NotGPT ay nag-aanalisa ng teksto para sa mga pattern ng pagkalito at pagsabog, nagbabalik ng isang porsyento ng posibilidad ng AI, at nag-highlight ng mga tiyak na pangungusap na malamang na mamarkahan. Kung makakita ka ng mga seksyon na nakakakuha ng mataas na puntuasyon, ang feature ng Humanize ay maaaring muling isulat ang mga ito nang may nakaayos na kasiglahan — Light, Medium, o Strong — upang dagdagan ang natural na pagbabago habang pinapanatili ang iyong kahulugan. Ang paggamit ng mga tool na ito sa iyong sariling gawain bago ang paghahatid ay isang praktikal na paraan upang maunawaan kung paano gumagana ang mga detector ng AI para sa mga sanaysay at maipon ang mga maling positibo sa iyong sariling pagsusulat bago ito maging isang problema.