Waarop is onze voorspelling gebaseerd?

De voorspellingsscore is een score tussen 0 en 1 die wordt toegeschreven aan elke student in het dashboard. Hoe dichter de score bij 1 is, hoe groter de kans dat er iets te onderzoeken valt. De score wordt berekend met het voorspellingsalgoritme van Turnitin, dat Natural Language Processing (NLP) -methoden gebruikt.

NLP is een subgebied van artificiële intelligentie dat erop gericht is computers in staat te stellen menselijke talen te begrijpen en te verwerken, om computers dichter bij een menselijk begrip van taal te brengen.

Dus hoe werkt het?

We hebben het algoritme een grote dataset van documenten gegeven waarvan we weten dat ze online werden aangekocht en hebben opdracht gegeven om honderden taalkundige functies te analyseren. Dit traint het algoritme om te leren waarnaar moet worden gezocht in een document.

Deze taalkundige kenmerken zijn vaak te complex om als waardevolle gegevens te presenteren. Daarom combineren we ze tot een score die we kunnen toeschrijven aan een student. Deze score is reëel en makkelijk te interpreteren

Is het juist?

Onze nauwkeurigheidsdoelen zijn gebaseerd op onderzoek uitgevoerd door Deakin University naar hoe goed contract cheating door de merkers kan worden geïdentificeerd wanneer ernaar wordt gezocht. In die studie bereikten ze een gevoeligheid van 62% bij het identificeren van contract cheating. Ons algoritme is afgestemd om hetzelfde gevoeligheidsniveau (detectiepercentage) te hebben bij het identificeren van verschillende auteurs op basis van onze voorspellingsalgoritme-validatie.

Hoe meer u en andere instellingen Authorship voor onderzoekers gebruiken, des te beter wordt het voorspellingsmodel.

We beweren nooit dat een student contract cheating heeft begaan, we raden alleen verder onderzoek aan. Het is aan de onderzoeker om te bepalen of er genoeg bewijs bestaat om iemand te beschuldigen op contract cheating.