Analiza elementov

Ta tabela prikazuje obdelane podatke kviza na primeren način za analizo in presojo učinkovitosti vsakega vprašanja za namen ocenjevanja. Uporabljeni statistični parametri so izračunani kot je pojasnjeno v klasični teoriji preskusov (ref. 1)

Kazalec težavnosti (% pravilno)

To je mera, ki pove kako lahko ali zahtevno je vprašanje za osebe, ki odgovarjajo na kviz. Izračunan je kot:
FI = (X_povprečje) / X_maks
kjer je X_povprečje povprečno prejete točke za vse uporabnike, ki so odgovarjali na vprašanje,
in X_maks je najvišje možno število prejetih točk za element.
Če je možno vprašanja porazdeliti bifurkacijsko v kategoriji pravilno / nepravilno, se ta parameter sklada z odstotkom uporabnikov, ki so pravilno odgovorili na vprašanje.

Standardni odklon (SD)

Ta parameter meri razpršenost odgovorov v populaciji odzivov. Če vsi uporabniki odgovorijo enako je SD=0. SD se izračuna kot statistični standardni odklon (deviacija) za vzorec ulomkov rezultatov (doseženo/največ) za vsako vprašanje ločeno.

Razmejitveni indeks (DI)

To ponuja grob kazalec učinkovitosti posameznega elementa za ločevanje sposobnih proti manj-sposobnih uporabnikov. Ta parameter se izračuna tako, da se udeležence najprej razporedi v tretjine na osnovi celotnega rezultata kviza. Nato se izračuna povprečen rezultat analiziranega elementa za skupini najbolj in najmanj uspešnih ter razliko povprečnih rezultatov teh dveh skupin. Matematična formula je:
DI = (X_vrh - X_dno)/ N
kjer X_vrh vsota ulomkov točk (doseženo/največ) doseženih pri tem elementu s strani 1/3 uporabnikov, ki so imeli najvišje ocene v celotnem kvizu (npr. število pravilnih odgovorov v tej skupini),
in X_dno) je analogna vsota uporabnikov z ocenami v spodnji 1/3 ocen za celoten kviz.

Ta parameter lahko doseže vrednosti med +1 in -1. Če se indeks spusti pod 0,0 to pomeni, da je več manj sposobnih udeležencev pravilno odgovorilo na ta element, kot bolj sposobnih. Takšni elementi bi morali biti zavrženi kot ničvredni. Dejansko zmanjšujejo natančnost celotnega rezultata kviza.

Razmejitveni koeficient (DC)

To je drug način ločevanja moči elementa za prepoznavanje sposobnih udeležencev od šibkejših.
Razmejitveni koeficient je korelacijski koeficient med rezultati za element in celoten kviz. Izračuna se tako:
DC = Sum(xy)/ (N * s_x * s_y)
kjer je Sum(xy) vsota zmnožkov odstopanj med rezultati elementa in skupnimi rezultati kviza,
N je število prejetih odgovorov za to vprašanje
s_x je standardni odklon vlomljenih rezultatov za to vprašanje in
s_y je standardni odklon rezultatov kviza kot celote.

Tudi ta parameter lahko doseže vrednosti med +1 in -1. Pozitivne vrednosti označujejo elemente, ki razmejijo sposobne udeležence, med tem ko negativni kazalci označujejo elemente na katere so najbolje odgovarjali tisti z najslabšimi ocenami. Na elemente z negativnim DC so napačno odgovarjali zreli udeleženci in so tako dejansko odbitek za sposobne udeležence. Takšnim elementom se je potrebno izogibati. Opomba: če dobijo vsi udeleženci pri tem odgovoru enako oceno, potem je s_x enak nič, DC pa ni definiran. To je prikazano kot DC = -999.99.

Prednost Razmejitvenega koeficienta v primerjavi z Razmejitvenim indeksom je v tem, da prvi uporabi informacije iz celotne populacije udeležencev in ne samo ekstremne zgornje in spodnje tretjine. Zato utegne biti ta parameter bolj občutljiv za prepoznavo učinkovitosti elementa.