Analiza pitanja

Ova tabela prikazuje obrađene podatke testana na način pogodan za analizu i procenu the performance svakog pitanja for the function of assessment. Korišćeni statistički parametri su izračunati kako je to objašnjeno u klasičnoj teoriji testiranja (ref. 1)

Indeks lakoće (% Tačnih)

Ovaj indeks pokazuje koliko su pitanja laka odnosno teška za ispitanike. Računa se kao:
FI = (X_average) / X_max
gde je X_average srednja vrednost poena koje su dobili svi ispitanici dajući odgovar na pitanje,
a X_max je maksimalan broj poena koji mogao biti postignut za za to pitanje.
Ukoliko je moguće pitanja distribuirti dihotomno na kategorije tačno / netačno, ovaj parametar odgovara procentu korisnika koji su dali tačan odgovor na pitanje.

Standardna Devijacija (SD)

Ovaj parametar meri raspodelu odgovora u populaciji ispitanika. Ako svih korisnici imaju isti odgovor, onda je SD=0. SD se izračunava kao statistička standardna devijacija za uzorak pojedinačnih rezultata(postignuto/maksimalno) za svako konkretno pitanje.

Indeks diskriminativnosti(DI)

Ovaj indeks predstavnja grubi indikator postignuća po svakom pitanju kako bi se razdvojili proficient vs. less-proficient users. Indeks se izračunava tako što se prvo svi ispitanici dele u tri grupe prema ukupnom broju poena na testu. Potom se izračunava prosečan broj osvojenih poena na svakom pitanje za trećinu ispitanika koji su imali najbolji rezultat na testu odnosno trećinu sa najlošijim rezultatom. Matematički gledano jednnačina glasi:
DI = (X_top - X_bottom)/ N
gde je X_top zbir pojedinačnih poena (postignuto/maksimalno) koji na tom pitanju dobila trećina ispitanika sa najvišom ocenom na čitavom testu (tj. broj tačnih odgovorau toj grupi),
a X_bottom) je analogno zbir poena trećine ispitanika sa najnižim rezultatom na testu.

Ovaj parametar može imati vrednost izmeđ +1 i -1. Ukoliko indeks ima vrednost ispod 0.0 to znači da je više slabijih učenika dalo tačan odgovor na konkretno pitanje od onih koji su imali najbolji rezultat na testu. Takva pitanja bi trebalo odbaciti kao nepouzdana. U stvari, ovakva pitanja smanjuju tačnost sveukupnog rezultata testa.

Koeficijent diskriminativnosti (DC)

Ovo je još jedan paramaetar moći pitanja da razdvoji dobre od loših učenika.
Koeficijent diskriminacije je korelacioni koeficijent između rezulatata na pitanju i rezultata na čitavom testu. Izračunav se kao:
DC = Sum(xy)/ (N * s_x * s_y)
gde je Sum(xy) zbir proizvoda devijacija za rezultate na pitanju i svekupnog rezultat na testu,
N je broj odgovora koji su korisnici dali na to pitanje
s_x je standardna devijacija delimičnog skora za to pitanje a,
s_y je standardna devijacija rezultata testa u celini.

I ovaj parametar može imati vrednost između +1 i -1. Pozitivne vrednosti ukazuju na pitanja koja izdvajaju dobre učenike, dok negativne označavaju pitanja na koje su više tačnih odgovora dali oni sa najnižim ocenama. Pitanja sa negativnim koeficijentom diskriminativnosti are answered incorrectly by the seasoned learners i na taj način ona su ustvari kazna za najbolje učenike. Ova pitanja bi trebalo izbegavati.
Prednost koeficijenta diskriminativnosti u odnosu na indeks diskriminativnosti je u tome što koeficijent koristi informacije iz celokupne populacije ispitanika, a ne samo iz gornje i donje trećine. Prema tome, ovaj parametar može biti senzitivniji za detektovanje karakteristika pitanja.