Rodzaje testów
Testy
wiedza uczucia
umiejętności postawy
właściwości poznawcze właściwości afektywne
zdolności osobowość
emocje
wierzenia
istnieje odpowiedz

autoekspresja
prawidłowa
brak odpowiedzi prawidłowej
ZGADYWANIE
TRAFNOŚĆ SAMOOPISU
Analiza zadań
1) Ustalenie, czy pozycja testowa jest poprawna rzeczowo, tj. czy
da się ją wyprowadzić z teorii mierzonej właściwości
psychologicznej
2) Sprawdzenie, czy pozycja testowa jest poprawnie zredagowana,
tj. czy nie jest wieloznaczna lub zbyt zawiła
3) Obliczenie statystycznych wskaz
ników dla poszczególnych
pozycji testowych
współczynnika trudności
współczynnika mocy dyskryminacyjnej
- opartego na wielkości korelacji pomiędzy wynikiem danej pozycji a
ogólnym wynikiem w teście
- opartego na istotności różnicy między skrajnymi grupami
Współczynnik trudności jest to stosunek liczby osób
odpowiadających poprawnie na daną pozycję testową do liczby
wszystkich badanych osób
Współczynnik mocy dyskryminacyjnej jest to stopień, w jakim
dana pozycja testowa różnicuje badaną populację.
- pozycja testowa o dodatniej mocy różnicującej jest częściej rozwiązywana
przez badanych o wysokich wynikach testowania, a więc różnicuje
badanych w zgodzie z innymi pozycjami testu i zwiększa wariancję
wyników testowania.
- pozycja testowa o ujemnej mocy różnicującej jest częściej rozwiązywana
przez badanych o niskich wynikach testowania, a więc różnicuje badanych
przeciwnie niż inne pozycje testu i zmniejsza wariancję wyników
testowania.
Wskaz
nik trudności zadania
ni
T = = pi
n
gdzie: T = współczynnik trudności
ni = liczba osób, które odpowiedziały poprawnie na i-tą pozycję testową
n = ogólna liczba badanych osób
pi = proporcja osób odpowiadających poprawnie na i-tą pozycję testową
Wariancja pozycji testowej
�i2 = pqi
i
gdzie: pi = proporcja osób odpowiadających poprawnie na i-tą pozycję testową
qi = proporcja osób odpowiadających niepoprawnie na i-tą pozycję testową
Poprawka na zgadywanie dla wyniku i-tej pozycji testowej
w przypadku pozycji zamkniętych (dwu i więcej kategorialnych)
R = fi  W / (m-1)
gdzie: R = liczba osób, które rzeczywiście znały odpowiedz

fi = zarejestrowana częstość odpowiedzi prawidłowych
W = liczba odpowiedzi nieprawidłowych
m = liczba dostępnych kategorii odpowiedzi
Poprawka na zgadywanie dla wyniku ogólnego w teście
w przypadku pozycji zamkniętych (dwu i więcej kategorialnych)
C = R  W / (m-1)
gdzie: C = wynik poprawiony ze względu na zgadywanie
R = liczba odpowiedzi prawidłowych
W = liczba odpowiedzi nieprawidłowych
m = liczba dostępnych kategorii odpowiedzi
Trudność pozycji testowych przy założeniu maksymalnego zróżnicowania
odpowiedzi, z uwzględnieniem poprawki na zgadywanie
To = po + qo/m
To = 0.50 + 0.50/m
Rozkład wartości T i To dla pozycji posiadających różną liczbę kategorii odpowiedzi
Liczba Proporcja osób Proporcja osób To Wartości To
kategorii odpowiadających zgadujących podane przez
prawidłowo odpowiedz
Lorda
2 kategorie 0.50 0.50/2=0.25 0.50+(0.50/2)=0.75 0.85
3 kategorie 0.50 0.50/3=0.17 0.50+(0.50/3)=0.67 0.77
4 kategorie 0.50 0.50/4=0.125 0.50+(0.50/4)=0.62 0.74
Wskaz
nik dyskryminacji
D = pu - pl
gdzie: pu = proporcja odpowiedzi zgodnych z kluczem
w tzw. górnej grupie badanych
pl = proporcja odpowiedzi zgodnych z kluczem
w tzw. dolnej grupie badanych
Analiza przykładowego wzorca odpowiedzi
Badany
1+ 2+ 3- 4+ 5 6 7 8- 9 10-
Poz.1 0 1 1 1 0 1 1 0 1 0
Poz.2 1 1 1 1 0 0 0 1 0 1
Poz.3 1 0 1 1 0 1 1 1 1 1
... ... ... ... ... ... ... ... ... ... ...
Ogółem w 30 poz.
25 27 15 24 20 18 16 14 22 10
Charkterystyka poszczególnych pozycji testowych
poz.1 D = 0.67 - 0.33 = 0.34
poz.2 D = 1.00 - 1.00 = 0.00
poz.3 D = 0.67 - 1.00 = 0.33
Kryteria selekcji pozycji testowych ze względu na wartość D
1. Jeżeli D>= 0.40 pozycję testową można włączyć do testu
2. Jeżeli 0.30<= D <=39, pozycja testowa wymaga niewielkich
zmian
3. Jeżeli 0.20<= D <=.29, pozycja testowa ma znaczenie
marginesowe i wymaga poważnych zmian
4. Jeżeli D <= 0.19, pozycja testowa powinna zostać
wyeliminowana z testu lub całkowicie zmieniona
Związek między wynikiem pozycji testowej a ogólnym
wynikiem w teście
korelacja dodatnia korelacja ujemna
1 1
0
0
Xi
Xi
ogólny wynik ogólny wynik
w teście w teście
odpowiedz
diagnostyczna odpowiedz
diagnostyczna
zwiększa ogólny wynik w teście zmniejsza ogólny wynik w teście
wynik
wynik
wynik
pozycji testowej
pozycji testowej
pozycji testowej
Moc dyskryminacyjna  współczynniki korelacyjne
Współczynnik korelacji dwuseryjnej
Założenia:
(1) ogólny wynik w teście jest zmienną ciągłą, posiadającą rozkład
normalny
(2) wynik i-tej pozycji testowej jest zmienną ciągłą
Współczynnik korelacji punktowo-dwuseryjnej
Założenia:
(1) ogólny wynik w teście jest zmienną ciągłą, posiadającą rozkład
normalny
(2) wynik i-tej pozycji testowej jest zmienną dyskretną (dychotomiczną)
Współczynnik korelacji punktowo-czteropolowej
brak założeń co kształtu rozkładu zmiennych
Moc dyskryminacyjna
analiza różnic pomiędzy skrajnymi grupami
Skala postaw typu Likerta
Dolna grupa
Górna grupa
istotna
Niski wynik Wysoki wynik
różnica
w całym teście w całym teście
między
grupami
Analiza zadań - procedura postępowania
Kolejny Opis zadania
etap
Etap 1 Zdefiniowanie mierzonej właściwości
(teoria)
Etap 2 Określenie formatu bodz
ca i formatu
odpowiedzi
Etap 3 Sformułowanie "puli matki" - około
100% pozycji więcej niż będzie ich
liczyć ostateczna wersja testu
Etap 4 Analiza logiczno-językowa pozycji
(sędziowie kompetentni); ewentualnie
test językowy na małej próbie
Etap 5 Ustalenie klucza oceny odpowiedzi
Etap 6 Badania standaryzacyjne
Etap 7 Obliczenie wybranych wskaz
ników
statystycznych dla wszystkich pozycji
testu
Etap 8 Podjęcie decyzji, które pozycje testowe
wejdą do ostatecznej wersji testu
Etap 9 Powrót do etapu 3, jeżeli zbyt mało
pozycji testowych zakwalifikowało się
do ostatecznej wersji testu
Specjalne zagadnienia analizy zadań
wynik danej pozycji
wynik danej pozycji
jest elementem
nie jest elementem
ogólnego wyniku w teście
ogólnego wyniku w teście
1
2
r
r
it
it
1
1 2 3
3
t = 1+ 2 + 3
t = 2 + 3


Wyszukiwarka

Podobne podstrony:
wroclaw wyklad 2
wroclaw wyklad 4
wroclaw wyklad 1
wroclaw wyklad 3
wroclaw wyklad 7
Sieci komputerowe wyklady dr Furtak
Wykład 05 Opadanie i fluidyzacja
WYKŁAD 1 Wprowadzenie do biotechnologii farmaceutycznej

więcej podobnych podstron