Co pracownik naukowy powinien wiedzieć o testach

7/22/2019 Co pracownik naukowy powinien wiedzieć o testach

http://slidepdf.com/reader/full/co-pracownik-naukowy-powinien-wiedziec-o-testach 1/58

Jadwiga Mirecka10.04 2013

Co pracownik naukowy pow in ien

wiedzieć o testach

(a czego prawdopodobnie nie wie)



I. Ogólne cechy testu

II. Zalety i wady egzaminu testowego

III. Rodzaje zadań testowych

IV. Konstrukcja pytań testowych

PLAN PREZENTACJI



Student generuje

odpowiedź

Formy sprawdzianów pisemnych:

Esej, raport

Student rozpoznaje

odpowiedź

Krótkie standaryzowanepytania

Test wielokrotnego wyboru (MCQ)

Test wielokrotnej odpowiedzi (MRQ)

Test dopasowania

Test wyboru T/N

Test uzupełniania odpowiedzi

Test MRQ typu mieszanego



WYMAGANE CECHY SPRAWDZIANU

Trafność – stopień w jaki mierzy to co jest celempomiaru

Rzetelność – stałość z jaką mierzy daną zmienną

(powtarzalność)Obiektywizm – zakres, w którym niezależni

organizatorzy są zgodni co do dobrejodpowiedzi

Praktyczność ( w tym koszty)



ZALETY EGZAMINU TESTOWEGO:

• Obiektywny

• Praktyczny przy dużej liczbie zdających

• Łatwy do poprawy

• Na ocenę wiedzy nie wpływają inne umiejętnościzdającego

• Mniej stresujący dla zdających (?)

• Efektywny (relacja czasu do efektu)

• Programy komputerowe pozwalają na analizę pytań

• Można stosować „na odległość”



ZALETY EGZAMINU TESTOWEGO: cd.

• Wszyscy zdający dostają takie same pytania (rzetelnośćegzaminu)

• Duża liczba pytań pozwala objąć cały zakres przedmiotu

(trafność egzaminu)

• Można zaplanować ilościowy udział pytań odnoszącychsię do poszczególnych działów przedmiotu

• Przygotowanie egzaminu jest pracą zespołową, czego

efektem jest korzystna różnorodność formalna

i merytoryczna pytań, a główna część pracy przypada naokres przed sesyjny



ZALETY EGZAMINU TESTOWEGO: cd.

Egzamin testowy jest najmocniejszym wskaźnikiemprognostycznym dalszych postępów studenta w

porównaniu z innymi formami oceny, takimi jak zadania

pisemne, aktywność na zajęciach, opis przypadku, czy

gry symulacyjne

Bontis N. i wsp.: „Techniques for assessing skills and knowledge in a

business strategy classroom”.2009



WADY EGZAMINU TESTOWEGO

- zgadywanie

- sztuczność

- nadmiernie uproszczony (promuje powierzchowne

uczenie się

- często pytania o rzeczy błahe

- możliwość zasugerowania odpowiedzi

- możliwość błędnej interpretacji pytania



WADY EGZAMINU TESTOWEGO cd.

- zwykle sprawdza odtwarzanie faktów a nie wyższe poziomy wiedzy ( nie da się sprawdzić

kreatywności)

- jego przygotowanie wymaga czasu i ekspertyzy

- zwykle w niewielkim stopniu pomaga studentom

zrozumieć ich błędy

- może być niekorzystny dla studentów mających

trudności z czytaniem



Pisanie testu należy zacząć od :

- ustalenia celu egzaminu,

- przeglądu efektów kształcenia

- podjęcia decyzji odnośnie poziomu wiedzy,

który chcemy sprawdzić - poinformowania studentów o zakresietematycznym objętym egzaminem,

- określenia poziomu odcięcia



ZAWARTOŚĆ (TREŚĆ)TESTU

Zakres materiału

Obszary wymagające podkreślenia

Zagadnienia sprawiające studentom kłopoty

Poziom szczegółowości

Poziom poznawczy (rodzaj procesów

myślowych, które student ma zademonstrować)



Kognitywne

poziomy wg

Blooma

Temat

A

Temat

B

Temat

C

Temat

D

L.

pytań

%

całości

Znajomośćfaktów

1 2 1 1 5 12,5

Zrozumienie 2 1 2 2 7 17,5

Zastosowanie 4 4 3 4 15 37,5

Analiza 3 2 3 2 10 25,0

Synteza 1 1 2 5,0

Ocena 1 1 2,5

Razem 10 10 10 10 40 100

PLAN EGZAMINU



W egzaminie testowym należy

• O sprawy ważne !!!

• Objęte tematyką kursu • Związane z profilem kształcenia

Pytać o:

Unikać pytań :

• o ciekawostki• o drobne szczegóły • podchwytliwych



TEST WIELOKROTNEGO WYBORU

MCQ

Jedna odpowiedź jestprawidłowa (najlepsza)

Pozostałe odpowiedzi to dystraktory

Przy 3 odpowiedziach 33 % trafień przypadkowych

Przy 4 odpowiedziach 25% trafień przypadkowych

Przy 5 odpowiedziach 20 % trafień przypadkowych

Typ A



KONSTRUKCJA TESTU

W formie pytania: Jaki, Który

lub polecenia: Wskaż najlepsze rozwiązanie,

W formie negatywnej: Nie jest prawdą, że

Nie należy

(Wyraz negacji należy podkreślić)



Kto jest szefem największej partiiopozycyjnej:? ( na dzień 03.03.2013)

a) Donald Tuskb) Janusz Palikot

c) Jarosław Kaczyński

d) Leszek Miller



Które stwierdzenie nie jest prawdziwe? ( nadzień 03.03.2013)

a) Donald Tusk stoi na czele partii rządzącej

a) Janusz Piechociński został wybrany na prezesa partii nie obecnej w parlamencie

b) Jarosław Kaczyński jest szefem największej partii opozycyjnej

c) Leszek Miller kieruje partią o rodowodziekomunistycznym



KONSTRUKCJA PYTAŃ

• Pytania „odsączyć z wody” (ozdobników)

• Zadbać o to aby pytania w teście się nie powtarzały, ani wzajemnie wyjaśniały

• Pamiętać o tym, że pytanie ma różnicować

studentów przygotowanych od nie przygotowanych

• Stosować zasadę jednomyślności przy wyborze pytań

Jak najwięcej informacji zawrzeć w „trzonie” pytania



KONSTRUKCJA PYTAŃ

-Zwracaj uwagę na gramatykę, terminologię

- Koncentruj się na jednym problemie (choć

można pytać o kilka aspektów tego problemu naraz)

- Unikaj dowcipów

- Unikaj „nie wiem” - Sprawdzać sposób myślenia - porównywanie,wybór, kolejność (występowania, działań)



Masz przed sobą:

I. Szachownicę 8 x 8

II. Szachownicę 8 x 8 z usuniętymi kostkami na dwóch przeciwległych rogach

III. Szachownicę 8 x 8 z usuniętymi kostkami na wszystkichczterech rogach

Która(e) z nich może (mogą) zostać pokryte przez typowe klockidomina (wielkości dwóch kostek) w taki sposób, aby nie było

przerw i wszystkie domina zawarte były w obrębie szachownicy?

a) tylko I b) tylko II c) tylko I i II

d) tylko I i III e) I, II i III

Wikipedia: Multiple_Choice



KONSTRUKCJA PYTAŃ

odnośnie odpowiedzi należy unikać

- wyróżniania jej długością

- bardziej szczegółowych opisów

- powtarzania słów z rdzenia pytania

- umiejscawiania na tej samej pozycji

- wskazówek logicznych



Pacjent z historią przewlekłegoalkoholizmu, przyjęty w stanie

pobudzenia. Mówi iż odczuwaotaczający go świat jako nierealny.

Objaw ten nazywa się:

a) depersonalizacją

b) derealizacją

c) wykolejeniem

d) lokalnym defektem pamięci



Dystraktory

- wziąć pod uwagę co zdający winien umieć odrzucić

-co stanowi częsty problem dla studentów

- sformułować z taką samą starannością (poziomemszczegółowości)

-przedstawiać opcje w porządku logicznym

-dystraktory zbliżone do odpowiedzi prawidłowejnazywamy „uwodzicielskimi”



Dystraktory cd.

Unikać dystraktorów

- negatywnych przy negatywnej formie pytania

- zbytnio różniących się długością, formą graficzną

- bzdurnych

- zawierających sformułowania: „zawsze”, „nigdy” - „zachodzących” na siebie



KONSTRUKCJA TESTU

W formie pytań sprawdzających wyższepoziomy wiedzy:

•Jaki może być skutek...?

•Która zasada najlepiej wyjaśnia... ?

•Która procedura powinna być zastosowana..?

•Jakie są podobieństwa...? •Co zrobiłbyś w sytuacji...?



Jeśli nominalny produkt krajowy brutto (PKB)wzrasta o 10 % rocznie, a deflacja rośnie o8%, to realny PKB:

a) pozostaje stałyb) wzrasta o10%

c) spada o 8%

d) wzrasta o 2%



1. Wanda nie chciała Niemca dlatego

2. Skoczyła do Wisły

a) Zdanie 1 prawidłowe, zdanie 2 nieprawidłowe b) Zdanie 1 nieprawidłowe, zdanie 2 prawidłowe

c) Oba zdania prawidłowe, nie związane przyczynowo

d) Oba zdania prawidłowe i powiązane przyczynowo



KONSTRUKCJA PYTAŃ cd.

Dystraktory mogą mieć formę:

- a + c prawidłowe

- Żadne z wyżej wymienionych - Wszystkie odpowiedzi prawidłowe

(wtedy test uważany za formę testu wielokrotnej

odpowiedzi)




- też musi być użyte w teście jako odpowiedź prawidłowa - nie informuje nas czy student wie jaka jest prawidłowaopcja

- „wszystkie odpowiedzi prawidłowe”

- wtedy każda z zaznaczonych odpowiedzi też jestprawidłowa

Uważać z:

„żadne z powyższych”



Rękoczyn……. stosuje się •

a) tylko u dzieci

b) tylko u osób dorosłych

c) wszystkie odpowiedzi prawidłowe d) wszystkie odpowiedzi błędne



Dystraktory

Nie muszą być wszystkie fałszywe:

d a c b

Najmniej właściwa

odpowiedźNajbardziej właściwa

odpowiedź



Pytania z uszeregowaniemodpowiedzi (ROQ)

- Wskaż najlepszą odpowiedź

- Która odpowiedź jest najbardziejprawdopodobna ?

- Która odpowiedź jest najmniej prawdopodobna?

Sprawdzają myślenie analityczne, interpretację



Masz 5 pacjentów w stanie nagłym. Tylko jednego możeszwysłać do szpitala (30 min drogi). Którego wybierzesz?

a. Mężczyznę 72 lat, nieprzytomnego po przedawkowaniuinsuliny

b. Chłopca 15 lat, który spadł z dachu i złamał kręgosłup szyjny

c. Mężczyznę 50 lat, który doznał oparzenia 3go st twarzy i

szyi d. Kobietę 28 lat w trakcie porodu

e. Mężczyznę 50 lat z przebiciem tętnicy w pachwinie



TEST WIELOKROTNYCH ODPOWIEDZI(MRQ)

Typ zwykły

Typ mieszany

Typ „K”

Więcej niż jedna odpowiedź możliwa:




Typ zwykły (dowolna liczba odpowiedzi)

Przy ocenie: do 5 pkt za pytanie

1 pkt. każdą odp.prawidłową zaznaczoną

1 za każdą nieprawidłową nie zaznaczoną

-1 za każdą prawidłową nie zaznaczoną

-1 za każdą nieprawidłową zaznaczoną




Typ zwykły (dowolna liczba odpowiedzi)

Jeśli stwierdzenia nie powiązane ze sobą sprowadzasię do to sprawdzania znajomości faktów w teście

Tak/Nie

Może mieć sens, gdy stwierdzenia prezentują różneaspekty tego samego zagadnienia (biochemiczny,

immunologiczny, fizjologiczny, komórkowy)




a)

b)

c)

d) a + c

e) wszystkie odpowiedzi prawidłowe

Typu mieszanego:

Wybór jednej spośród podanych możliwości,które zawierają kombinacje odpowiedzi



W której bajce występują krasnoludki?

a. O sierotce Marysi

b. O Królowej Śniegu c. O królewnie Śnieżce

d. a + c

e. We wszystkich wymienionych

4



TEST WIELOKROTNYCH ODPOWIEDZI(MRQ) cd.

Kolejność stwierdzeń zależy od celu sprawdzania:nacisk na znajomość podstawowych faktów (A),czy na identyfikację lepszych studentów (B)

Typu mieszanego:

Raczej nie stosować więcej niż 2 kombinacjiodpowiedzi



W raju

a) Wąż namówił Ewę do zjedzenia jabłka

b) Ewa zerwała jabłko z drzewa wiadomości

Dobrego i Złego

c) Jabłko było małe i zielone

d) a + c prawidłowe

e) wszystkie odpowiedzi prawidłowe

A



TEST WIELOKROTNYCH

ODPOWIEDZI (MRQ)

Przedstawione kilka stwierdzeń, prawdziwych i nie, oraz kilka ich zestawień spośród których wybrać

należy tylko jedno zawierające wyłącznie zdaniaprawdziwe

1............., 2............., 3............., 4............... 5...........

a. 1, 2, 3, 4 b. 1, 3, 4, 5

c. 2, 3, 4, 5 d. 1, 2, 4, 5

Typu K:



Cesarz z bajki wyszedł na ulicę nagi ponieważ:

1. Krawiec mu wmawiał, że uszył nowe szaty

2. Nowe szaty były przeźroczyste

3. Dworzanie wstydzili się przyznać,że nie widzą szat

4. Cesarz się bardzo spieszył i nie zdążył się ubrać

a) 1, 2, 3 b) 2, 3, 4 c) 1, 3 d) 4

5



W oparciu o jeden trzon można tworzyćcałe kaskady pytań

Trzon zadania może być obszerny(np.opis choroby, opis zdarzenia), a pytania

mogą dotyczyć analizy związkówprzyczynowych lub rozwiązania problemu:




Pytania seryjne

- Zwykle związane z dłuższym opisem przypadku (sytuacji, problemu)

- Sprawdzają ten sam obszar wiedzy

- Gdy druga odpowiedź wynika z 1-ej (łańcuch odpowiedzi) student jest podwójnie karany (nagradzany)



°

° ° °

°

°

°

GLUG6PFDPDHAPPEPPYRLAC

100%

Poziom substratów pośrednich zmierzonych po 10 mininkubacji

100% oznacza wyniki bez cAMP A



Który enzym ulega aktywacji pod wpływem

cAMP?:

a) kinaza pyrogronianowa

b) karboksylaza pyrogronianowa

c) fosfofruktokinaza

d) difosfataza fruktozy

e) karboksylaza PEP



Który enzym ulega zahamowaniu podwpływem cAMP?:

a) karboksylaza pyrogronianowa

b) karboksylaza PEP

c) fosfofruktokinaza

d) difosfataza fruktozy

e) żaden z wymienionych



Trudno sobie wyobrazić dzieciństwo bez postaci zbajek, baśni, legend... . Połącz nazwisko autora zwykreowanymi przez niego bohaterami:

1 - Koziołek Matołek a - B. Leśmian 2 - Sierotka Marysia b - A. Fredro

3 - Sindbad Żeglarz c - M Konopnicka.

4 – Małpa w kąpieli d – K. Makuszyński

A. 1-a, 2-c, 3-b, 4-d . C. 1-d, 2-c, 3-b, 4-a.

B. 1-b, 2-d, 3-a, 4-c. D. 1-d, 2-c, 3-a, 4-b.



KIEDY STOSOWAĆ EGZAMINTESTOWY?

ale

Test typu MCQ nie powinien być jedyną

(główną) formą sprawdzianów końcowych

na studiach

Ż Ć



STUDENT MOŻE NIE ZDAĆ EGZAMINU

Ponieważ:

• student jest nieprzygotowany

• egzamin jest źle zaplanowany

• sposób oceny jest nieprawidłowy

DZIĘKUJĘ

Co pracownik naukowy powinien wiedzieć o testach

Documents

Transcript of Co pracownik naukowy powinien wiedzieć o testach