Post on 09-Oct-2020
Het "multiple-choice" tentamen "Trillingen en balancering"januari 1968Citation for published version (APA):Janssen, J. D. (1968). Het "multiple-choice" tentamen "Trillingen en balancering" januari 1968: een objectievestudietoets contra een mondeling examen. (DCT rapporten; Vol. 1968.001). Technische Hogeschool Eindhoven.
Document status and date:Gepubliceerd: 01/01/1968
Document Version:Uitgevers PDF, ook bekend als Version of Record
Please check the document version of this publication:
• A submitted manuscript is the version of the article upon submission and before peer-review. There can beimportant differences between the submitted version and the official published version of record. Peopleinterested in the research are advised to contact the author for the final version of the publication, or visit theDOI to the publisher's website.• The final author version and the galley proof are versions of the publication after peer review.• The final published version features the final layout of the paper including the volume, issue and pagenumbers.Link to publication
General rightsCopyright and moral rights for the publications made accessible in the public portal are retained by the authors and/or other copyright ownersand it is a condition of accessing publications that users recognise and abide by the legal requirements associated with these rights.
• Users may download and print one copy of any publication from the public portal for the purpose of private study or research. • You may not further distribute the material or use it for any profit-making activity or commercial gain • You may freely distribute the URL identifying the publication in the public portal.
If the publication is distributed under the terms of Article 25fa of the Dutch Copyright Act, indicated by the “Taverne” license above, pleasefollow below link for the End User Agreement:www.tue.nl/taverne
Take down policyIf you believe that this document breaches copyright please contact us at:openaccess@tue.nlproviding details and we will investigate your claim.
Download date: 28. Feb. 2021
H e t f fX4ult iple -Choic e it - tentamen
$ ' T r i l l i n g e n en Ba lancer ing" j a n u a r i '1968; een o b j e c t i e v e s t u d i e t o e t s c o n t r a
een mondeling examen
D r e k e J.D. Janssen @E - 68/1
Inhoud
1 . Inleiding 2. De test: algemene gegevens en resultaten 3 . De grens voldoende - onvoldoende 4, Het vaststellen van de cijfers in een tien-puntsschaal S e Rog enige gegevens van de test en de items
6, Is vooraf een schatting te geven van de ?'moeilijkheidt9 van een item?
7 . Xet mondeling examen 8. Vergelijking van de resultaten van de M.C.-test en het
mondeling onderzoek 9* De reacties van de studenten op de Hi.C.-test
I O . Conclusies en voorstellen
Blz o
1 -
4 15 18 79 23
25
30
41
43
Bijlage I Vragenlijst bij het tentamen "Trillingen en Balanc erin&* o
- 3 -
P r o p o r t i e
8, Was de i n s t r u c t i e v a n Ir. F.E. Veldpaus
goed o f s l e c h t a fgestemd op d i t type
tentamen ?
a. z e e r goed
b e goed
c o h e t g i n g wel
d , s l e c h t
e , z e e r s l e c h t
f. n i e t g e v o l g d
9. Hoe vond U i n h e t algemeen de formu-
l e r i n g d e r vragen?
a, zeer goed
b. goed
c . matig
d. s l e c h t
e , z e e r s l e c h t
IO. Voe lde U z i c h b i j deze t e s t r u s t i g e r
o f nerveuzer dan b i j klassieke s c h r i f -
t e l i j k e tentamens i n de mechanica?
a. v e e l r u s t i g e r
b e r u s t i g e r
c . even. r u s t i g
d. even nerveus
e , nerveuzer
Î. v e e l nerveuzer
0,00
o. 12 0.31 0e23 o. 15 O, 19
0,04
0.39 0,43 0*11
0.04
Opmerkingen:
- 2 -
Propor t i e
4, Hoe zoudt U de aard v a n de v r a g e n i n
h e t algemeen t yperen?
a. v e e l t e v e e l t h e o r i e
b. t e v e e l t h e o r i e
c e een goed evenwicht t u s s e n t h e o r i e
e n t o e p a s s i n g
d. t e v e e l t o e p a s s i n g
e. v e e l t e v e e l t o e p a s s i n g
5. Denkt U d a t Urn p r e s t a t i e s met deze t e s t
e e r l i j k e r o f minder e e r l i j k b e o o r d e e l d
worden dan met een klassiek s c h r i f t e l i j k
‘centamen (b,v. met 3 vraags tukken)?
a, v e e l e e r l i j k e r
b. e e r l i j k e r
c . h e t maakt geen v e r s c h i l
d. minder e e r l i j k
e . v e e l minder e e r l i j k
6. Vond U deze t e s t p r e t t i g e r o f v e r v e l e n d e r
dan Uw v r o e g e r e mechanica t e n t m e n s ?
a, v e e l p r e t t i g e r
b e p r e t t i g e r
c o h e t maakt geen v e r s c h i l
d v e r v e l e n d e r
e , v e e l v e r v e l e n d e r
7. Bias h e t c o l l e g e v a n Dr.Ire J-D. Janssen
goed o f s l e c h t a fges temd op d i t tyge
tentamen?
a. zeer goed
b. goed
c I h e t g i n g w e l
d. s l e c h t
e, z e e r s l e c h t
f. n i e t v a n t o e p a s s i n g
0.03 0.28
0652
0.17 0-00
0,07 0.25 0.11
0~36 0,21
0,00
0.28 0,00
O .34 0.38
0600
0.38
0-08 0.08
0.42
0-04
- 3 -
T.H.Z.
WE - 68/1
Het lWul t ip le -Choic e'' - t e n t amen
" T r i l l i n g e n en Ba lancer ing" j a n u a r i 1968 ;
een o b j e c t i e v e s t u d i e t o e t s c o n t r a een mondeling examen
I n l e i d i n g
Het vak r r T r i l l i n g e n en Ba lancer ing" (4.500) wordt i n h e t V-semester
gedoceerd gedurende twee uur p e r week door de schr i j ve r v a n deze no-
t i t i e s . H e t werd i n h e t na jaarssernekte
gegeven. I n voorgaande j a r e n maakten t r i l l i n g e n en b a l a n c e r i n g d e e l
u i t v a n h e t door Prof. E s m e i j e r gedoceerde - en t h a n s verdwenen - c o l l e g e : t ïTechnische Dynamica". Aan h e t c o l l e g e is een i n s t r u c t i e
toegevoegd v a n 2 uur p e r v e e r t i e n dagen.
De inhoud v a n h e t c o l l e g e stemt z e e r goed overeen met de inhoud v a n
h e t corresponderende d e e l van h e t v r o e g e r e c o l l e g e I1Technische Dyna-
mica", I n he t beg in v a n h e t semester werd nog n i e t gedacht a a n een
o b j e c t i e v e s t u d i e t o e t s , N e l werd ~ eg aar g e s t r e e f d h e t g e b i e d d o e l -
matig i n k l e i n e p a r t j e s t e s p l i t s e n , D e t h e o r i e werd a f g e l e i d aaa
de hand v a n en ige zogenaamde s tandaard-sys temen,
Bovendien werd v r i j v e e l t i j d besteed om de t h e o r i e t o e t e p a s s e n i n
andere v e r s c h i j n i n g rmen v a n een probleem, D i t waren s teeds een-
v o u d i g e voorbee lden . G e t r a c h t werd z o goed en d u i d e l i j k m o g e l i j k
o n d e r s c h e i d t e maken t u s s e n hypothesen en c o n c l u s i e s e Z o v e e l
werd verraeden om een bepaa lde stap i n h e t mathematisch model
t e maken met mechanica overwegingen, V e e l l i e v e r baseerden w i j ons
d a a r b i j op wiskundige gegevens en eigenschappen, @aar m o g e l i j k pro-
beerden w i j a c h t e r a f de v e r s c h i l y e n d e ( d e e l ) - r e s u l t a t e n u i t de m a -
themat i sche beschouwing physisch t e i n t e r p r e t e r e n ,
Het l eek ons doe lmat ig de eers te c o l l e g e - u r e n t e b e s t e d e n a a n - r e e d s
bekende - wiskunde en mechanica, l i d i j herhaa lden d e f i n i t i e s e n karak-
t e r i s t i e k e eigenschappen, Soms l e v e r d e n w i j h e t bewi j s i n andere
g e v a l l e n verwezen w i j s l e c h t s n a a r de c o l l e g e d i c t a t e n .
Op deze manier t r a c h t t e n w i j t e b e r e i k e n d a t ons b e t o o g n i e t t e l k e n s
onderbroken hoefde t e worden v o o r herha l ingen v a n inoudei* s t o f , W i j
menen d a t deze v p z e t gelilkt ise
Het c o l l e g e werd g e v o l g d door 25 à 35 personen. I n j a n u a r i 1968 deden
30 k a n d i d a t e n mee aan h e t tentamen (examen). Het merendeel v a n de
t en taminandi v o l g d e regelmatig h e t c o l l e g e . H i e r b i j moet aangetekend
worden d a t e r geen c o l l e g e d i c t a a t aanwezig is.
maal
* I n d i t r a p p o r t z i j n de begr ippen 'Itentamen" en "examen" synoniem, - 2 -
- 2 -
E i n d novegbes 1967 werd b e s l o t e n een o b j e c t i e v e s t u d i e t o e t s t o e t e
passen, Op advies van D r . PIeuwese, g r o e p o n d e r w i j s research, werd
gekozen v o o r de mult iple-choice-vorm met v ier a l t e r n a t i e v e n en met
een f t z e k e r h e i d s t o e t s F t , D i t w i l zeggen d a t ieder i tem bestaat u i t
een vraag, o p d r a c h t o f o n v o l l e d i g e bewer ing en v i e r antwoorden o f
a a n v u l l i n g e n . Een v a n deze v i e r a l t e r n a t i e v e n is j u i s t ; a l l e andere
z i j n o n j u i s t , B e h a l v e he t k i e z e n van h e t n a a r z i j n mening j u i s t e al-
t e r n a t i e f moet de k a n d i d a a t bovendien vermelden o f h i j zeker is v a n
z i j n antwoord o f n i e t , Een zeker antwoord d a t j u i s t is l e v e r t de kan-
d i d a a t 2 punten, een zeker antwoord d a t o n j u i s t is -1 punt, Een goed
antwoord waar de k a n d i d a a t n i e t z e k e r v a n w a s l e v e r t hem 1 punt ; een
f o u t antwoord zonder zekerheid i n g e v u l d en een o v e r g e s l a g e n vraag
l e v e r e n O punten. E n i g e t i j d v ó ó r h e t examen werden de k a n d i d a t e n
t i j d e n s h e t c o l l e g e d u i d e l i j k g e a t t e n d e e r d op de b e s t e e x a m e n s t r a t e g i e ,
Z i j werd bovendien e x p l i c i e t verrmield b i j de t e s t .
Beha lve o v e r de F ? m ~ l t i y l e = c h 0 i v u 9 f vma ( a f g e k o r t als M,C, is nog
even gedacht o v e r e e n "mult ip le - t rue- fa lse" vorm, Ilet b e l a n g r i j k s t e
v e r s c h i l met de M.C, vorm is d a t ieder der a l t e r n a t i e v e n j u i s t % z i j n , Ons bezwaar h i e r t e g e n is d a t de formuler ingen o n g e l o o f l i j k
p r e c i e s moeten z i j n , I n h e t onderhav ige vak r e s u l t e e r t d i t in h e t al-
gemeen i n zeer u i t v o e r i g e a l t e r n a t i e v e n .
B e s l o t e n werd een experiment u i t t e voeren om de r e s u l t a t e n v a n een
o b j e c t i e v e t e s t t e v e r g e l i j k e n met de r e s u l t a t e n v a n een mondeling
onderzoek, Er werd voor gezorgd d a t de 2 examinatoren voor c?e mon-
d e l i n g e tentamens op geen e n k e l e manier op de hoogte kwamen van de
H.Ce v r a g e n en de r e s u l t a t e n v a n de t e s t , D i t be tekende d a t twee
l e d e n van de g r o e p n i e t konden meewerken a a n de c o n s t r u c t i e van de
tes t . Van d r i e andere kon n i e t worden aangenomen d a t z i j vo ldoende
op de hoogte waren v a n c o l l e g e s t o f , Het g e v o l g is d a t d r i e mensen
beschikbaar waren om een gedeelte van hun t i j d t e bes teden a a n deze
t es t : de d o c e n t , de i n s t r u c t e u r en een w e t . medewerker,
Gedurende de eers te v e e r t i e n dagen v a n december I 9 6 7 c o n s t r u e e r d e de
docent 70 items, g e b r u i k makend v a n de taxonomie v a n Bloom. Deze
items werden v e r v o l g e n s met de i n s t r u c t e u r en de wet, medewerker be-
d i s c u s s i e e r d en g e c o r r i g e e r d . B e s l o t e n werd om 65 items i n d e t e s t op
t e nernen e n wel 47 o v e r t r i l l i n g e n en 1 8 o v e r b a l a n c e r i n g . De ver-
houding t u s s e n ' P t r i l l i n g e n f l en "balancering?' werd nagenoeg g e l i j k
~
- 3 -
- 3 -
gekozen aan de verhouding t u s s e n de c o l l e g e - u r e n d i e a a n h e t ene en
aan h e t andere o n d e r d e e l werden b e s t e e d .
Een k l e i n a a n t a l der items werd besproken met D r , Meuwese om t e ont-
dekken o f t y p i s c h e c o n s t r u c t i e f o u t e n werden gemaakt. D i t b leek n i e t
h e t geva l t e z i j n .
Het c o n s t r u e r e n van de items w a s v o o r s c h r i j v e r dezes een Tasc ine-
rende taak. Eet moeten v a s t s t e l l e n v a n de onderde len d i e v o o r een
item i n aanmerking komen, h e t c o n s t r u e r e n en formuleren v a n a a n t r e k -
k e l i j k e a l t e r n a t i e v e n en h e t werken met de Bloom-categorieën w a s
l ee rzaam en ui tdagend, Zwakke p l e k k e n i n h e t c o l l e g e en onderde len
d i e o n b e l a n g r i j k l i j k e n kwamen aan h e t l i c h t . Bovendien moest voor -
komen worden d a t het v e r w i j t gemaakt zou kunnen worden d a t alleeza
t h e o r i e en "weet jest' onderzocht werden.
G r o t e m o e i l i j k h e d e n hadden w i j met h e t v a s t s t e l l e n van de t i j d d i e
de s t u d e n t e n gemiddeld nod ig zouden hebben om de t e s t t e beantwoorden.
Genoemd werd de t i j d v a n 1 à. l , 5 minuut p e r i tem door iemand d i e reeds
e n i g e malen een M,C, t e s t g e b r u i k t had, Deze t i j d l e e k a a n z i e n l i j k t e
k o r t door de m o e i l i j k h e i d van de v r a g e n en de f t l ees t i jd" v a n h e t item.
t v i j b e s l o t e n 65 i t e m t e k i e z e n voor de 3 uur d i e de k a n d i d a t e n t e r
b e s c h i k k i n g werden ges te ld . Nemen w i j aan d a t de ffgemiddeldec' s t u d e n t
dan na ongeveer 2,s uur a l l e items beantwoord moet hebben dan b e t e k e n t
d a t v o o r de ftgemiddelde" s t u d e n t een t i j d v a n ongeveer 2,5 minuut per
i t e m b e s c h i k b a a r is. T i j d e n s he t laatste c o l l e g e werd h e t a a n t a l items bekend gemaakt. 6r
werd t e v e n s op gewezen d a t de t e s t een z e e r d i k pak p a p i e r (40 pag. ! )
zou z i j n . D i t om een schr ikrea t e voorkomen b i j het b e g i n v a n
h e t teritamea, Tevens we26 aan de s t u d e c t e c gevraagd om hun onedewer-
k i n g t e v e r l e n e n aan een k o r t e enquête na a f l o o p v a n de M.C. t e s t om
hun o p i n i e o v e r e n i g e zaken t e p e i l e n .
- 4 -
- 4 -
2, De t e s t : algemene gegevens en r e s n l t a t e n
De t e s t bes tond u i t 6 5 vragen: 47 over t r i l l i n g e n i 1 t / m 47) en 1 8
o v e r b a l a n c e r i n g (48 t/m 65) o
Aan de t e s t werd deelgenomen door 30 k a n d i d a t e n , aan w i e een rang-
nummer v a n 1 t o t en met 30 werd toegekend. A l l e a n a l y s e s w a a r b i j de
k a n d i d a t e n b e t r o k k e n waren werden anoniem u i t g e v o e r d . De k o p p e l i n g
v a n de naam v a n een k a n d i d a a t aan een nr, gebeurde i n een z o laat
m o g e l i j k s tadium om t e voorkomen d a t s t o r e n d e i n v l o e d e n v a n naam-
a s s o c i a t i e s een rol zouden s p e l e n .
Het u i t w e r k e n v a n de t e s t - r e s u l t a t e n gebeurde-door de g r o e p "Onder-
w i j s r esearch ! ! met behulp van de EL - X-8, Gebruik werd h i e r b i j ge-
maakt v a n programma A 02061603~ Je v a n L i e s h o u t N u l t i p l e - C h o i c e
met zekerhe idsaanduid ing . Eet o n d e r d e e l "Tr i l l ingen" h e t onderdee l
p lBa lancer ing t? en de t o t a l e t e s t werden na elkaar bewerkt en geana-
<_-. r j s e e r d o
D e t e s t f o r m u l i e r e n werden d insdag 9 J a n u a r i 1968 om ongeveer 1 ï 8 5 0 uttr
b i j de g r o e p "Onderwijs researchfP i n g e l e v e r d , Donderdagmiddag 11 jan-
u a r i 1968 naren a l l e r e s u l t a t e n bekend,
Wanneer h e t exper iment met h e t mondeling examen n i e t w a s u i t g e v o e r d
zou aan de k a n d i d a t e n nog vóór h e t week-end h e t r e s u l t a a t z i j n
meegedeeld! Er kan dus gesproken worden v a n een s n e l l e a f h a n d e l i n g
en een eminente se rv i ce v a n de groep "Onderwijs research",
T i j d e n s h e t maken v a n de t e s t w a s schr5.jver d e z e s s u r v e i l l a n t , IXén uur v6Ór h e t v e r s t r i j k e n v a n de t e r b e s c h i k k i n g g e s t e l d e t i j d v a n
3 uur b l e e k hem d a t een g r o o t g e d e e l t e v a n de g r o e p i n t i j d n o o d
d r e i g d e t e raken , Ne t goedvinden v a n de k a n d i d a t e n werd de beschik-
b a r e t i j d met een h a l f uur v e r l e n g d ,
In t a b e l I is v o o r i e d e r e proe fpersoon de s c o r e vermeld v o o r :
T r i l l i n g e n ( T i ? * ) , B a l a n c e r i n g (Ba.) en de t o t a l e t e s t (To. ) . Zowel
de s c o r i n g zonder zekerhe idsaanduid ing (aangeduid met ZZ), a ls d i e
- met z e k e r h e i d s a a n d u i d i n g (MZ) z i j n opgenomen,
Tabe l 11 bevat de f r e q u e n t i e v e r d e l i n g voor de v e r s c h i l l e n d e ondes-
de len , In T a b e l IV z i j n opgenomen de gemidde lde - sbor ing , h e t ge-
middelde met zekerheid beantwoorde items, de s t a n d a a r d d e v i a t i e s en
de s p r e i d i n g s g e b i e d e n .
I n T a b e l I11 is de c o r r e l a t i e m a t r i x opgenomen v o o r de s c o r e s b i j
_
- 5 -
- 5 -
Tr - Z.Z9 Ba - ZZ, To - ZZ, T r - MZ, Ba - MZ en To - MZ.
\Vi j constateren dat de gemiddelde score door de zekerheidsaanduiding betrekkelijk weinig toeneemt, De differentiatie tussen de kandidaten
wordt echter aanmerkelijk groter. Dit volgt uit de relatief grote toename van de standaarddeviatie wanneer de zekerheidsaanduiding wordt me e ger ekend o
Wij moeten dus concluderen dat de zekerheidstoets van grote beteke- nis is om een grote differentiatie tussen de kandidaten te verkrijgen,
~
( V o o r vervolg tek& zie pag. 9)
- 6 -
T a b e l I
- 6 -
R e s u l t a t e n p e r p r o e f p e r s o o n
Pr oe f p e r soon
I,
2.
3 . 4.
59 1
6, I
7. 8. 9.
IO, 11 ,
I
12.
6
14,
15. 169
17. 18. 19. 20 *
21 o
22 o
?3 0
2.4. 2 K -/ *
26. 27 6
28. 29 0
l e b i e d
zz
21
27 28
25 26 23 21
20
34 18
25
25 30 33 22
27 30 25 26 26 28
33 23 30 21
30 28
23 23 27
1-47 - -
r i l l i a
MZ
+ I 3 39 34 32 38 24
23 29 56 14
35 32 44
47 21
42 44
31 34
45 51 26
42
42 22
40 41 26 28
41
-47-+9L
?p1
r a n t a l seker e intw e
32 30 21
39 30 41 22
25 44 28
36 29 40 28
25 21
28
30 35 20
31 34 22
24
23 24 41
29 32 34
3-47
ZZ
3 5
10
5 12
5 5 6
11
6
9 7 9
10
7 8
12
0
10
I O
6 10
7 6
? O
10
9 7 2
8
3-1 8
l a n c e r i
MZ
---s + 6
13
5 21
O
7 4
1 8 2
10
4 10
13 10
8 17
O
16
15 5
12
10
9 12
14 10
6 O
12
.I 8-+36
>_
tan t a l ;eker e tntw .
12
7 1 1
I O
13 13
4 10
15 12
13 13 5
I 1
9 10
9 O
14
9 9
12
5 7
?6 12
11
9 2
10
1-1 8
zz
24
32 38 30 38 28 26 25
45 24
34 32 39 43 29 35 42
25 36 36 34 43 30 35 3? 40
37 30 25 35
0-65 -
T o t a a
I4Z
10
45 47 37 59 24 30 33 74
45 36 54 60
31 50 61
31 50 57 50 63 36 48
34 54 51 32 28
53
16
-65-+13C
t a n t a l : ekere m t w .
44
37 32 49 43 54 26
35 59 40
49
45 39 34 31 37 30 50
29 40 46 27 31 39 36 52 38 34 44
1-65
42
- 7 -
- 7 -
F r e q u e n t i e v e r d e l i n g s c o r e s
T a b e l I1
T r i l l i n g e n
s c o r e
1 8
20
21
22
23 25 26 27 28 55 30 34
f r e q .
1
1
3 1
4 4
3 3 3 4 2
1
s c o r e
+ 13 14 21
22
23 24 26 28 29 31 32 34 35 38 39 40 41 42 44
45 47 51 56
f r e q
I
1
1
1
1
1
2
1
1
1
2
2
I
1
1
I
2 3 , 2
1
1
1
1
B a l a n c e r i n g
ZZ
s c o r e
O
2
3 5 6 7 8 9
10
1 1
12
f r e q e
7
I
I
4 4 4 2
3 7 .I
2
s c o r e
- 3 - 0
+ 2
4
5 6 7 8 9
I O
12
13 14
15 16
17 18
21
f r e q o
I
3 i
2
2
2
I
I
1
5 3 2
1
1
1
1
1
1
Totaal
ZZ
s c o r e
24
25 26 28
29 30 37 32 34 35 36 37 38 39 40 42
43 45
f r eq ,
2
2
2
1
1
3 1
2
2
3 2
1
2
1
1
1
2
1
M:
s c o r e
I O
16 24 28
30 31 32 33 34 35 37 45 47 48
50
51
53 54 57 59 60
63 74
61
f r e q o
1
1
1
1
1
2
1
1
1
2
1
2
1
1
3 1
1
2
1
1
1
1
1
1
- 8 -
- 8 -
Tabe l I11
Gemiddelde s c o r i n g enz. van de PI.C.-test
Gemiddelde sc or i n g
S tandaard - d e v i a t i e
S p r e i d i n g s - gebied s c o r i n g
gemiddeld z a n t a l zekere antwoorden
S tandaard - d e v i a t i e zekere antwe
S p r e i d i n g s - g e b i e d zekere antwo or den
30.0
20 t o t 44 O t o t 16
T o t a a l
TO-ZZ
3344
6,O
24 t o t 45
TO-MZ
43.31. :/
1 4 . 5
10 t o t 7’
8.2
26 t o t 59
Tabe l I V
C o r r e l a t i e m a t r l x v o o r onderde len v a n de t e s t
- 9 -
De gemiddelde s c o r e w a s lager dan w i j vermacht hadden, Met name v i e l
ons t e g e n de toename v a n de s c o r e door de e x t r a winstpunten d i e t e
b e h a l e n waren met de zekerhe idsaanduid ing .
D e vrees zou kunnen b e s t a a n d a t h e t i n v o e r e n van de z e k e r h e i d s t o e t s
aarz le id ing zou kunnen z i j n v o o r een v e r k e e r d e meting, H e t i s w e l
r e d e l i j k om een met zekerheid gegeven antwoord meer t e honoreren dan
een onzeker goed gegeven antwoord, m a a r vermeden moet worden d a t h e t
z e k e r o f n i e t z e k e r z i j n v a n de k a n d i d a a t o v e r z i j n antwoord be lang-
r i j k e r wordt dan h e t b e g r i j p e n v a n en h e t opereren met de c o l l e g e s t o f ,
Anders gezegd: w i j w i l l e n primair de k e n n i s v a n en vaardigheid i n tri l - l i n g e n en b a l a n c e r i n g t o s e n en - n i e t h e t z e l f v e r t r o u w e n of de ze l f -
o v e r s c h a t t i n g v a n de k a n d i d a a t , B l i j k e n s t a b e l IV z i j n w e h i e r i n ge-
slaagd, Voor i e d e r der d e l e n is de c o r r e l a t i e t u s s e c de s c o r e , b e h a a l d
zonder zekerhe idsaanduid ing en d i e met zekerhe idsaanduid ing zeer hoog;
v o o r de t o t a l e t e s t is de c o r r e l a t i e f a c t o r 0,94,
D i t r e s u l t a a t is i n overeenstemming .met de u i t de l i t e r a t u u r bekende
gegevens
U i t t a b e l I11 v o l g t d a t h e t a a n t a l met z e r h e i d gegeven antwoorden
gemiddeld v o o r a l l e k a n d i d a t e n v r i j g r o o t is. B i j b a l a n c e r i n g is d i t
a a n t a l be t rokken op h e t t o t a l e a a n t a l v r a g e n i e t s lager dan b i j tr i l -
l i n g e n . Gemiddeld
met zekerheid beantwoord, t e r w i j l 54% van de ba lancer ingsprob lemen met
zekerheid werden beantwoord, W i j c o n s t a t e r e n v e r d e r ui t , deze t a b e l d a t
gemiddeld 55% van de t r i l l i n g s v r a g e n en 42% van de b a l a n c e r i n g s v r a g e n
goed z i j n beantwoord, Voor de h e l e t e s t werd gemiddeld 51% v a n de v ragen
goed, t e r w i j l 61% met zekerheid- werd beantwoord. H i e r u i t moet gecon-
door de k a n d i d a t e n 64% van de v r a g e n o v e r t r i l l i n g e n
c l u d e e r d worden d a t v o o r deze g r o e p s tudenten de v r a g e n a a n de m o e i l i j k e
k a n t waren, t e r w i j l de g r o e p bovendien r e d e l i j k v e e l moe i te had met de
z e k e r h e i d s t o e t s ,
W i j hadden reeds g e c o n s t a t e e r d d a t de i n v o e r i n g van de z e k e r h e i d s t o e t s
z o r g d r o e g voor een g r o t e r e s p r e i d i n g van de s c o r e s zonder d a t a f b r e u k
werd gedaan aan h e t d o e l v a n de t es t : h e t onderzoek n a a r h e t b e g r i p
v o o r t r i l l i n g e n en b a l a n c e r i n g , Het is i n t e r e s s a n t OM na t e gaan i n
h o e v e r r e h e t a a n t a l door een k a n d i d a a t met zekerheid beantwoorde
items c o r r e s p o n d e e r t met h e t a a n t a l door hem goed beantwoorde items.
Per k a n d i d a a t i e deze I n f o r m a t i e u i t t a b e l I t e v e r k r i j g e n , Een over -
z i c h t v o o r de h e l e groep v o l g t u i t de c o r r e l a t i e f a c t o r e n t u s s e n he t
- 1 1 -
- 11 -
a a n t a l z e k e r e antwoorden en de behaa lde s c o r e (met zekerhe idsaanduid ing)
z o a l s i n t a b e l V is vermeld , De i n deze t a b e l voorkomende a f k o r t i n g e n
betekenen: ZA-Tr: a a n t a l -- zekere antwoorden v o o r T r i l l i n g e n ; ZA-Br: aan-
t a l z e k e r e antwoorden v o o r B a l a n c e r i n g ; ZA-To: t o t a a l a a n t a l z e k e r e
a n t wo o r den e
T a b e l V
@or r e l a t iematr i x : a a n t a l z e k e r e a n t vroor den/scor e met z e k e r he i d
W i j c o n s t a t e r e n u i t t a b e l V d a t er een c o r r e l a t i e is t u s s e n h e t
a a n t a l met zekerheid gegeven antwoorden en de behaa lde s c o r i n g S , Voor
de t o t a l e t e s t is de c o r r e l a t i e f a c t o r 0 , 2 2 ; v o o r de twee onderde len
8, V i j moeten v a s t s t e l l e n d a t h e t "weten?9 en de "zekerheid h e t
t e weten" v r i j o n a f h a n k e l i j k e grootheden z i j n , Er is n o g a l vaak een - - - ~ - - 1 - ~ - - - ~
zeker antxonrd gegeven d a t F is,
Na deze c e n c l u s i e is h e t d e s t e p r e t t i g e r t e weten d a t de zekerhe ids -
t o e t s de waarde der t e s t n i e t h e e f t a a n g e t a s t .
De c o r r e l a t i e f a c t o r t u s s e n de s c o r i n g v o o r h e t o n d e r d e e l t r i l l i n g e n en
h e t o n d e r d e e l b a l a n c e r i n g is 0,60, Gezien de n i e t vo lmaakte betrouw-
baarhe id v a n be ide onderde len en h e t r e d e l i j k g r o t e v e r s c h i l i n onder-
werp moet deze c o r r e l a t i e als v r i j hoog worden aangemerkt. De cor reha -
t i e f a c t o r t u s s e n h e t a a n t a l zekere antwoorden b i j t r i l l r i n g e n en ba lan-
c e r i n g is laag (0.21). De hypothese a l s zou door de z e k e r h e i d s t o e t s
a l l e e n of v o o r n a m e l i j k iemand's z e l f v e r t r o u w e n worden gemeten l i j k t
n i e t houdbaar, Deze c o n c l u s i e is i n s t r i j d met de s u g g e s t i e v a n Roskam,
- 12 -
- 12 -
I n d i t verband moeten w i j w e l nog opmerken d a t m o g e l i j k e t i j d n o o d
b i j h e t o n d e r d e e l b a l a n c e r i n g v a n i n v l o e d geweest kan z i j n op h e t door
ons gevonden r e s u l t a a t o b e c o r r e l a t i e f a c t o r t u s s e n h e t p e r c e n t a g e kan-
d i d a t e n d a t een i t e m goed beantwoordde en h e t p e r c e n t a g e met z e k e r h e i d
gegeven antwoorden v o o r d a t i t e m , bedraagt O,S2 en is a a n m e r k e l i j k la-
ger dan d a t door van Naerssen werd gevonden.
Een b e l a n g r i j k e vraag v o o r i e d e r e t e s t is z i j n betrouwbaarheid . D i t w i l
zeggen de vraag i n h o e v e r r e t o e v a l l i g e f a c t o r e n z o a l s pech, o n d u i d e l i j k e
v r a g e n en "gemene" v r a g e n h e t p u n t e n - t o t a a l van een k a n d i d a a t b e i n v l o e d
kunnen hebben, De betrouwbaarheid kan worden u i t g e d r u k t met behulp van
de zogenaanide i n t e r n e c o n s i s t e n t i e van. de t e s t i n de vorm v a n de co-
e f f i c i g n t CY (Kuder-Richardson formule 20) d i e g e d e f i n i e e r d is als:
m ~
m o CY = - m- 1 var t w a a r b i j
13 : a a n t a l i t e m s
va r t : v a r i a n t i e v a n de
var[i. : v a r i a n t i e v a n ide item
Deze betrouwbaarheidscoëfficient is - z i e l i t e r a t u u r - een beneden-
g r e n s voor de werke l i jke betrouwbaarheid , E i j i t a gebaseerd op de hypo-
these d a t a l l e i t e m s v a n g e l i j k e waarde z i j n om &én hoedanigheid t e
meten, Een homogene t e s t met w e i n i g t c s l e c h t e ï i v ragen z a l e e n i i i t e r n e
c o n s i s t e n t i e i n de buur t v a n 1 b e z i t t e n . Door van Naerssen werd i n een
a a n t a l c o n c r e t e g e v a l l e n vas tges te ld d a t CY een v r i j goede b e n a d e r i n g
is voor de twee-he l f tenbetrouwbaarheid . H i e r b i j wordt de s c o r i n g v a n
een k a n d i d a a t v o o r de ene h e l f t v a n de t e s t v e r g e l e k e n net de s c o r i n g
v o o r de andere h e l f t . D e i n t e r n e c o n s i s t e n t i e is eveneens ongeveer
g e l i j k a a n de c o r r e l a t i e f a c t o r t u s s e n de s c o r i n g v a n de k a n d i d a t e n
wanneer z i j twee maal de t e s t zouden maken, onder de v e r o n d e r s t e l l i n g
d a t h e r i n n e n i n g s e f f e c t e n geen rol s p e l e n ,
I n t a b e l V I is v o o r i e d e r der onderde len de i n t e r n e c o n s i s t e n t i e weer-
~~
gegeven *
- '13 -
- 13 -
T a b e l V I I n t e r n e C o n s i s t e n t i e
I n t e r n e C o n s i s t e n t i e
D e i n t e r n e c o n s i s t e n t i e is - naar de mening v a n D r , Meuwrese - v o l -
doende g r o o t om de t e s t als betrouwbaar c r i t e r i u m - u i t e r a a r d afge-
z i e n van de inhoud - t e hanteren, D i t is o v e r i g e n s geen r e d e n om geen
pogingen i n h e t werk t e s t e l l e n de t e s t nog betrouwbaarder t e doen
z i j n ,
Door van Naerssen werd gevonden d a t de be t rouwbaarhe id v a n de t e s t
door de z e k e r h e i d s a a n d u i d i n g toenam, D i t e f f e c t c o n s t a t e r e n w i j ook
b i j h e t o n d e r d e e l t r i l l i n g e n ; b i j b a l a n c e r i n g d a a r e n t e g e n neemt de
betrBQv!baarheid - af, i N e l l i c h t is d i t t e v e r k l a r e n door t i j d g e b r e k b i j
de kandida ten , Een z e l f d e v e r k l a r i n g zou gegeven kunrzen worden v o o r
h e t onveranderd b l i j % e n van Ue i n t e r n e c o n s i s t e n t i e v o o r de t o t a l e
t e s t . Met behulp v a n de formule
waar b i j
rgl o betrouwbaarheid van de t e s t
rpl : g e s c h a t t e betrouwbaarheid v a n de tes t wanneer *
de t e s t K raaal z o v e e l items zou b e v a t t e n
K : de verhouding t u s s e n h e t a a n t a l items b i j ver-
a n d e r i n g v a n de l e n g t e der t e s t en h e t z a n t 2 1
items v a n de g e b r u i k t e t e s t
kan - i n a n a l o g i e met van Naerssen - worden nagegaan met h o e v e e l
p r i c e n t de t e s t zonder zekerhe idsaanduid ing - _ v e r l e n g d zou moeten z i j n ~
- 14 -
om e e n z e l f d e betrouwbaarheid t e v e r k r i j g e n als b i j de tes t met zeker-
he idsaanduid ing , W i j p a s s e n d i t t o e op h e t onderdee l t r i l l i n g e n en c o
c o n c l u d e r e n d a t een v e r l e n g i n g van 32% n o o d z a k e l i j k gewees t zou z i j n
( van Naerssen 21%, r e s p , 31%). I n p l a a t s v a n 47 vragen over t r i l l i n g e n zouden er dan dus 62 v r a g e n
o v e r t r i l l i n g e n ges te ld moeten z i j n .
- I 5 -
- 15 -
3. De g r e n s vo ldoende - onvoldoende
Er werd op v i e r manieren g e t r a c h t de g r e n s vo ldoende - onvoldoende
vas t t e s t e l l e n .
a. Kernitemmekhode
Er werden 8 items v a n t r i l l i n g e n en 4 v a n b a l a n c e r i n g aangewezen
als zogenaamde kernikems. D i t w i l zeggen d a t de docent v a n mening
w a s d a t k a n d i d a t e n d i e de s t o f j u i s t vo ldoende b e s t u d e e r d hadden
deze items zeker-goed zouden beantwoorden t e r w i j l de onvoldoende-
k a n d i d a t e n d i t n i e t zouden doen. Het gemiddelde p e r c e n t a g e zeker-
goed beankwoords kern-i tems zou een r e d e l i j k e p e r c e n t a g e voldoende-
kandida ten op l e v e r e n ,
I n t a b e l V I I z i j n de r e s u l t a t e n v a n d i t onderzoek opgenomene
T a b e l V I 1
p r o p o r t i e gemiddelde zeker-goed zeker-goed
I i
- 16 -
- 16 -
De r e s u l t a t e n maken ons i n z i e n s de kernitemmethode onbru ikbaar .
De s p r e i d i n g i n de p r o p o r t i e s is z e e r g r o o t , Er zouden s l e c h t s
3'7% v a n de k a n d i d a t e n s l a g e n . De gemiddelde m o e i l i j k h e i d van de
k e r n i t e m s is g r o t e r dan h e t gemiddelde van de t e s t ,
b o B e s t u d e r i n g v a n h e t r e s u l t a a t van de k a n d i d a t e n n a b i j de s c h e i d i n g
vo ldoende - onvoldoende,
H i e r b i j word t u i t g e g a a n van een b e p a a l d lpercentage onvoldoendes ,
De g e l e v e r d e p r e s t a t i e s van een a a n t a l kandida ten aai? w e e r s z i j d e n
v a n deze - h y p o t h e t i s c h e - g r e n s word t g e a n a l y s e e r d om t e b e s l i s s e n
o f de g r e n s op de j u i s t e p l a a t s gelegd is, V a l t deze b e s l i s s i n g
n e g a t i e f u i t dan wordt de g r e n s v e r l e g d en d e z e l f d e p r o c e d u r e her-
h a a l d o
Ook deze methode w a s v o o r ons onbruikbaar : d e e l s omdat n a u w e l i j k s
een t o t a a l indruk w a s .te v e r k r i j g e n , dee l s omdat de t e s t a a n de
m o e i l i j k e k a n t WELS, w a t r e s u l t e e r t i n een v r i j g r o o t a a n t a l f o u t i e v e
antwoorden. Ook kandida ten met een r e l a t i e f hoge s c o r e mäken zodoende
een zwakke indruk,
W i j b e s e f f e n d a t de onbru ikbaarhe id v a n deze methode zowe l h e t g e v o l g
is van h e t nieuw z i j n van de vraagmethode als v a n een o n d u i d e l i j k en
n i e t a a n g e p a s t b e e l d van de d o e l s t e l l i n g e n v a n h e t onder
6. Q
Vóór de t e s t wordt vas tges te ld h o e v e e l p r o c e n t v a n de k a n d i d a t e n
moeten worden afgewezen, D i t kan b i j y o o r b e e ï d gebeuren door de be-
s t u d e r i n g van h e t a a n t a l afgewezen k a n d i d a t e n b i j v o r i g e examens i n
h e t b e t r e f f e n d e vak. B e t f e i t d a t d i t vak de eers te maal geëxamineerd
werd b e l e t t e deze werkwi jze ,
I n plaats daarvan s t e l d e n w i j arbitrair een p e r c e n t a g e v a n 20% afge-
wezen k a n d i d a t e n vas t o U i t '$?psychologische overwegingen" v e r l a a g d e n
w i j d i t getal t o t 13%* Deze norm werd doorgevoerd , De k a n d i d a t e n 1 , 6, 10 en 29 werden af-
gewezen,
Een v a r i a n t van deze werkwijze, nu a l l e kandida ten bovendien mon-
d e l i n g geëxamineerd werden, is h e t p e r c e n t a g e afgewezen k a n d i d a t e n
g e l i j k t e s t e l l e n aan d a t b i j h e t mondeling. Er werden b i j h e t mon-
d e l i n g examen 8 kandida ten , d e i . 27% v a n h e t t o t a a l afgewezen,
W i j z u l l e n nog terugkomen op de redenen om deze norm n i e t t e han-
t e r e n .
- 17 -
- 1 7 -
d, Het v a s t s t e l l e n van de minimale s c o r e
Vóór de t e s t werd vas tges te ld d a t voor h e t h a l e n v a n een vo ldoende
c i j f e r minimaal 33 punten (met z e k e r h e i d ) g e s c o o r d moesten worden.
D i t a a n t a l werd v e r k r e g e n door de - n i e t gemot iveerde - werkwijze
h e t h e l e s c o r e g e b i e ü (-67 t o t +I301 t e t rans formeren naar een
t i en -punts schaa l (-65+ O 9 + 1 3 O - r 1 0 ) en een v i j f o f minder af t e wi jzen .
B i j deze g r o e p b e t e k e n t d i t d a t 8 kandida ten , dus 27% v a n de groep ,
wordt afgewezen, W i j w i j z e n op de overeenkomst v a n d i t r e s u l t a a t
met de r e s u l t a t e n v a n h e t mondeling examen,
- I8 -
- 18 -
4, B e t v a s t s t e l l e n van de c i j f e r s i n een t i en -puntsschaa l ,
Nu de s c h e i d i n g vo ldoende - onvoldoende gemaakt is, is de b e l a n g r i j k s t e
b e s l i s s i n g genomen, D e d o o r o n s gekozen g r e n s c o r r e s p o n d e e r t met h e t
nog j u i s t s l a g e n v a n de k a n d i d a a t d i e 30 punten behaald h e e f t . W i j
w i l l e n deze k a n d i d a a t een 6 geven i n de g e b r u i k e l i j k e puntenschaa l ,
De b e s t e k a n d i d a a t s c o o r d e 74 punten. W i j 1 waarderen d i t met "uitmuntend" (IO) <1 mede omdat de examinatoren b i j h e t mondeling r e s p e c t i e v e l i j k 59
De s n a l y s e v a n de f r e q u e n t i e v e r d e l i n g der s c o r e s ( z i e t a b e l 11) maakt
de vo lgende l i n e a i r e t r a n s f o r m a t i e r e d e l i j k ( z i e t a b e l VIII), T a b e l VI11
s c o r e c i j f e r
6
7 8 9 10
f r e q u e n t i e
3 1
- 19 -
- 19 -
5. Nog e n i g e gegevens v a n d e t e s t en de i t ems
I n h e t voorgaande ( h o o f d s t u k 2 ) z i j n r e e d s een a a n t a l gegevens vermeld
v a n de.M.C. t e s t , W i j w i l l e n h i e r nog een a a n t a l andere r e s u l t a t e n
vermelden, i n h e t b i j z o n d e r o v e r de i tems,
Voor i e d e r i t e m z i j n de vo lgende - s t a t i s t i s c h e - groo theden berekend.
a.
b.
C .
d.
e e
f ,
a a n t r e k k e l i j k h e i d der a l t e r n a t i e v e n ; d,w,z, h e t p e r c e n t a g e der
kandida ten d a t i eder d e r v i e s a l t e r n a t i e v e n gekozen h e e f t als
h e t j u i s t e antwoord
a a n t r e k k e l i j k h e i d der a l t e r n a t i e v e n met zekerhe idsaanduid ing ;
z i e a. Het v e r s c h i l met a is d a t v o o r i e d e r a l t e r n a t i e f boven-
d i e n ondersche id wordt gemaakt t u s s e n met en zonder zekerheid
beantwoorden
h e t p e r c e n t a g e k a n d i d a t e n d a t h e t i tem o v e r s l o e g
h e t p e r c e n t a g e k a n d i d a t e n d a t h e t item met zekerheid beantwoord
h e e f t ; d i t p e r c e n t a g e wordt i n de l i t e r a t u u r ( z i e v a n Naerssen)
de " s u b j e c t i e v e gemakkelijkheid" genoemd
de i t e m - t o t a a l c o r r e l a t i e ; h e t a a n t a l punten d a t de k a n d i d a t e n
v o o r h e t b e t r e f f e n d e item behaalden ( O o f 1 ) wordt g e c o r r e l e e r d
met de s c o r e (zonder zekerhe idsaanduid ing) van de k a n d i d a a t ,
De i t e m - t o t a a l c o r r e l a t i e s geven een indruk o v e r de homogeni te i t
v a n de t e s t ( t e s t homogeen wanneer er geen g r o t e o n d e r l i n g e ver -
s c h i l l e n t u s s e n de i t e m - t o t a a l c o r r e l a t i e s b e s t a a n ) . Verder be-
va t de i t e m - t o t a a l c o r r e l a t i e i n f o r m a t i e o v e r de nate waar in h e t
item de u i t e i n d e l i j k e v o l g o r d e d e r k a n d i d a t e n v o o r s p e l d e .
Ui tgaande van de hypothese d a t de t e s t &én-dimensionaal moet
meten, is een e i s h e t r e d e l i j k g r o o t z i j n v a n h e t g r o o t s t e ge-
d e e l t e v a n d e i t e m - t o t a a l c o r r e l a t i e s ,
Een hoge i t e m - t o t a a l c o r r e l a t i e w i l zeggen d a t d e - gekeken naar
de h e l e t e s t - goede k a n d i d a t e n de vraag goed beantwoorden ter -
w i j l de s l e c h t e k a n d i d a t e n de vraag f o u t beantwoorden
de i t e m - t o t a a l c o r r e l a t i e met zekerhe idsaanduid ing
deze g r o o t h e i d h e e f t deze l fde b e t e k e n i s a ls de onder e. vermelde,
a l l e e n moet nu a l l e i n f o r m a t i e be t rokken worden op a l l e gegetrens
me t zeker h e i d s aandui d i n g
p h i goed - zeker
deze g r o o t h e i d is een maat voor de c o r r e l a t i e t u s s e n h e t goed
beantwoorden en h e t zeker beantwoorden e n e r z i j d s en h e t f o u t be-
antwoorden gecombineerd met een onzeker antwoord a n d e r z i j d s ,
~~
- 20 -
- 20 -
De d e f i n i t i e v a n l u i d t :
zg*Of - zf*Og Y = d ( z g + z f 1 (zgi-og) (z f9Of) ( O f + O g )
met zg : a a n t a l zeker-goed gegeven antwoorden
zf : a a n t a l zeker - fou t gegeven antwoorden
Og : a a n t a l onzeker-goed gegeven antwoorden
O f : a a n t a l onzeker - fout gegeven antwoorden
Wanneer zg >> zf en O f »Og, dus wanneer h e t merendeel der k a n d i d a t e n
d i e een zeker antwoord gaven t e v e n s een goed antwoord gaven , t e r w i j l
h e t g r o o t s t e gedee l te van de onzekere an
Y' i n de b u u r t v a n 91, Wanneer zf >>zg en
as, dan li
= O wanneer h e t zeker be ntwoorden en h e t goed beantwoorden onaf-
i j k z i j n , dus b i j v o o r b e e l d wanneer zg = zf = O g = O f ,
r een v a n de grootheden zg, z f , O g o f O f meer dan b i j v o o r b e e l d
80% v a n h e t t o t a l e a a n t a l bedraag t is de waarde
k l e i n e o n d e r l i n g e w i j z i g i n g e n i n de a r e a a n t a l l e n g r o t e i n v l o e d
op Lp u i t o e f e n e n ,
Voorbee ld , S t e l z g = 80 als z g + zf + 02 + Of = 100
dan g e l d t b i j O f = 10
onbru ikbaar omdat
= Oo7S en b i j zf = 10 V = -0,l Of =
O t Y7 og = 10
zf =
og = 10
Door 10% van de k a n d i d a t e n van onzeker - fout over t e h e v e l e n n a a r zeker-
f o u t v e r a n d e r t y v a n 90.75 t o t -0-1,
U i t de onder a, en b o vermelde groo theden kan i n f o r a a t i e verkr
worden o v e r de v e r s c h i l l e n d e a l t e r n a t i e v e n b i j een item,
Soms za l dan geconc ludeerd worden d a t b e p a a l d e a l t e r n a t i e v e n d o o r hun
f o r m u l e r i n g mis le idend gewerkt hebben; soms kan de hypo these gemaakt
worden d a t h e t o n d e r w i j s (b ,v , een e v e n t u e l e s y l l a b u s ) op een b e p a a l d
o n d e r d e e l n i e t i n overeenstemming w a s met de ges te lde ( tentamen) e i s e n ,
B i j de onderhav ige t e s t hebben w i j h e r h a a l d e l i j k v e r r a s s e n d e in formatLe
verkregen . De indruk d i e men b i j een klassiek tentamen w e l overhoudt
d a t van bepaalde d e l e n v a n h e t vak door s t u d e n t e n n i e t s is be-
grepenf2 kan b i j g e b r u i k v a n een o b j e c t i e v e t e s t worden omgezet i n een
op de p r e s t a t i e s van een he le groep gefundeerde u i t s p r a a k ,
Bovenaien k r i j g e n w i j i n f o r m a t i e i n welke r i c h t i n g een c o r r e c t i e i n
h e t o n d e r w i j s g e z o c h t moet worden.
- 21 -
- 21 -
U i t c o volgt d a t b i j h e t onderdee l t r i l l i n g e n b i j n a s t e e d s door a l l e
k a n d i d a t e n de j u i s t e tentamen-techniek is g e v o l g d : g66n vraag over -
s l a a n , D e laatste items v a n b a l a n e e r i n g worden door een a a n m e r k e l i j k
p e r c e n t a g e d e r k a n d i d a t e n ( t o t 23%) o v e r g e s l a g e n . D i t w i j s t op t i j d -
nood e
W i j c o n s t a t e r e n v e r d e r d a t items d i e een v r i j u i t g e b r e i d e b e c i j f e r i n g
v e r e i s t e n , nog a l eens worden o v e r g e s l a g e n
I n t a b e l I11 z i j n e n i g e a l g e a e n e gegevens v o o r de i t e m - t o t a a l c o r r e l a -
t i e s , de phi-waarden en h e t p e r c e n t a g e met z e k e r h e i d gegeven antwoordenl
opgenomen, T a b e l X'bevat de c o r r e l a t i e - f a c t o r e n t u s s e n deze grootheden, _ ~ . .
T a b e l I X p e r c e n t a g e zeker
T a b e l X p C o r r e l a t i e m a t r i x
T o t a a l ,
- 22 -
- 22 -
De g r o t e s t a n d a a r d - d e v i a t i e s tonen aan d a t e r een g r o t e s p r e i d i n g
i s t u s s e n de gegevens v o o r de v e r s c h i l l e n d e v ragen , De gemiddelde
waarde v o o r de i t e m - t o t a a l c o r r e l a t i e s l i j k e n aan de lage k a n t (vg l ,
v a n Naerssen , d i e gemiddelde waarden v a n 0.23 en 0.24 vond). Voor een
verdergaande i n t e r p r e t a t i e v a n de h i e r vermelde r e s u l t a t e n z a l de
s t e u n v a n de groep onderwi j s research worden ingeroepen,
- 23 -
. 1 . 4-
- 23 -
6. Is v o o r a f een s c h a t t i n g t e geven v a n de "moei l i jkheid" v a n een item?
Om twee redenen is een onderzoek n a a r de v o o r s p e l b a a r h e i d v a n de
m o e i l i j k h e i d va.n een vraag b e l a n g r i j k . Op de e e r s t e plaats om vast
t e s t e l l e n i n h o e v e r r e a p r i o r i de m o e i l i j k h e i d van een item k a n
worden vas tges te ld . Op de tweede plaats is i n t e r e s s a n t om t e onder-
zoeken i n h o e v e r r e de meningen v a n v e r s c h i l l e n d e personen h i e r i n
overeenstemmen, B i j de klassieke tentamineer-methoden en zeker b i j
h e t mondeling examen is voor de b e o o r d e l i n g van de p r e s t a t i e s van een
k a n d i d a a t v a n b e l a n g hoe f9moei l i jk" of hoe "gemakkelijks' de examintor
de door hem g e s t e l d e vraag v i n d t - - 1 ' _ _ _
W i j voerden h e t vo lgende experiment u i t .
De d r i e mensen d i e meewerkten aan de c o n s t r u c t i e van de t e s t ( t e
weten: de d o c e n t , de i n s t r u c t e u r en een w e t . med.) gaven v Ó Ó r h e t
examen v o o r i e d e r i t e m aan h o e v e e l p r o c e n t van de kandida ten een
b e p a a l d i tem goed zou beantwoorden. Daarna werd door d i t team samen
nogmaals d i t p e r c e n t a g e vastgesteld.
N a d a t de mondelinge examens waren afgenomen en de examinatoren v a n
h e t mondeling de t e s t gemaakt hadden, gaven ook z i j een s c h a t t i n g
~ VEK h e t p e r c e n t a g e goede antwoorden p e r item. De examinatoren z u l l e n
worden aangeduid als- Ex.11 en Ex. 11. De zes a l d u s v e r k r e g e n s c h a t t i n g e n werden o n d e r l i n g en met de u i t de
t e s t berekende m o e i l i j k h e i d s g r a a d v e r g e l e k e n ( z i e t a b e l XI. Tevens
Eer6 de gemiddelde n o e i l i j k h e i d en de s t a n d a a r d d e v i a t i e berekend ( z i e
t a b e l XI).
T a b e l X
doc e n t
i n s t r u c t e u r
wet. rned.
team
ex . I
ex . I1 t e s t
C o r r e l a t i e m a t r i x m o e i l i j k h e i d s g r a a d
docent
- 0.47 0.36 0.82
0.53 0.36 0.36
i n s t r u c - wet .
- 0.49 - 0.71 0.69
tearr
=
- 0.60 0.47 0.40
ex. I
_r
- 0.58 0.62
ex. I1
- 0.36
t e s t (zonder zekerheid)
- 24 -
- 24 -
T a b e l X I M o e i l i j k h e i d s g r a a d
%ij c o n s t a t e r e n u i t t a b e l X d a t de c o r r e l a t i e t u s s e n geschatte moei-
l i j k h e i d en de w e r k e l i j k e i u o e i l i j k h e i d v r i j laag is, Door examinator I
werd de b e s t e v o o r s p e l l i n g gedaan, D i t kan w e l l i c h t v e r k l a a r d worden
u i t de algemene examen-ervaring d i e deze examinator b e z i t , M o g e l i j k
i s ook h e t f e i t d a t de s c h a t t i n g e n gemaakt werden nada t de h e l e g r o e p
h e t mondeling tentamen gepasserd w a s van i n v l o e d .
De c o r r e l a t i e t u s s e n de s c h a t t i n g e n van de deelnemers z i j n eveneens
laag. D i t w i l zeggen d a t p e r vraag de S c h a t t i n g e n van de v e r s c h i l l e n d e
mensen n o g a l eens f l i n k v a n elkaar v e r s c h i l l e n , W i j v r a g e n o n s af of
deze c o n c l u s i e n i e t t o t g e v o l g h e e f t d a t b i j v o o r b e e l d b i j een monde-
l i n g examen een v r i j g r o t e kans bes taa t d a t twee examinatoren een
t o t a a l v e r s c h i l l e n d e o p v a t t i n g hebben o v e r de m o e i l i j k h e i d v a n ges te lde
v r a g e n en dus o v e r de w i j z e waarop de b e o o r d e l i n g moet worden gerna&t*
Bovendien l i j k t d i t f e i t n a d e l i g t e werken b i j h e t v a s t s t e l l e n v a n kern-
items,
U i t t a b e l X I v o l g t d a t de t e s t m o e i l i j k e r was d a n verwacht werd, Een
g l o b a l e i n d r u k o v e r de m o e i l i j k h e i d w a s e c h t e r we l t e v e r k r i j g e n . De
d o c e n t en exo I b l i j k e n goed de s t a n d a a r d d e v i a t i e t e v o o r s p e l l e n , D i t
gegeven is een b e l a n g r i j k t e s t g e g e v e n i n verband met de d i s c r i m i n a t i e
d i e de t e s t t o t s t a n d moet brengen.
Het door Roskam g e s i g n a l e e r d e v e r s c h i j n s e l da t raaar z e l d e n e e n vraag
gemakkelijker w a s dan verwacht werd kan zeker n i e t v o o r i e d e r der
deelnemers aan d i t exper iment worden gehandhaafd.
- 25 -
- 25 -
7 * Het mondeling examen
Door a l l e 30 k a n d i d a t e n werd na de m u l t i p l e - c h o i c e t e s t o v e r " T r i l -
l i n g e n en Ba lancer ing" een mondeling onderzoek v a n nominaal 45 min,
afgenomen door twee examinatoren,
Z i j waren g e d e t a i l l e e r d op de hoogte v a n de op h e t c o l l e g e behandelde
s t o f , d o o r d a t z i j de b e s c h i k k i n g hadden o v e r u i t g e b r e i d e n o t i t i e s van
de docent en v a n de i n s t r u c t e u r , d i e a l l e c o l l e g e s g e v o l g d h e e f t , Z i j
konden bovendien besch ikken o v e r een geluidsopnanie van p r a c t i s c h de
gehele c o l l e g e s t o f , Van deze laa ts te f a c i l i t e i t w e r d geen g e b r u i k ge-
maakt.
De examinatoren waren n i e t op de hoog te v a n de M,C. items, Evenmin
b e s c h i k t e n z i j o v e r r e s u l t a t e n v a n deze t e s t ,
Het mondeling onderzoek gebeurde op de i n de g r o e p t e c h n i s c h e mecha-
n i c a g e b r u i k e l i j k e manier. D i t w i l zeggen d a t een bepaa lde k a n d i d a a t
door &én examinator aan de tand wordt g e v o e l d , De andere examinator
b e p e r k t z i c h t o t h e t p l e g e n van k l e i n e ingrepen i n de vorm v a n d e t a i l -
v r a g e n en h i n t s ,
I n h e t algemeen worden twee opeenvolgende k a n d i d a t e n n i e t door d e z e l f d e
examinator onderzocht ,
De examinatoren hebben v o o r i e d e r e k a n d i d a a t de b e s c h i k k i n g o v e r een
kaart waarop een a a n t a l gegevens vermeld s t a a n , D e b e l a n g r i j k s t e z i j n :
a, v o o r o p l e i d l n g (HeBeS., Gymnasium, H.a.S.> b. eindexamen c i j f e r s voor wiskunde, natuurkunde en scheikunde
c s jaar v a n 'ìe i n s c h r i j v i n g
d. een a a n t a l c i j f e r s voor de afgelegde examens; i n d i t geva l
i n h e t algemeen h e t P-examen en h e t Kl-exauzen. Ook examens
d i e e i n d i g e n i n een v e r l e n g i n g , nader onderzoek o f a f w i j z i n g
z i j n vermeld-
e , t i j d s t i p v a n s l a g e n v o o r deze examens
f , de behaa lde c i j f e r s voor de door de g r o e p v e r z o r g d e vakken,
I n h e t algemeen z i j n d i t i n d i t s tadium van de s t u d i e i n -
l e i d i n g t e c h n i s c h e mechan I, I1 en I11 g. o v e r de k a n d i d a a t gemaakte "karakteristieke?' opmerkingen
door examencommissies i n een eerder s tad ium van de s t u d i e
Het g e b r u i k v a n de kaart l i j k t m i j z e e r v e e l nade len t e b e z i t t e n , H e t
examen wordt begonnen met een f f vooroordee l f ' o v e r d.e k a n d i d a a t opge-
bouwd u i t c i j f e r s i n een e e r d e r s t ad ium behaa ld en u i t e n i g e opmerkingen
d i e door v o r i g e examencommissies gemaakt z i j n , Deze opmerkingen hebben
- 26 -
- 26 -
d e e l s b e t r e k k i n g op h e t beheersen van de s t o f , d e e l s op p e r s o o n l i j k -
hzidskenmerken, S i j deze laatste c a t e g o r i e moet n i e t u i t h e t oog ver-
l o r e n worden d a t z i j gemaakt z i j n door leken-psychologen!
B i j h e t v a s t s t e l l e n v a n de v o l g o r d e waar in de k a n d i d a t e n geëxamineerd
werden moest r e k e n i n g worden gehouden met examenzi t t ingen v a n andere
vakken, Over igens werd de i n d e l i n g w i l l e k e u r i g gemaakt.
De docent ( t e v e n s c o n s t r u c t e u r van de M.C. t e s t ) k r e e g toestemming
a ls '?toehoorder" b i j h e t mondeling examen aanwezig t e z i j n , Om b i j
de s t u d e n t e n misvers tanden t e voorkomen werd medegedeeld d a t de docent
op geen e n k e l e manier d e e l zou nemen aan de d i s c u s s i e o f de beoorde l ing ,
B i j 10 van de 30 k a n d i d a t e n v o l g d e de a u t e u r van d i t r a p p o r t h e t mon- d e l i n g onderzoek. H i j kreeg bovendien de b e s c h i k k i n g o v e r a l l e t i j d e n s
h e t n o n d e l i n g gemaakte n o t i t i e s . H i j w a s d a a r b i j n i e t op de hoogte van
de door de k a n d i d a a t behaalde s c o r e b i j de t e s t ,
Vragen
I n h e t algemeen wordt een v r a a g s t u k geschetst waarvoor e e n o p l o s s i n g
gevraagd wordt Meestal wordt een f i g u u r getekend waardoor he t probleem
min o f meer gekarakteriseerd is t e r w i j l mondeling een a a n t a l hypothesen
worden meegedeeld en - i n e n k e l e g e v a l l e n - een b e s c h r i j v i n g wordt ge-
geven v a n de c o n s t r u c t i e waarvan h e t v r a a g s t u k een s c h e m a t i s e r i n g is,
De v a r i a t i e i n de v r a a g s t u k k e n is n i e t buitengewoon g r o o t , I n h e t al -
gemeen k r i j g t iedere k a n d i d a a t s l e c h t s twee v r a a g s t u k k e n onder ogen,
De meeste h i e r v a n komen - e v e n t n e e l met een k l e i n e variatie - m h s t e n s
tweemaal v o o r - Het is mijn mening d a t v raags tukken d i e s l e c h t s eenmaal
t e r s p r a k e komen meestal door d e commissie b i j nader i n z i e n a ls minder
g e s c h i k t werden beschouwd.
Een a a n t a l problemen komen buitengewoon vaak t e r s p r a k e , U i j noeme
de 3 - c i l i n d e r l i j n m o t o r (5x1 een 2 - c i l i n d e r motor i n e n i g e v a r i a t i e s
(16x1, k r i t i s c h e t o e r e n t a l v a n een as met één puntmassa (4x1.
D e door de examinatoren g e s c h e t s t e f i g u r e n kunnen n o g a l eens gekwali-
f i c e e r d worden als o n v o l l e d i g . Z i j b e v a t t e n vaak s l e c h t s een gedeel te
van de i n f o r m a t i e .
Het komt v o o r d a t de k a n d i d a a t een vraag g e s t e l d wordt t e r w i j l n i e t
vo ldoende gegevens z i j n meegedeeld. Naderhand gee f t de examina tor dan
de ontbrekende i n f o r m a t i e e E i j een a a n t a l k a n d i d a t e n kunnen h i e r d o o r
- j u i s t a a n h e t b e g i n v a n h e t tentamen - w e l l i c h t misvers tanden worden
gewekt .
- 27 -
- 27 -
Ondanks h e t f e i t d a t een bepaald v r a a g s t u k a a n meerdere kandida ten
wordt v o o r g e l e g d , staat i n h e t g e h e e l n i e t vast hoe h e t "gesprekrf
z i c h verder o n t w i k k e l t . Wanneer door een k a n d i d a a t een onvolle,@ge
o f o n j u i s t e bewer ing wordt gedaan wordt h i e r o p door de examinator
meestal o n m i d d e l l i j k ingehaak t met een vraag o f een o p d r a c h t , Op d i t
k l e i n e g e b i e d word t dan v e r d e r g e v r a a g d t o t h e t moment d a t de kandi -
d a a t h e e f t aangetoond d a t h i j e l e m e n t a i r e begr ippen , gedoceerd i n
andere c o l l e g e s o f op de middelbare s c h o o l , op d i t o g e n b l i k n i e t kan
u i t l e g g e n o f t o t h e t moment d a t de examinator h e t vermoeden h e e f t d a t
h i j de basis w e l b e h e e r s t . Het is n o o d z a k e l i j k af t e spreken welke
b e t e k e n i s aan een examen o v e r een d e e l der t e c h n i s c h e mechanica toe -
gekend word t : onderzoeken w i j de k e n n i s o v e r h e t b e t r e f f e n d e dee l of
onderzoeken w i j de k e n n i s o v e r h e t b e t r e f f e n d e d e e l p l u s de h e l e of
g e d e e l t e l i j k e k e n n i s v a n a l l e voorgaande onderde len i n c k s i e f wiskunde
aspec ten? Wanneer d i t l a a t s t e a l t e r n a t i e f wordt gekozen moet d i t a a n
de s t u d e n t e n bekend worden gemaakt en moeten a l l e k a n d i d a t e n op h e t
a s p e c t v a n de V r o e g e r e kennis" worden g e t e s t , Mi jns i n z i e n s zou hier-
door een o n t z a g l i j k e verzwar ing van de mechanica-vakken i n h e t derde-
jaar b e w e r k s t e l l i g d worden,
De examinatoren s t e l l e n erg p r i j s op h e t nauwkeurig formuleren van de
antwoorden, Een onge lukk ige manier van u i tdrukken r o e p t t e l k e n s , i n t e r -
r u p t i e s op. D i t b e t e k e n t d a t de k a n d i d a a t i n z i j n gedachtengang wordt
onderbroken t e r w i j l h i j bovendien h e t r i s i c o l o o p t naar a a n l e i d i n g van
een gebrekkige f o r m u l e r i n g 'Fmoeili jke" v r a g e n t e moeten beantwoorden.
De examinatoren dwingen een k a n d i d a a t soms e e n weg t e v o l g e n , . d i e af-
wijkt v a n degene d i e op c o l l e g e is behandeld, Deze werkwijze is onder
omstandigheden zeker g e o o r l o o f d wanneer men z i c h vo ldoende r e a l i s e e r t
d a t d i t een m o e i l i j k e opgave ise
De gegeven h i n t s of als h i n t bedoe lde t u s s e n v r a g e n waren mi jns i n z i e n s
soms m o e i l i j k t e verwerken. Bovendien l i j k t m i j h e t opvangen van een
h i n t een hoog g e k w a l i f i c e e r d e vaard ighe id ,
De b e o o r d e l i n g
I n de meeste g e v a l l e n v i n d t e r w e i n i g d i s c u s s i e p l a a t s t u s s e n de exa-
minatoren o v e r de b e o o r d e l i n g .
A f en t o e wordt b i j de b e o o r d e l i n g een k a n d i d a a t v e r g e l e k e n met z i j n
voorganger , maar d i t g e b e u r t i n z e e r algemene bewoordingen,
Het is mijn mening d a t de t o t a a l i n d r u k v a n de k a n d i d a a t v a n d o o r s l a g -
gevende b e t e k e n i s is , w a a r b i j r e a c t i e s n e l h e i d , u i tdrukkingsvermogen,
- 28 -
- 28 -
k e n n i s v a n v r o e g e r behandelde s t o f tesamen met k e n n i s en i n t e l l e c t u e l e
v a a r d i g h e d e n op h e t b e t r e f f e n d e vakgebied 'in de beschouwing worden
betrokken:
De r e s u l t a t e n
I n t a b e l X I 1 geven w i j de f r e q u e n t i e v e r d e l i n g , h e t gemiddelde en de
s t a n d a a r d a f w i j k i n g v o o r de c i j f e r s v o o r de onderdelen t r i l l i n g e n I
b a l a n c e r i n g en h e t t o t a a l
Tabe l X I 1 F r e q u e n t i e v e r d e l i n g , enz, mondeling exameri,
Ba lanc e r i n T o t a a l
I n t a b e l X I 1 1 z i j n de c o r r e l a t i e f a c t o r e n vermeld d i e b l i j k e n t e be-
s t a a n t u s s e n de r e s u l t a t e n v o o r t l i n g e n , b a l a n c e r i n g en h e t t o t a a l
z o d s g e s c o o r d t i j d e n 5 he% mondeling exanera-
De d i f f e r e n t i a t i e d i e d e mondelinge t e s t teweeg b r e n g t is n i e t erg
g r o o t z o a l s b l i j k t u i t de g r o o t t e d e r s t a n d a a r d d e v i a t i e s , Voor h e t
t o t a a l is de s p r e i d i n g k l e i n e r dan voor d e a f z o n d e r l i j k e d e l e n z o a l s
ve rwacht kon worden u i t h e t f e i t d a t de examinatoren h e t e i n d c i j f e r
v a s t s t e l d e n u i t de d e e l c i j f e r s . H e t c i j f e r v o o r t r i l l i n g e n b l i j k t
i e t s hoger t e c o r r e l e r e n met h e t e i n d c i j f e r dan h e t c i j f e r voor ba-
l a n c e r i n g ,
De v e r g e l i j k i n g van deze r e s u l t a t e n met d i e v a n de o b j e c t i e v e t e s t
z u l l e n w i j nog nader bespreken,
- 29 -
- 29 -
Tabel XI11
C o r r e l a t i e m a t r i x T r i l l i n g e n , B a l a n c e r i n g , T o t a a l
(mondeling e x m e n )
- 30 -
- 30 -
8, V e r g e l i j k i n g van de r e s u l t a t e n van de M . C . - t e s t en h e t mondeling
onderzoek.
Z o a l s r e e d s bekend werd v o o r i e d e r e k a n d i d a a t l a n g s twee onafhanke-
l i j k e wegen een b e o o r d e l i n g vas tges te ld . De b e o o r d e l i n g van h e t mon-
d e l i n g vond p l a a t s door h e t v a s t s t e l l e n van d r i e c i j f e r s i n een IC-
p u n t s s c h a a l a één v o o r t r i l l i n g e n , één v o o r b a l a n c e r i n g en e e n t o t a a l -
c i j f e r . D i t c i j f e r b e v a t twee - i n wezen o n a f h a n k e l i j k e - i n f o r m a t i e s .
Aan i e d e r e k a n d i d a a t u i t de groep wordt een rangnummer toegekend (een
k a n d i d a a t b e o o r d e e l d met een 8 v o l d o e t b e t e r a a n de normen dan een
k a n d i d a a t d i e een 7 b e h a a l t ) e n bovendien wordt aangegeven of een
kand-idaat slaagt ~ of zakt (een k a n d i d a a t met c i j f e r 5 or" minder z a k t ) .
De s c o r i n g b i j de M.C.-test g e e f t r e c h t s t r e e k s de v o l g o r d e a a n , w a a r i n
de k a n d i d a t e n aan de normen vo ldoen , De b e s l i s s i n g vo ldoende - onvol -
doende v e r e i s t een extra p r o c é d % e v e n a l s de t r a n s f o r m a t i e n a a r een
t i e n - p u n t s s c h a a l ,
I n t a b e l X I V geven w i j nogmaals de door iedere k a n d i d a a t behaalde
s c o r e b i j t r i l l i n g e n , b a l a n c e r i n g en de t o t a l e t e s t ( s c o r e met zeker -
i n g ) . Bovendien bevat deze t a b e l v o o r deze d e l e n de c i j f e r s
v a n h e t mondeling examen, Voor de t o t a l e t e s t is bovendien voor i e d e r e
k a n d i d a a t een c i j f e r vermeld d a t v e r k r e g e n werd v o l g e n s de i n 3 e en 4, g e s c h e t s t e procedure
De twee laatste kolommen i n t a b e l KIV geven dus de c i j f e r s weer d i e
iedere k a n d i d a a t v e r k r i j g t op grond van de o b j e c t i e v e t o e t s en h e t
mondeling examen. Het gemiddelde v a n de o b j e c t i e v e t e s t is 7,O ( s t a n -
d a a r d d e v i a t i e 1.47), d a t v a n h e t mondeling is 6 , 2 ( s t a n d û a r d d e v i a t i e
7-39) "I
W i j w i l l e n op de e e r s t e plaats onderzoeken i n h o e v e r r e de vas tges te lde
r a n g o r d e s i n de g r o e p voor de twee examineermethoden met elkaar c o r r e s -
ponderen, D a a r t o e is de c o r r e l a t i e m a t r i x b e p a a l d v o o r de c i j f e r s van
h e t mondeling onderzoek en de s c o r e s van de EFC.-test met zekerheids-
aanduid ing ( z i e t a b e l XV).
- 31 -
Kandi-
daat n r
1
2
3 4
5 6 7 8 9 10
11
12
13 14
15 16 17 18
19 20
21
22
23 24-
25 26
27 28 29 30
~
- 31 -
T a b e l X I V
V e r g e l i j k i n g mondeling e n m u l t i p l e - c h o i c e examen
T r i l l i n g e n
M.C, met
zeker he i d
13 39 34 32 38 24
23 29 56 14
35 32 44
47 21
42 44
31 34
45 51 26 4-2
22
40 41
42
26 28 41
mond.
4 7 8 3 8 6
5 6 7 4
7 7 8
7 6 8 7 8
7 3 7 7 4 7 7 6 6
5 5 5
~
Balanc e r i n g
M.C. met
z e k e r h e i d
- 3 6
13 5
21
- 0
7 4
18
2
IO
4 10
13 10
8 17
O
16 15 5 12
10
9 12
14 IO
6 O
12
~
mond o
4 7 7 7 7 4
9 5 7 4 6 4 7 6
5 8 6 8 8 4
5 8 7 8 -
7 6
5 6 4
5
T o t a a l
N.C. met
z e k e r h e i d
IO
45 47 37 59 24
30 33 74
45 36 54 60
33 50 61
31 50 57 50 63 36 48 34 54 51
32 28
53
16
c i j f e r
u i t M. c e
4
7 7 6 8
5 6 6 10
4
7 6 8
9 6 8 9 6 8 8 8 9 6
7 6 8 8 6
5 8
mond e
c i j f e r
4 7 8 4
7 5 6 6
7 4
7 6 8
7 5 8 6 8 7 3 6 8 6 8 7 6 6 6 4
5
- 32 -
c B h
Y
IC
'i 9
B
c (r
Q (i
C e
h
3
Q h
h
8 h Q
h h(
e
n ir
z
Y
R
a h
I
h iri
a cn
B
r, ?
\ 2
4' k c1, b
\
- 32 -
T a b e l XV
C o r r e l a t i e m a t r i x v o o r h e t M.C. en h e t mondeling examen
Voor h e t u i r e i n d e l i j k e r e s u l t a a t is de c o r r e l a t i e f a c t o r t u s s e n de
r e s u l t a t e n v a n de M . C e - t e s t en h e t mondeling examen s l e c h t s 0,45. Voor de onder en t r i l l i n g e n en b a l a n c e r i n g is de c o r r e l a t i e nog
s l e c h t e r n l . 0,41 en 0.36, De c o r r e l a t i e f a c t o r v o o r de e i n d - c i j f e r s , vas tges te ld u i t de M.C.- t e s t en h e t mondeling examen v i n d e n w i j u i t e r a a r d een g e t a l i n de
buur t v a n 0 ,45 , Het b l i j k t t e z i j n : 0-47. U i t de g r a f i e k e n I, 11, I11 en I V v o l g t op een a a n s c h o u w e l i j k e m a -
n i e r d a t e r v r i j g r o t e v e r s c h i l l e n b e s t a a n t u s s e n de r e s u l t a t e n v a n
de twee beoordel ingsmethoden.
Ons i n z i e n s is de c o r r e l a t i e t u s s e n de twee examineermethoden t e laag.
&ij z u l l e n moeten v a s t s t e l l e n welke methode i n de t o e k o m t de voorkeur
moet k r i j g e n , H e t op een l i j n s t e l l e n v a n b e i d e metknoden l i j k t n a dik exper iment ongeöor lóö f
K i j merkten reeds op d a t b i j de o b j e c t i e v e t o e t s de b e s l i s s i n g v o l -
doende - onvoldoende een a p a r t e procedure v e r e i s t , Het f e i t da t op
grond v a n h e t mondeling a a n m e r k e l i j k meer kandida ten zouden zakken dan
op grond van d e door ons b i j d e M,C. gehanteerde norm moet ons n i e t v e r -
o n t r u s t e n . D e gekozen norm v o o r de M . C . - t e s t is w e l l i c h t a a n de l a g e
k a n t . I n de groep moet o v e r de keuze der norm nog i n t e n s i e f g e d i s c u s s i -
eerd worden, Het l i j k t ons e c h t e r n i e t o n r e d e l i j k v o o r deze g r o e p s t u -
denten , d i e z i c h tweemaal aan een onderzoek moest onderwerpen, een
s o e p e l e norm t e hanteren, De gekozen norm b l i j k t a c h t e r a f bovendien h e t
n i e t t e o n d e r s c h a t t e n v o o r d e e l t e b e z i t t e n d a t géén k a n d i d a a t werd af-
- 33 -
- 3 3 -
gewezen d i e op grond van z i j n mondeling tentamen geslaagd zou z i j n .
aanneer w i j , g e l e i d door h e t mondeling, 27% der k a n d i d a t e n zouden
hebben afgewezen, betekende d i t d a t b e h a l v e de kandida ten I , 6, 10 en
29 bovendien de k a n d i d a t e n 7 , 15, 18 e n 28 waren gezakt, Deze laatste
v i e r s t u d e n t e n behaa lden als c i j f e r op h e t mondeling: 6 , 5, 8 ( ! ) en 6,
Omdat b i j de o p z e t v a n ons experiment r e k e n i n g gehouden werd met een
d i s c r e p a n t i e t u s s e n o b j e c t i e v e t o e t s en mondeling examen, werd een
pog ing gedaan vast t e s t e l l e n hoe i n de g r o e p t e c h n i s c h e mechanica h e t
waarde -oordee l o v e r de M.C.-methode l u i d t ,
De i n s t r u c t e u r en de wet- medewerker d i e samen met de docent o v e r de
t e s t d i s c u s s i e e r d e n s tonden z e e r p o s i t i e f t e g e n o v e r de N.C, - tes t ,
De w e t . medewerker w a s bekend met deze vraagmethode omdat h i j i n ok-
t o b e r 7967 z e l f een d e r t i g t a l items c o n s t r u e e r d e i n h e t kader van een
b e g e l e i d i n g s e x p e r i m e n t i n de a f d e l i n g Vlerktuigbouwkunde,
De twee examinatoren d i e h e t mondeling examen afnamen s tonden open v o o r
h e t exper iment , Z i j waren n i e t g e d e t a i l l e e r d op de hoog te van de p r e c i e s e
gang van zaken b i j een M,C,-test, V66r de examens werd met hon s l e c h t s
i n zeer algemene bewoordin o v e r d-e t e s t v o r u i gesproken,
Nadat z i j de onderhav ige t e s t hadden gemaakt werd g e t r a c h t om van hen
v o o r i e d e r i tem e n i g e i n a t i e t e v e r k r i j g e n , Bovendien werd hen ora
e n i g e algemene u i t s p r a k e n gevraagd ,
Het w a s n i e t t e r e a l i s e r e n g e d e t a i l l e e r d de o p i n i e t e p e i l e n van de
andere medewerkers u i t de groep. B i t z a l na h e t t o t s t a i ld komen van d i t
rapport geprobeerd worden o
~- ~~
%ij z u i l e n de r e a c t i e s van de twee examinatoren t r a c h t e n weer t e geven,
Een werd gevraagd de t e s t t e maken en h i e r wa.xima.al 3 uur aan t e be-
s t e d e n (de s t u d e n t e n hadden de b e s c h i k k i n g o v e r 3 , 5 uur) .
I n t a b e l X V I z i j n e n i g e gegevens v a n de door hun b e r e i k t e r e s u l t a t e n
vermeld.
- 31. -
- 3 4 -
T a b e l X V I S c o r i n g examinatoren
V e r g e l i j k e n w i j de r e s u l t a t e n u i t t a b e l X V I met d i e u i t t a b e l 11 dan
c o n s t a t e r e n w i j d a t examinator I v o o r h e t t o t a a l met z e k e r h e i d 1 8 punten
meer s c o o r t dan d e b e s t e k a n d i d a a t , t e r w i j l examinator I1 4 k a n d i d a t e n
v ó ó r moet l a t e n gaan, Opmerkel i jk is d a t b i j h e t onderdee l b a l a n c e r i n g
be ide examinatoren minder punten s c o r e n d a t de b e s t e stu-dent , H i e r u i t
b l i j k t d a t ook d e examinatoren t i j d n o o d hadden. Examinator I merkte
na a f l o o p op d a t h i j 5 items, d i e h i j i n e e r s t e i n s t a n t i e had overge -
s l a g e n zonder meer g e g o k t h e e f t , H i j toonde v e r d e r a a n d a t - eveneens
wegens dr ingend t i j d g e b r e k - b i j de l a a t s t e i t e m s minder g e b r u i k werd
gemaakt v a n de zekerhe idsaanduid ing* B e i d e examinatoren vonden h e t
maken v a n de t e s t u i t e r s t vermoeiend, V b o r a l h e t t e l k e n s omschakelen
b i j de overgang naar een volgend- i t e m k o s t t e examinator 1 v e e l e n e r g i e .
W i j moeten c o n s t a t e r e n d a t h e t a a n t a l i t e r i s t e g r o o t w a s , zowe l v o o r de
t e r b e s c h i k k i n g g e s t e l d e t i j d a l s i n a b s o l u t e z i n , Een r e ë l e r a a n t a l
i tems is 40. D e goede s t u d e n t e n z i j n dan binnen 2 uur klaar,
M a h e t i n v u l l e n v a n de t e s t werd de examinatoren gevraagd de enque te t e
beantwoorden d ie w i j i n hoofds tuk 9 z u l l e n bespreken, Op d i t moment is
i n t e r e s s a n t t e vermelden d a t de t e s t v o l g e n s hun mening een goed even-
w i c h t b e z i t t u s s e n t h e o r i e en t o e p a s s i n g ,
D e s c h a t t i n g v a n de m o e i l i j k h e i d van de items was de vo lgende o p d r a c h t
aan de e x m i n a t o r e n . Deze r e s u l t a t e n z i j n r e e d s v e r w e r k t i n h o o f d s t u k 6
- 35 -
( z i e t a b e l X en X I ) . Examinator I benader t de r e s u l t a t e n van de groep
h e t b e s t e , Examinator I1 onderscha t de m o e i l i j k h e i d a a n z i e n l i j k . Ook
t u s s e n de twee examinatoren b e s t a a t nog a l e e n s g r o o t v e r s c h i l o v e r de
m o e i l i j k h e i d ( c o r r e l a t i e f a c t o r 03% W i j w i l d e n onderzoeken o f de t endens v a n de items door de examinatoren
g e a c c e p t e e r d kon worden, W i j "vertaalden! ' d i t door hen de vraag t e
s t e l l e n o f een i t e m geschikt w a s om i n de vorm v a n e e n "open" vraag
t i j d e n s een mondeling examen t e s t e l l e n , Aan i eder i tem moesten z i j
v o o r w a t "de gesch ik the id v o o r een mondeling onderzoek" b e t r e l t een
waarder ing i n een 7 -puntsschaa l toekennen ( l i z e e r s l e c h t b r u i k b a a r ;
7: z e e r goed b r u i k b a a r ) , Tabel XVII g e e f t de r e s u l t a t e n ,
Tabe l X V I I
G e s c h i k t h e i d v a n de items v o o r een mondeling onderzoek
U i t deze t a b e l c o n c l u d e r e n w i j d a t he t m e e r e i d e e l d-er v r a g e n "bruikbaar"
-U "zeer goed bru ikbaar" ( 7 ) is. Examinator 11 v i n d t i n h e t a l g e -
meen de v r a g e n o v e r b a l a n c e r i n g b r u i k b a a r d e r dan d i e o v e r t r i l l i n g e n ,
Door examinator I wordt geen v e r s c h i l g e c o n s t a t e e r d .
Hei is i n t e r e s s a n t na t e gaan hoe de c o r r e l a t i e is tassen de u.itsqsa.ken
v a n de twee examinatoren, Voor de d e l e n t r i l l i n g e n , b a l a n c e r i n g en de
t o t a l e t e s t z i j n de c o r r e l a t i e f a c t o r e n r e s p e c t i e v e l i j k : -0.15, 0,38 en 0 ,02 , B e s t a a t er v o o r h e t o n d e r d e e l b a l a n c e r i n g nog e n i g verband
t u s s e n de o p i n i e der examinatoren aangaande de g e s c h i k t h e i d van een
item, voor de t o t a l e t e s t is er i n h e t g e h e e l geen verband , t e r w i j l
b i j het o n d e r d e e l t r i l l i n g e n i n een a a n t a l g e v a l l e n de ene examinator
~~
een vraag g e s c h i k t a c h t , t e r w i j l de andere hem o n g e s c h i k t v i n d t , Een
m o g e l i j k e v e r k l a r i n g h i e r v o o r is d a t de "tendens" v a n s e n i t em door de
twee examinatoren v e r s c h i l l e n d wordt g e i n t e r p r e t e e r d , Een andere mo-
g e l i j k h e i d is d a t h e t team sat d i t a s p e c t b e t r e f t z e e r inhomogeen is.
Een v e r k l a r i n g h i e r v o o r i s w e l l i c h t t e v inden in -he t f e i t d a t de een
- 35 -
- 36 -
z e e r v e e l , de ander z e e r w e i n i g examen-ervaring b e z i t ,
Ook wanneer vas tges te ld is d a t de t endens van de items i n h e t a l g e n e e n
g e a c c e p t e e r d wordt v o o r een mondeling examen, is h e t n o o d z a k e l i j k n a
t e gaan i n h o e v e r r e een item door de aangeboden a l t e r n a t i e v e n en de fog- muler ing g e s c h i k t w a s h e t z e l f d e t e onderzoeken a ls op een mondeling
examen, N i j vroegen de examinatoren de k w a l i t e i t van de i tems t e be-
o o r d e l e n I n een 7 -puntsschaal ( I : zeer s l e c h t ; 7: z e e r goed) en v e r -
meldden e x p l i c i e t d a t g e l e t moest worden op de aangeboden a l t e r n a -
t i e v e n , de fo rmuler ing en de r e l e v a n t i e met b e t r e k k i n g t o t h e t vak
t r i l l i n g e n en b a l a n c e r i n g . I n t a b e l X V I I I z i j n de r e s u l t a t e n vermeld,
Tabe l X V I I I
K w a l i t e i t van de items v o l g e n s twee examinatoren
Door examinator I wordt de k w a l i t e i t gemiddeld b e t e r bevonden dan door
examina tor 11, Het onderdee l b a l a n c e r i n g l i j k t i e t s minder v a n kwali-
t e i t dan h e t g e d e e l t e t r i l l i n g e n . I n h e t algemeen is de b e o o r d e l i n g
z e e r p o s i t i e f ,
V e r g e l i j k e n w i j d e o p i n i e s van de twee examinatoren i n de vorm v a n de
c o r r e l a t i e f a c t o r dan c o n s t a t e r e n w i j v o o r t r i l l i n g e n , b a l a n c e r i n g e n en
h e t t o t a a l r e s p e c t i e v e l i j k -0 ,09, 0,10, - 0 ,02 , D i t b e t e k e n t d a t h e t
v a n de examinatoren b i j n a vo lmaakt o n a f h a n k e l i j k iso
Als s t a t i s t i s c h gegeven voor de k w a l i t e i t van een i t e m zouden de item-
t o t a a l c o r r e l a t i e - f a c t o r e n (met en zonder zekerhe idsaanduid ing) be-
schouwd. kunnen worden. H e t b l i j k t d a t v o o r t r i l l i n g e n e n de t o t a l e
t e s t een b i j n a p e r f e c t e o n a f h a n k e l i j k h e i d bes taa t t u s s e n deze fac -
t o r e n en de b e o o r d e l i n g d e r e x m i n a t o r e n o B i j b a l a n c e r i n g bes taa t er -een n e g a t i e v e c o r r e l a t i e ( r e s p e c t i e v e l i j k -0,21, -0.26, -0922, +0,10),
De g r o o t h e i d "phi-goed-zeker" en h e t p e r c e n t a g e met z e k e r h e i d gegeven
antwoorden c o r r e l e e r t i e t s hoger met h e t gegeven o o r d e e l o v e r de k w a -
- 37 '
- 37 -
l i t e i t der i t ems . Gro te v e r s c h i l l e n worden g e c o n s t a t e e r d t u s s e n de
twee examinatoren.
W i j menen d a t u i t h e t voorgaande b l i j k t d a t de v o o r s p e l b a a r h e i d v a n
de k w a l i t e i t van een item z e e r g e r i n g is, tenminste door mensen d i e
nog geen e r v a r i n g hebben met M.C. t e s t s . D i t f e i t z a l z e e r zeker een
zeer n a d e l i g e i n v l o e d u i t o e f e n e n op h e t v a s t s t e l l e n van de kerni tems.
Beha lve de t o t nu t o e vermelde i n f o r m a t i e werd a a n de examinatoren een
a a n t a l v r a g e n g e s t e l d . Hen werd gevraagd om een zo gepronceerd moge-
l i j k antwoord t e geven. O p de vraag: " B e s t r i j k t de t e s t op voldoende
w i j z e n de s t o f d i e i n h e t c o l l e g e behandeld is?" werd zonder meer ifjar'
geantwoord. D e examinatoren waren v e r d e r van mening d a t geen a s p e c t e n
o f onderde len v a n 'FTr i l l ingen en Ba lancer ing" t e v e e l of t e w e i n i g t e r
s p r a k e komen.
Examinator I1 maakte de aantekening d a t o e f e n i n g i n h e t o p z e t t e n v a n
b e w e g i n g s v e r g e l i j k i n g e n w a t meer t e r s p r a k e kan komen.
De verhouding t u s s e n h e t a a n t a l v r a g e n o v e r t r i l l i n g e n en o v e r ba lan-
c e r i n g werd goed gevonden. Volgens de examinatoren kan op grond van de
s c o r e s der k a n d i d a t e n i n h e t algemeen g e s t e l d worden d a t een k a n d i d a a t
d i e een hoger punten t o t a a l h a a l t dan een ander beter v o l d o e t a a n h e t
he le complex v a n e i s e n voor d i t vak ( v o l g e n s hun e i g e n normen!) dan d i e
ander.
Aan de examinatoren w e r d gevraagd aan t e geven h o e v e e l v r a g e n een kan-
d i d a a t tenminste goed moet beantwoorden om t e s l a g e n , h o e v e e l punten
h i j moet beha len (met z e k e r h e i d ) , w a t de s l e c h t s t e en de b e s t e kandi -
daat s c o o r t e n w a t de gemiddelde s c o r i n g is. I n t a b e l XIX z i j n deze
s c h a t t i n g e n e n de gegevens van de groep vermeld. . .
Tabe l X I X
S c h a t t i n g e n v a n de s c o r e s en de w e r k e l i j k e s c o r i n g
Exam. I1
- 3 8 -
Wanneer w i j de s c h a t t i n g e n u i t t a b e l X I X v e r g e l i j k e n met de d o o r de
examinatoren behaalde p u n t e n t o t a a l ( z i e t a b e l X V I > dan moeten w i j con-
s t a t e r e n da t z i j geen a l t e goede indruk hadden van hun e i g e n p r e s t a t i e ,
Het v a l t n i e t t e verwonderen d a t de s t u d e n t e n h i e r evenzeer a a n t e n
p r o o i v a l l e n en d a t z i j d i t a l s een n a d e e l v a n deze tentamenvorm z i e n .
Víij menen d a t de i n f o r m a t i e d i e ons door de examinatoren v e r s t r e k t is
een p a s i t i e v e i n t e r p r e t a t i e v a n hun s tandpunt t e n o p z i c h t e v a n __. deze
M . C . - t e s t t o e l a a t .
@ij menen bovendien aangetoond t e hebben hoe m o e i l i j k h e t is u i t s p r a k e n
t e doen o v e r m o e i l i j k h e i d s g r a a d en k w a l i t e i t v a n een item,
Het f e i t d a t de o p i n i e s van de twee examinatoren n o g a l eens v e e l ver-
s c h i l l e n d o e t b i j ons de vraag opkomen o f deze inhomogeni te i t n i e t v a n
i n v l o e d is b i j een mondeling examen.
Wanneer w i j nu de o o r z a a k t r a c h t e n op t e sporen v a n de v r i j lage c o r r e -
l a t i e t u s s e n de r e s u l t a t e n van de M.C.-test en h e t mondeling examen, dan
moeten w i j c o n s t a t e r e n d a t b i j h e t mondeling een a a n t a l f a c t o r e n een r o l
s p e l e n , d i e b i j de t e s t n i e t t e r s p r a k e kwamen, %ij noemen: de w i jze van
u i tdrukken , h e t opvangen van h i n t s , de; d i s c u s s i e t e c h n i e k en v o o r a l de
v o o r k e n n i s van de k a n d i d a a t , G e c o n s t a t e e r d e h i a t e n u i t de v o o r o p l e i d i n g
op h e t g e b i e d van de wiskunde en de mechanica wegen v o o r de examencom-
a i s s i e b i j z o n d e r zwaar, Z e t is n i e t o n r e d e l i j k de e i s t e s t e l l e n d a t de
voorgaande vakken b e h e e r s t moeten worden; w i j menen echter d a t d i k dan
e x p l i c i e t moet worden meeged-eeld, Een i m e n s e v e r z w a r i n g v a n h e t vak z a l
helt g e v o l g z i j n ( z i e ook hoofds tuk 7 ) + Bovendl n kan n i e t ontkend worden
t de norm b i j h e t mondeling examen n i e t erg e x p l i c i e t vast l i g t , De
opmerking van &&n van de examinatoren d a t h i j t e n g e v o l g e v a n h e t ex-
periment s t e e d s meer moei te had om u i t e i n d e l i j k de b e o o r d e l i n g i n d e
vorm v a n een c i j f e r vas t - t e s t e l l e n wijst i n d e z e l f d e r i c h t i n g ,
@ij w i l l e n nog e n i g e opmerkingen maken o v e r twee kandida ten . K a n d i d a a t
20 combineer t h e t c i j f e r 3 voor h e t n o n d e l i n g met een hoge s c o r e v o o r
de M . C . - t e s t ( 5 7 punten) , U i t t a b e l I b l i j k t d a t deze k a n d i d a a t s l e c h t s
z e e r w e i n i g items ( n l . 29) met z e k e r h e i d beantwoord h e e f t . De moge l i jk -
h e i d bes taa t d a t deze k a n d i d a a t op h e t mondeling er$ v e e l h inder h e e f t
ondervonden v a n z i j n n a t u u r l i j k e onzekerheid . Een andere m o g e l i j k h e i d
i s d a t z i j n onzekerhe id h e t g e v o l g was v a n h e t onvoldoende beheersen
van de s t o f . I n d a t geva l h e e f t h i j erg v e e l g e l u k b i j de IbI.C.-test
- 3 9 -
- 3 9 -
gehad o
Kandidaa t 1 8 b e h a a l t voor het mondeling exaaen 8, t e r w i j l h i j s l e c h t s
30 punten s c o o r t . Deze k a n d i d a a t is e r g traag, S l e c h t s 40 van de 6 5
items werden door hem beantwoord!
T i jdnood h e e f t deze k a n d i d a a t d a n i g p a r t e n g e s p e e l d , De commissie
mondeling l e t b i j h e t mondeling n a u w e l i j k s op h e t tempo wanneer de
g e l e v e r d e p e s t a t i e goed is.
- 43 P
- 41 -
9. De r e a c t i e s van de s t u d e n t e n op de M . C e - t e s t
O n m i d d e l l i j k na de t e s t werd de k a n d i d a t e n v e r z o c h t een k o r t e enquete
t e beantwoorden d i e anoniem werd i n g e l e v e r d . I n B i j l a g e I is deze
enquete vermeld. Bovendien is aangegeven de p r o p o r t i e v a n de kandi -
d a t e n d i e een b e p a a l d e o p i n i e bezaten. De fo rmuler ing d e r v r a g e n w a s
n i e t a l t i j d even g e l u k k i g , k i l i j menen d a t daardoor e c h t e r w e i n i g ver-
w a r r i n g gezaaid z a l z i j n . Door 29 v a n de 30 k a n d i d a t e n werd h e t en-
que te - fo rmul ie r i n g e l e v e r d .
Het is d u i d e l i j k d a t de t e r b e s c h i k k i n g ges te lde t i j d t e k o r t w a s . D i t
w a s ook de mening v a n de examinatoren.
Een t e s t v a n d i t t y p e mag 2 uur duren v o l g e n s h e t merendeel der s t u -
denten en v o l g e n s examinator I , -Examina tor I1 p r e f e r e e r t een duur v a n
3 UUPe
De t e s t was ook v o l g e n s de s u b j e c t i e v e mening van de s t u d e n t e n e n ex-
r I m o e i l i j k . Examinator I1 v i n d t de m o e i l i j k h e i d s g r a a d r e d e l i j k .
S tudenten e n examinatoren vonden d a t de t e s t een goed o v e r w i c h t t u s s e n
t h e o r i e en t o e p a s s i n g t o t s t a n d b r a c h t .
Opmerkel i jk is h e t f e i t d a t de s t u d e n t e n en examinator I1 de t e s t
B inder e e r l i j k v inden dan een klassiek s c h r i f t e l i j k tentamen, E x a n i n a t o r
1 - v i n d t de t e s t ee r l i j ker , W i j komen h i e r nog op t e r u g ,
De M.C. v o r a word t d u i d e l i j k v e r v e l e n d e r gevonden dan v r o e g e r e mechanica
tentamens* Het c o l l e g e w a s r e d e l i j k goed, de i n s t r u c t i e matig afgestemd
op h e t M,C, tenkamen.
De f o r m u l e r i n g der v r a g e n w a s matig t o t goed, D e b e i d e examinatoren oor-
dee lden de fo rmuler ing goed,
De meeste s t u d e n t e n en be ide examinatoren v o e l d e n z i c h t i j d e n s de t e s t
nerveuzer dan b i j vroegere tentamens.
Nadat de u i t s l a g v a n h e t tentamen i n de vorm v a n een c i j f e r a a n de
s tudenten w a s meegedeeld, w e r d hen gevraagd nog eens o v e r h e t e x p e r i n e n t
t e d i s c u s s i ë r e n . B i j deze b i jeenkomst verschenen 19 s tudenten , Hen werd
de gang v a n zaken meegedeeld. De g r o e p als g e h e e l w a s z e e r g e i n t e r e s s e k d .
Opmerkel i jk w a s d a t z i j nu de M . C , - t e s t e e r l i j k e r vonden dan een ander
examen ( ! ) + Hun u i t s p r a a k h i e r o v e r hangt dus k e n n e l i j k af van h e t c i j f e r
d a t z i j behaa lden o f dachten t e behalen. E r n s t i g e misvers tanden b l e k e n
nog t e b e s t a a n o v e r de w i j z e waarop u i t de s c o r i n g een c i j f e r werd vast-
g e s t e l d . Een u i t g e s p r o k e n gedachte w a s : i n t o t a a l z i j n Î 3 O punten t e
behalen, ( 1 ) 1 3 punten u i t de t e s t cor responderen met 1 punt .
- 42 -
- 42 -
W i j hopen d a t w i j de aanwezige s t u d e n t e n hebben kunnen o v e r t u i g e n d a t
s c o r e en c i j f e r n i e t o n v e r b r e k e l i j k gekoppeld z i j n , De meded-eling d a t
de twee examinatoren gemiddeld 80 van de 'I30 punten s c o o r d e n h e e f t hen
w e l l i c h t g e r u s t g e s t e l d o
I t ems waarvoor rekenwerk n o o d z a k e l i j k w a s worden - v o l g e n s één der
s t u d e n t e n - a l l e e n a l raet z e k e r h e i d beantwoord omdat z i j e r zo v e e l
t i j d aan hebben moeten bes teden , D e opmerking werd b e l u i s t e r d om de
t igemakke l i jks te?? en de *'moeilijke'? itemris i n groepen t e p l a a t s e n en om
een i n d e l i n g a a n de hand v a n d e hoofdstukken u i t he t c o l l e g e t e ge-
bruiken. B i j een a a n t a l items gaven de a l t e r n a t i e v e n a a n l e i d i n g t o t
Fr lees -b l indheidf '
W i j zouden w i l l e n p l e i t e n v o o r een a a n de s t u d e n t e n t e geven p a m f l e t
w a a r i n door de groep o n d e r w i j s r e s e a r c h - u i d e l i j k h e t v e r s c h i l t u s s e n
een M , C . - t e s t en een k l a s s i e k e b e o o r d e l i n g u i t e e n z e t ,
- 43 -
- 43 -
I O . C o n c l u s i e s en v o o r s t e l l e n
W i j z u l l e n geen p o g i n g doen a l l e c o n c l u s i e s u i t h e t voorgaande t e her-
h a l e n e
De voornaamste c o n c l u s i e aangaande de M , C . - t e s t is d a t h e t m o g e l i j k is
binnen r e d e l i j k e t i j d een vo ldoende betrouwbare t e s t t e c o n s t r u e r e n ,
De t e r u g k o p p e l i n g n a a r h e t o n d e r w i j s b i j h e t c o n s t r u e r e n v a n de t e s t
en h e t a n a l y s e r e n v a n de r e s u l t a t e n is v e e l g r o t e r en i n t e n s i e v e r dan
w i j hadden durven hopen,
D e v o o r s p e l b a a r h e i d v a n m o e i l i j k h e i d en k w a l i t e i t der v ragen w a s g e r i n g ,
D i t is w e l l i c h t de d i r e c t e o o r z a a k v a n h e t mislukken v a n de kun-items
methode
ggen v a n de g r e n s vo ldoende - onvoldoende bezorgde ons v r i j
g r o t e moe i l i j kheden ,
De s e r v i c e van de g r o e p o n d e r w i j s r e s e a r c h w a s uitnemend. Ons i n z i e n s
zou door deze g r o e p een pamf le t samengesteld- moeten worden om de
s tudenten b e t e r bekend t e maken met de werkwijze v a n een o b j e c t i e v e
t e s t , De t e s t w a s t e l a n g . Een a a n t a l v a n 40 items v a n het gepresen-
t e e r d e k a l i b e r v o o r 3 uur l i j k t r e d e l i j k . De geschatte i n t e r n e con-
s i s t e n t i e is dan: 0-52.
Het verband t u s s e n de b e o o r d e l i n g van mondeling en N,C.-test w a s
g e r i n g , Ons i n z i e n s z o g e r i n g d a t b e s l i s t moet worden welke methode
de voorkeur v e r d i e n t . Onze mening is d a t de M.C.-rnethode v o o r de
v66r-kandldaatsvakken t e p r e f e r e r e n is. W i j s t e l l e n v o o r d a t deze
methode i n stadia v o o r d e t e c h n i s c h e mechanica-vakken wordt ingevoerd .
Een werkwi jze d i e r e a l i s e e r b a a r is , zou kunnen z i j n :
j u n i 1968 : v o o r t g e z e t t e s t e r k t e l e e r
j a n , 1969 : t e c h n i s c h e mechanica I
j u n i 1969 : t e c h n i s c h e mechanica I1 j an , 1970 : t e c h n i s c h e mechanica 111
D i t b e t e k e n t d a t de s t u d e n t e n d i e i n september 1968 hun s t u d i e aan-
vangen vanaf h e t b e g i n i n de t e c h n i s c h e mechanica beoordee ld word-en
v i a een o b j e c t i e v e t o e t s -
%ij w i l l e n e i n d i g e n met e n i g e s u g g e s t i e s aan de g r o e p o n d e r w i j s r e s e a r c h ,
Het zou n u t t i g z i j n w a t meer i n f o r m a t i e t e v e r k r i j g e n o v e r de p r e s t a -
t i e s van de kandida ten . N a a s t de t o t a a l s c o r e met en zonder zekerheid
zouden w i j v o o r i e d e r e k a n d i d a a t de b e s c h i k k i n g w i l l e n hebben o v e r h e t
a a n t a l i tems d a t h i j met z e k e r h e i d beantwoord h e e f t . D e f r e q u e n t i e -
- 44 -
- 44 -
verdeling voor deze aantallen, het gemiddelde en de standaarddeviatie, zijn goed bruikbare gegevens, Zo mogelijk zouden wij voor iedere kandidaat zelfs willen beschikken
over het aantal items dat hij zeker-goed, zeker-fout, onzeker-goed en onzeker-fout beantwoord heeft en hoeveel items door hem zijn overge-
slagen, Het meedelen van deze informatie aan de examinandi-kan wellicht van groot nut zijn bij het accepteren van de beoordeling en het optima- liseren van de examen-strategie, In de tabellen voor de aantrekkelijkheid der alternatieven zou het juiste alternatief van een kenmerk voorzien moeten worden-(bijvoorbeeld
een "1.
Literatuur: Onderzoek van Onderwijs 1 en 2 (1964-1965)
o.a, Neuwese ( 1 page 39 ecvo Roskam (2 page 64 e.v,>
Onderzoek van wetenschappelijk onderwijs (1966) ooao Hoi'stee en Wijnen (pag, 171 e,v.)
Boerlijst (pag, 150 e,v.> van Naesssen !page 179 e,v.>
6 februari 1968
D r e k . J-D. Janssen.
B i j l a g e I
V r a g e n l i j s t b i j h e t tentamen
" T r i l l i n g e n en Ba lancer ing"
9 j a n u a r i 1968
D i t f o r m u l i e r bevat 10 v r a g e n om e n i g e i n f o r m a t i e t e v e r k r i j g e n o v e r
Uw r e a c t i e s op de t e s t ,
W i j v e rzoeken U de k l e i n e l e t t e r t e omcirke len d i e h o o r t b i j de mening
d i e h e t d i c h t s t a j n s l u i t b i j de Uwe,
Het s p r e e k t v a n z e l f d a t deze v r a g e n l i j s t anoniemn i n g e l e v e r d kan worden.
1 , Eat is Uw mening o v e r de t e r b e s c h i k k i n g
ges te lde t i j d v a n 3,5 uur voor deze t e s t ?
a, v e e l t e v e e l 0,07
b, t e v e e l 0 0 0 3
c e j u i s t goed Oe07 d. t e w e i n i g 0.38 e, v e e l t e w e i n i g 0045
2, Hoelang nag een t es t v a n d i t t y p e v o l g e n s
U duren?
a. minder dan I uur
b e 1 uur
c . 2 uur
d. 3 uur
e, meer dan 3 uur
3 . O p welke manier zoudt U de m o e i l i j k h e i d s -
graad v a n deze t e s t t yperen?
a. v e e l t e gemakkelijk
b e gemakkeli j k
c . wel goed
d. m o e i l i j k
e . v e e l t e m o e i l i j k
0,oo 0-14 oe55 0-21 0 , l O
0,oo 0,OO 0.28 0.62
0 , I O
- 2 -