assessments in de hu - husite.nl · criteriumgericht interview oefening in drietal a, b en c a =...
TRANSCRIPT
Assessments in de HU
Hannah Wielenga
Onderdeel Judith Kortas
28 05 2018
10.15-12.30u
Programma (tot 12.30u)
Een criteriumgericht interview (oefenen)
Informatie - met focus op: Competentiegerichte assessments
Videobeelden assessmentsessie IA
Verschillende interpretaties van het begrip
assessment Formulier ‘Kenmerken van assessments’
Checklist ‘Waaraan denken bij het ontwerpen van assessments?’
Advisering assessmentontwikkeling en training
assessoren 22018 05 28 Masterclass Assessments HU - Judith Kortas
Criteriumgericht interview
(CGI)
wie heeft zelf wel eens een CGI ondergaan?
wie heeft al ervaring met het afnemen van
CGI’s?
wie is bekend met interviewtechnieken?
vorm drietallen – zo gemengd mogelijk
32018 05 28 Masterclass Assessments HU - Judith Kortas
Criteriumgericht Interview
Oefening in drietal A, B en C
A = kandidaat
B en C zijn assessor
A kiest een criterium (z.o.z.) waarop hij/zij
wordt ondervraagd in een CGI van 10 min.
door B en C
A noteert het gekozen criterium voor B en C
42018 05 28 Masterclass Assessments HU - Judith Kortas
A kiest een criterium uit:
Je wordt gevraagd om in een CGI aannemelijk
te maken dat je als competente HU-docent:
aansluit bij de persoonlijke interesse van studenten, of
rekening houdt met verschillen tussen je studenten, of
controleert of je studenten de leerdoelen hebben
behaald, of
alle studenten bij je les betrekt, of
studenten leert samenwerken, of
studenten voldoende structuur biedt, of
studenten constructieve feedback geeft, of
… (een eigen criterium)
52018 05 28 Masterclass Assessments HU - Judith Kortas
werkwijze (3 + 10 min.)
3 min.
A kiest een criterium – noteert het voor B/C
B en C overleggen kort over: te stellen vragen bij het criterium
te hanteren werkwijze:
stellen we allebei vragen, of neemt een van de twee het
voortouw, of observeert een van de twee
gebruik van interviewmethodiek (STARR-methodiek, LSD,
etc)
wie bewaakt de tijd (10 min).
10 min CGI62018 05 28 Masterclass Assessments HU - Judith Kortas
Terugblik op CGI
4 min. eerst in je drietal
wat ging goed (TOPS)
wat kan beter (TIPS)
en verder… (?/!)
plenair
Wat leert je deze korte oefening?
welke vragen roept dit op t.a.v. assessments?
72018 05 28 Masterclass Assessments HU - Judith Kortas
Programma (tot 12.30u)
Welkom, programma
Een criteriumgericht interview (oefenen)
Informatie - met focus op:
Competentiegerichte assessments
Videobeelden assessmentsessie IA
Verschillende interpretaties van het begrip
assessment
Formulier ‘Kenmerken van assessments’
Checklist ‘Waaraan denken bij het ontwerpen van
assessments?’
Advisering assessmentontwikkeling en training
assessoren 82018 05 28 Masterclass Assessments HU - Judith Kortas
Toetsing en assessment
Term ‘assessment’ = toetsing en/of vaststellen
In de Engelstalige literatuur – van oorsprong:
synoniem voor elke vorm van toetsing en
beoordeling
meten van prestatie
standaardtoetsen o.a. voor vergelijken
van leerlingprestaties
2018 05 28 Masterclass Assessments HU - Judith Kortas 9
toetsing = assessment?
Gericht op Van
toetsing METEN
en beoordelen
competentiegericht
assessment
WAARDEREN
en beoordelen
10
Andere focus:
2018 05 28 Masterclass Assessments HU - Judith Kortas
toetsing = assessment?
Gericht op Van
toetsing METEN
en beoordelen
Leeruitkomsten
(kennis, houding,
vaardigheden)
competentiegericht
assessment
WAARDEREN 1)
en beoordelen
Professioneel
handelen in
(beroeps-)context
11
Andere focus:
1) Sadler, D.R. (2013). Making competent judgments of competence. In: S.
Blömeke, e.a. (red.) Modeling and measuring competencies in Higher
Education: Tasks and Challenges. Rotterdam: Sense Publishers (p. 13-27)2018 05 28 Masterclass Assessments HU - Judith Kortas
toetsing = assessment?
Gericht op Van
toetsing METEN
en beoordelen
ANALYTISCH
Leeruitkomsten
(kennis, houding,
vaardigheden)
competentiegericht
assessment
WAARDEREN 1)
en beoordelen
IN SAMENHANG
Professioneel
handelen in
(beroeps-)context
12
Andere focus:
1) Sadler, D.R. (2013). Making competent judgments of competence. In: S.
Blömeke, e.a. (red.) Modeling and measuring competencies in Higher
Education: Tasks and Challenges. Rotterdam: Sense Publishers (p. 13-27)2018 05 28 Masterclass Assessments HU - Judith Kortas
Doel van competentietoetsing
‘Bij het toetsen van competenties gaat het
om het tot stand brengen van een oordeel
over adequaat professioneel handelen in
uiteenlopende (beroeps-)contexten’
Van Berkel, A. (2012). Kritische reflectie op competentietoetsen in het hbo.
In: Onderwijsinnovatie, juni, p. 17-26
132018 05 28 Masterclass Assessments HU - Judith Kortas
Competentietoetsing geeft zicht op de
mate waarin een student:
kennis, vaardigheden en houdingen kan integreren in
adequaat professioneel handelen in een beroepsrelevante
situatie;
dit professioneel gedrag flexibel kan aanpassen in
verschillende beroepssituaties, ofwel bewuste beheersing van
de competenties vertoont;
zicht heeft op de ‘mate van ontwikkeling van een competentie
en in staat is deze doelgericht verder te ontwikkelen. M.a.w.: of
er sprake is van duurzame competentiebeheersing.
Gulikers, J. & Van Benthum, N. (2014). Toetsen van competenties. In: H. van Berkel, A. Bax,
& D. Joosten-ten Brinke, (red.). Toetsen in het hoger onderwijs. Houten: Bohn Stafleu van
Loghum (p. 218-219)142018 05 28 Masterclass Assessments HU - Judith Kortas
Meten of waarderen (1)
Het scoren in een assessment is niet zozeer
een vorm van meten maar eerder een proces
van redeneren, waarderen en beslissen.
De assessoren (experts) zijn
informatieverwerkers: interpreteren, zoeken
relevante informatie, integreren in beoordeling
en beslissen
Govaerts, M.J.B. (2011). Climbing the pyramid. Towards understanding
performance assessments. Maastricht: Universiteit (proefschrift) (p. 95 e.v.)152018 05 28 Masterclass Assessments HU - Judith Kortas
Meten of waarderen (2)
Competenties niet zoveel mogelijk
uiteenrafelen maar:
Beperkt aantal karakteristieken zoeken (je hebt immers gedeelde taal nodig)
Afvinklijsten voldoen niet
Het gaat om ‘contextualised judgments’:
je neemt de context mee in de
waardering/beoordeling
Sadler (2013) In: Blömeke, e.a., ibid
162018 05 28 Masterclass Assessments HU - Judith Kortas
Beslissing:
Zien we het deze persoon doen in de
praktijk? (Ja of nee)
Aangeven wat wél is aangetoond
van adequaat professioneel handelen
172018 05 28 Masterclass Assessments HU - Judith Kortas
Toetspiramide Miller
182018 05 28 Masterclass Assessments HU - Judith Kortas
Vaardigheid of competentie?
Personen zijn vaardig als ze in staat zijn
om efficiënt en doelgericht geleerde
procedures uit te voeren
Personen zijn competent als ze kunnen
omgaan met slecht-gedefiniëerde
problemen in complexe situaties
Straetmans (2014) in: Van Berkel e.a. (red.) Toetsen in het
hoger onderwijs. Houten: Bohn Stafleu van Loghum (p. 188)
192018 05 28 Masterclass Assessments HU - Judith Kortas
Voorbeeld
Vaardig t.a.v. beademen van dummy
Competent in bepalen van ziektebeeld
en wel of niet kunstmatig moeten
beademen in de ambulance
Straetmans (2014) ibid
202018 05 28 Masterclass Assessments HU - Judith Kortas
situaties effecthandelen
zichtbaar
onzichtbaar
unieke persoonlijkheidkwaliteiten motivatie inspiratie
beroepsopvatting beroepshouding
kennis van zaken
handelingsrepertoire
verantwoordelijkheid
Competentie
212018 05 28 Masterclass Assessments HU - Judith Kortas
Twee assessoren:
1 van HU (Beoordelaar Begeleider)
1 uit werkveld (gecertificeerd!)
Dagdeel
Portfolio
Presentatie
Criteriumgericht Interview (CGI)
Beoordeling (VD/NVD)
Assessment Startbekwaam (laatste 5 ec aan einde bacheloropleiding –
Instituut Archimedes)
222018 05 28 Masterclass Assessments HU - Judith Kortas
Lerarenopleiding (2e graads docent natk)
Compilatie (ca. 11 min.)
Presentatie door student
Overleg assessoren (wat al gezien, wat nog
bevragen?)
Criteriumgericht Interview
Overleg assessoren gericht op beoordeling
Rapportage van oordeel en feedback aan student
23
Videobeelden assessment
2018 05 28 Masterclass Assessments HU - Judith Kortas
Programma (tot 12.30u)
Welkom, programma
Een criteriumgericht interview (oefenen)
Informatie - focus op:
Competentiegerichte assessments
Videobeelden assessmentsessie IA
Verschillende interpretaties van het begrip
assessment
Formulier ‘Kenmerken van assessments’
Checklist ‘Waaraan denken bij het ontwerpen
van assessments?’
Advisering assessmentontwikkeling en training
assessoren 242018 05 28 Masterclass Assessments HU - Judith Kortas
Kenmerken van assessments
Formulier met 11 punten
Twee kolommen – twee uitersten op een
continuum
Niet: links is fout, rechts is goed
Gaat om doelen van het assessment
Bewustwording van keuzes en mogelijke gevolgen
voor de opleiding/student
Wat is minder/meer wenselijk252018 05 28 Masterclass Assessments HU - Judith Kortas
Formulier ‘Kenmerken van
assessments’
In duo’s (2x7 min.):
Interview elkaar a.d.h.v. het formulier:
Welke kenmerken zijn van toepassing op jullie
assessment?
Plenaire terugkoppeling
262018 05 28 Masterclass Assessments HU - Judith Kortas
Assessments in de HU:
niet alleen…
een mondelinge toets…
summatief inzetten (aan het eind van het
leerproces), maar ook de
formatieve en duurzame functie benutten (ten
behoeve van leerprocessen),
daarbij ‘peers’ inschakelen,
leerwegonafhankelijk maken
en koppelen aan leren in de beroepspraktijk
(leren participeren – professionele identiteit
ontwikkelen)
272018 05 28 Masterclass Assessments HU - Judith Kortas
Checklist ‘Waaraan denken bij het
ontwerpen van een assessment?’
eindkwalificaties opleiding
toetsbeleid
toetsprogramma
rol en vorm van assessment
Organiseerbaarheid
(om mee te nemen)
282018 05 28 Masterclass Assessments HU - Judith Kortas
Voor advies bij assessment-
ontwikkeling en
training van assessoren
Bureau Assessment & Validering
Instituut Archimedes
In gesprek met Expertisecentrum Docent HBO
Voorlopig: eerst een oriënterend gesprek met
Berber Visser
292018 05 28 Masterclass Assessments HU - Judith Kortas
Advies
Oriënterend: wat is precies onze behoefte?
Adviesgesprekken in ontwikkelfase: hoe willen
we toetsen, welke rol willen we assessment
laten spelen, hoe hangt dat samen met
andere vormen van toetsing, wat betekent dat
voor ontwikkelwerk en organisatie, …
30
Advisering en training
2018 05 28 Masterclass Assessments HU - Judith Kortas
Advisering en training
Training CGI: als (extra) toetsvorm bij een
(bestaand) beoordelingskader bij bv. een
beroepsproduct, focus op vraagtechnieken
2 dagdelen
Basistraining assessoren: indien een assessment
wordt ingezet om de competentieontwikkeling
(beroepsbekwaamheid) van studenten integratief te
toetsen op basis van een al ontwikkeld
competentieprofiel met gedragsindicatoren
o 4 dagdelen + 1 dagdeel certificering
o PILOT BLENDED VARIANT (8-10 u zelfstudie +
1 dag training + 1 dagdeel certificering)
312018 05 28 Masterclass Assessments HU - Judith Kortas
Advisering en training
Training, evt. ook
Training assessmentrapportage schrijven
Training valideren van EVC (eerder/elders
verworven competenties)
Training voor reeds gecertificeerde
assessoren die in een andere context
assessment af gaan nemen
…322018 05 28 Masterclass Assessments HU - Judith Kortas
Van harte aanbevolen:
Berkel, A. van, (2017)
De assessmentdriehoek voor leerwegonafhankelijk
toetsen en begeleiden.
In: OnderwijsInnovatie, juni (p.17-25)
Sinke, G.J. (2009)
Aan de slag met assessment. Toetsen en beoordelen in
een competentiegerichte leeromgeving. Nuenen:
Onderwijsadviesbureau M.A.F. Dekkers
Berkel, H. van, Bax, A., & Joosten-ten Brinke, D.
(red.). Toetsen in het hoger onderwijs. Houten: Bohn
Stafleu van Loghum 332018 05 28 Masterclass Assessments HU - Judith Kortas
342018 05 28 Masterclass Assessments HU - Judith Kortas
Opbrengst van vanochtend?
En graag formuliertje invullen voor Judith
352018 05 28 Masterclass Assessments HU - Judith Kortas