Toets Advies Commissie

Sinds september 2010 is de Wet op het hoger onderwijs en wetenschappelijk onderzoek aangepast, en hebben examencommissies expliciet de taak gekregen om de kwaliteit van de toetsing in het onderwijs te onderzoeken en bewaken. De Faculteit Bètawetenschappen heeft er voor gekozen om een faculteitsbrede toetsadviescommissie in te richten die de verschillende examencommissies bij de Faculteit ondersteunt in deze taak. Dit is niet de enige commissie die zich met toetsing bezighoudt bij de faculteit: sommige departementen, schools, of opleidingen hebben een toetscommissie die specifiek de opleidingen van het departement (school, opleiding) ondersteunt.

Doel toetsadviescommissie

De toetsadviescommissie van de Faculteit Bètawetenschappen stelt zich tot doel zich te ontwikkelen tot het expertisecentrum voor toetsing en didactiek voor het onderwijs binnen de Faculteit Bètawetenschappen.

Op grond van deze – nog op te bouwen – expertise ziet zij als haar taken:

• het geven van advies over toetsing en didactiek aan docenten, examencommissies, beleidsmedewerkers, en andere betrokkenen bij het onderwijs. Vragen die aan de orde kunnen komen zijn:
  
  `Hoe kan ik een student halverwege de periode op een goede manier feedback geven over zijn/haar voortgang?' `Welke toetsvorm past goed bij het toetsen of leerdoel X is bereikt?' `Ik wil meer weten over betrouwbaarheid en validiteit van toetsen, kan ik daar een cursus over volgen?'

• het ondersteunen van examencommissies bij hun taak de kwaliteit van toetsing te borgen. De WHW in werking sinds september 2010 scherpt de taken van de examencommissies aan: examencommissies moeten expliciet toezien op de kwaliteit van de toetsen, en het eindniveau van de afgestudeerden. Vragen die aan de orde kunnen komen zijn:
  
  `Hoe stel ik beoordelingscriteria op waarmee ik afstudeerwerk kan beoordelen?' Hoe kan ik er voor zorgen dat die criteria daadwerkelijk gebruikt worden en dat het afstudeerwerk en de beoordelingen door examencommissies zijn in te zien?' `Hoe borg ik de kwaliteit van toetsing in mijn opleiding?'

• het inventariseren en uitwisselen van best practices. Op vele plekken binnen en buiten de faculteit zijn toetskwaliteitsprocedures ingevoerd of worden experimenten op het gebied van toetsing uitgevoerd. Deze ervaringen willen we graag delen in de faculteit.
  
  Zo heeft farmacie gedegen kwaliteitszorg rondom toetsing in de bachelor, waarvan andere opleidingen mogelijk asspecten over kunnen nemen. En biologie heeft onderzocht of de leerdoelen en de toetsen in het eerste jaar op elkaar aansluiten, zowel wat betreft inhoud als niveau.

De toetsadviescommissie:

• geeft mede vorm aan het facultaire toetsbeleid (op basis van expertise)
• deelt kennis t.a.v. procedures rond toetsing en toetskwaliteitscontrole
• formuleert richtlijnen t.a.v. het documenteren en archiveren van toetsen (incl. cursusdoelen, toetsmatrijzen, deeltoetsen en antwoordmodellen).
• verzamelt en deelt kennis t.a.v. toetssystemen
• deelt kennis t.a.v. en faciliteert mogelijkheden tot docentprofessionalisering op het terrein van toetsing

Zij zal niet zelf de kwaliteit van specifieke toetsen gaan onderzoeken, maar leden van de toetsadviescommissie zullen dat wel doen voor de opleidingen waarvoor zij deel uitmaken van de examencommissie, samen met docenten uit de opleidingen.

Leden toetsadviescommissie

De toetsadviescommissie is ingesteld door de decaan, en heeft de volgende leden:

• Johan Jeuring, (informatica, teaching fellow van de Faculteit Bètawetenschappen, voorzitter)
• Gerrit Heil (undergraduate school Bèta)
• Barbara Allart (advies vanuit het Centrum voor Onderwijs en Leren)
• Ferdi Engels (voorzitter toetsadviescommissie farmacie)
• Gerard Tel (deelexamencommissie informatica, lid examencommissie GSNS)
• Inge van den Berg (UMC, examencommissie GSLS)
• Christine Knippels (FIsme, deelexamencommissie biologie)
• Harry Bitter (deelexamencommissie scheikunde)
• Andre Henriques (deelexamencommissie wiskunde)
• Joke Daemen (interim, SEC en Lerarenopleidingen)
• Michiel van den Broeke (deelexamencommissie Natuur- en Sterrenkunde)

Bijeenkomsten toetsadviescommissie

• 17: 13 mei 2013, 12:30 - 13:30, BBL 5.56.
• 16: 26 maart 2013, 14-15:30 15:00 - 16:40, BBL 5.56.
• 15: 19 februari 2013 15:00 - 16:40, BBL 5.56.
• 14: 16 januari 2013 12:15 - 13:15, BBL 5.31
  Brainstormsessie over Facultaire roadmap toetsing.
• 13: 9 januari 2013 13:30 - 14:30, BBL 5.31
  Brainstormsessie over beoordelen individuele werken zoals afstudeerwerken. Verslag. Plannen.
• 12: 18 december 2012 12:15 - 13:15, BBL 5.31
  Brainstormsessie over docentprofessionalisering en bewustwording rondom toetsing.
• 11: 28 november 2012 9:00 - 10:15, BBL 5.45
  
• 10: 24 oktober 2012 14:00 - 15:30, BBL 5.45
  
• 9: 26 juni 14:45 - 16:15, BBL 4.45
  
  • Discussiestuk Examencommissies
  • Discussiestuk EC-Rapportage over toetskwaliteit
• 8: 4 juni 2012 9:15 - 10:45, BBL 4.45
  
• 7: 23 april 2012 15:00 - 16:30, BBL 5.45
  
  • Discussiestuk: Beoordelen van afstudeerwerk
  • Toetsing bij Scheikunde
• 6: 2 april 2012 13:45 - 15:15, BBL 4.45
  
  • Beoordeling MSc research Biologie
  • GSLS supervision of the thesis
  • GSLS Supervision of the research projects
  • GSNS Research application and assessment forms 2011
  • GSNS Research application and assessment forms 2012
• 5: 27 februari 2012, 14:45 - 16:15, BBL 5.45
  
  • Onderwijs en toetsing bij Farmacie
• 4: 18 januari 2012, 14:45 - 16:15, BBL 5.45
  
  • De structuur van de Graduate School Life Sciences
  • Archiveren toetsen
• 3: 21 december 2011, 14:00 - 15:30, BBL 5.45
  
  • Toetsing bij Informatica
• 2: 23 november 2011, 14:00 - 15:30, BBL 5.45
• 1: 25 oktober 2011, 16:00 - 17:30, BBL 571

Toetsbeleid

• Procedures en richtlijnen voor de beoordeling en normering van toetsen, in het bijzonder:
• Beoordeling afstudeerwerk
  • Workshop op de onderwijsmiddag. In de workshop wordt gerefereerd aan twee artikelen: Grade integrity and the representation of academic achievement, en Reliability and validity of rubrics for assessment through writing
  • Beoordelingscriteria en rubrieken bij Informatica en Informatiekunde
  • Beoordelingsformulier GSNS
  • Master Science Education and Communication/Research Project - Evaluation Research Proposal
  • GSLS: Supervision of the thesis, Supervision of the research project
• ...

Docentprofessionalisering

• Richtlijnen en advies ten aanzien van professionalisering van docenten
• Uitwisselen van ervaring en expertise op het gebied van toetsing
  • EMP projecten
  • Surf toetsen en toetsgestuurd leren
• Workshops centrum voor onderwijs en leren. Na de zomer start een cursus over ICT inzetten bij toetsen.
• Cursus van Surf academy over digitaal toetsen

Meer informatie

• Faculteit Bètawetenschappen
  • Presentatie van Gerard Tel over `Industrieel toetsen' op een docentenbijeenkomst over toetsing bij het departement Informatica op 3 april 2013. Op dezelfde middag sprak Johan Jeuring over Validiteit en betrouwbaarheid van toetsen.
  • Facultaire onderwijsmiddag specifiek over toetsing op 14 februari 2012. Na de introductie van Johan Jeuring verzorgde Jan van Tartwijk een keynote over hoe je toetsing kan gebruiken in het onderwijs, en hebben de toetsadviescommissieleden een viertal workshops verzorgd:
    • Gerrit Heil en Ferdi Engels: Toetsvormen
    • Johan Jeuring: Validiteit en betrouwbaarheid van toetsen. Hier is een spreadsheet waarin de verschillende psychometrische factoren (moeilijkheidsgraad, onderscheidingsvermogen) uitgerekend worden. Deze spreadsheet, opgesteld door Jaap Milius van het Centrum voor Onderwijs en Leren en Andries Koster van farmacie wordt binnen scheikunde en farmacie gebruikt voor de toetsanalyses. Na afloop van de workshop ontving ik nog een aantal documenten over de Cronbach Alpha maat: Explaining Cronbach Alpha, Misverstanden rondom Cronbach Alpha, en twee pagina's (1,2) over Cronbach Alpha uit toetsende statistiek van Carel van Wijk. Voor mijn eigen toets (opgaven, modeluitwerkingen, en nakijkinstructies) de toetsanalyse volledig uitgewerkt. Samen met de toetsmatrijs geeft dit een bijna volledig overzicht van toetsing rondom de cursus (bijna omdat de eerste deeltoets door iemand anders is afgenomen).
    • Harry Bitter en Inge van den Berg: Beoordelen van afstudeerwerk. In de workshop wordt gerefereerd aan twee artikelen: Grade integrity and the representation of academic achievement, en Reliability and validity of rubrics for assessment through writing
    • Barbara Allart, Christine Knippels, en Gerard Tel: Leerdoelen
  • Poster over de toetsadviescommissie bij de facultaire onderwijsmiddag op 9 november 2011.
  • De relatie tussen examencommissies en de toetsadviescommissie bij de Faculteit Bètawetenschappen.
  • Het rapport van de kwartiermakerscommissie voor de toetsadviescommissie.
• Universiteit Utrecht:
  • Het Utrechtse onderwijsmodel.
  • Het rapport van de Bama 3.0 werkgroep Toetsing en Didactiek, en het bijbehorende discussieplatform van de UU.
  • Verantwoordelijkheden kwaliteitszorg onderwijs.
  • Toetsing bij de faculteit Geesteswetenschappen, inclusief webworkshops.
  • Model Reglement Examencommissie
• Twee belangrijke aspecten van toetsing zijn (kort geformuleerd):
  • Betrouwbaarheid: een andere maar vergelijkbare toets over hetzelfde onderwerp levert hetzelfde resultaat op
  • Validiteit: de conclusies die op basis van de toets worden getrokken zijn juist mbt leerdoelen en de vorderingen van de student.
• Literatuur:
  • John Biggs en Catherine Tang, Teaching for Quality Learning at University. Open University Press, 2007. Dit is een praktisch ingesteld boek, dat veel aandacht besteed aan `constructive alignment': stel concrete, actieve leerdoelen vast, beschrijf wanneer en in welke mate je de leerdoelen hebt behaald, en leid daar onderwijsactiviteiten en toetsen uit af.
  • Henk van Berkel, Anneke Bax, Toetsen in het hoger onderwijs. Bohn Staflau van Loghum, 2006.
  • Anthony J. Nitko en Susan M. Brookhart, Educational Assessment of Students (6th edition). Pearson, 2011.
  • Dominique Sluijsmans, Annemieke Peeters, Linda Jakobs, Saskia Weijzen, De kwaliteit van toetsing onder de loep. OnderwijsInnovatie, pp 17 - 25, december 2012.
• Film: Teaching teaching and understanding understanding
• Toetsing op Wikiwijs.
• Toetsing bij Surf, Nieuwe, gratis tools voor digitaal toetsen.
• Formatieve online zelftoetsen

-- JohanJeuring - 10 Apr 2013