Nieuwe meta-analyse toont de effectiviteit van worked examples

Een worked example is een beschrijving die je stap-voor-stap uitlegt hoe je een bepaald probleem oplost. In veel gevallen blijken worked examples effectiever te zijn voor bijvoorbeeld het ontwikkelen van reken- en wiskundevaardigheden dan probleem oplossen. In een nieuwe meta-analyse die gaat verschijnen in Educational Psychology Review wordt bekeken wat de effectiviteit is van worked examples in 55 studies. Interessant is dat veel van de geïncludeerde studies zijn uitgevoerd in het reguliere onderwijs en dus geen labstudies zijn. De resultaten van de meta-analyse laten zien dat worked examples effectief zijn (g = 0.48). Verdere analyses lieten zien dat het bestuderen van correcte worked examples effectiever is dan het bestuderen van incorrecte worked examples. Opvallend is dat in deze meta-analyse de effectiviteit van worked examples sterk terugloopt als leerlingen gevraagd wordt om zichzelf uitleg te geven bij het bestuderen van worked examples. De auteurs vermoeden dat dit misschien te maken heeft met de kwaliteit van de uitleg die leerlingen aan zichzelf geven: als de uitleg niet van voldoende kwaliteit is of incorrect is, heeft dit misschien een nadelig effect.

Het abstract

The current meta-analysis quantifies the average effect of worked examples on mathematics performance from elementary grades to postsecondary settings and to assess what moderates this effect. Though thousands of worked examples studies have been conducted to date, a corresponding meta-analysis has yet to be published. Exclusionary coding was conducted on 8033 abstracts from published and grey literature to yield a sample of high quality experimental and quasi-experimental work. This search yielded 43 articles reporting on 55 studies and 181 effect sizes. Using robust variance estimation (RVE) to account for clustered effect sizes, the average effect size of worked examples on mathematics performance outcomes was medium with g = 0.48 and p = 0.01. Moderators assessed included example type (correct vs. incorrect examples alone or in combination with correct examples), pairing with self-explanation prompts, and timing of administration (i.e., practice vs. skill acquisition). The inclusion of self-explanation prompts significantly moderated the effect of examples yielding a negative effect in comparison to worked examples conditions that did not include self-explanation prompts. Worked examples studies that used correct examples alone yielded larger effect sizes than those that used incorrect examples alone or correct examples in combination with incorrect examples. The worked examples effect yields a medium effect on mathematics outcomes whether used for practice or initial skill acquisition. Correct examples are particularly beneficial for learning overall, and pairing examples with self-explanation prompts may not be a fruitful design modification. Theoretical and practical implications are discussed.

Wat bedoelen ministers van hoger onderwijs met “innovatie”?

Op 29 juni 2022 werd minister Dijkgraaf geïnterviewd door het Hoger Onderwijs Persbureau. Gevraagd naar ontwikkelingen in het hoger onderwijs antwoordde de minister: “Het is de bedoeling om het hbo-onderzoek verder te ontwikkelen en het onderwijs innovatiever te maken”. Innovatie is in veel sectoren een veel gebruikt concept, zo ook in het onderwijs. Maar wat bedoelen ministers van onderwijs als ze het over “innovatie” hebben? En welke doelen hopen zij met innovatie te realiseren? om hierachter te komen analyseerde een nieuwe studie de toespraken van Engelse ministers voor hoger onderwijs in de periode 2015-2020.

This article analyses speeches made by UK higher education ministers, from the election of the Conservative government in May 2015 through to September 2020. The article uses disruptive innovation as a theoretical framework through which to analyse ministers’ perspectives on innovation. The methodology is content analysis with a directed approach. Fourteen speeches are analysed.

Innovatie lijkt voor de ministers vooral een economisch doel te hebben: zorgen dat studenten sneller hun diploma halen en eerder bij kunnen dragen aan arbeidsproductie. 

Innovation is shown to serve an economic agenda, enabling students to transact their higher education quickly and subsequently function without state support. Innovation is also a flexible term offering numerous solutions, from providing economic growth; to militating against the isolationism of Brexit; to providing a route out of the pandemic. Innovation is intended to enhance economic performance and to deliver efficiency, but not to fundamentally disrupt the existing organisation of the UK’s higher education sector. Innovation, as articulated by Ministers for Higher Education, comprises sustaining innovation and efficiency innovation, but not disruptive innovation.

De resultaten zijn wellicht niet verrassend aangezien de ministers van hoger onderwijs allemaal afkomstig waren uit de Engelse conservatieve partij. De vraag is wellicht welke opvatting over het doel van innovatie van hoger onderwijs komt naar voren als je Nederlandse ministers van onderwijs goed zou beluisteren?

Hoe ontwikkelen docenten-in-opleiding kijkvaardigheden?

Docenten hebben in de klas professionele kijkvaardigheden nodig. Deze vaardigheden stellen docenten in staat om relevante gebeurtenissen te registreren en om deze gebeurtenissen te interpreteren aan de hand van hun kennis. Een recente studie van Martin et al. (2022) onderzocht verschillende manieren om de kijkvaardigheden van docenten-in-opleidig te vergroten. Dit deden ze aan de hand van een experiment waarbij 87 docenten-in-opleiding eerst een introductietekst lazen en vervolgens twee videos van twee klassensituaties bekeken. De introductieteksten hadden een verschillende insteek. De controlegroep las een introductietekst met algemene informatie over het leren door middel van observatie maar gaf geen verdere informatie over de didactische werkvorm (tutoring). De twee andere introductieteksten gaven informatie informatie over tutoring en de condities waaronder dit effectief kan zijn, waarbij één tekst inging op meer algemene aspecten van tutoring en de andere tekst op meer vakspecifieke aspecten van tutoring. De resultaten van het onderzoek laten zien dat het lezen van de introductieteksten met informatie over tutoring sterker bijdroeg aan de ontwikkeling van kijkvaardigheden dan de tekst met algemene informatie. Mogelijk helpt een pretraining in de vorm van een introductietekst de interesse van docenten-in-opleiding te wekken en helpt het hen om de informatie in de video te gebruiken voor hun eigen ontwikkeling.

Het abstract

Applying professional-vision skills to classroom situations depends on knowledge about what matters in these situations. In an experiment with 85 biology pre-service teachers, we investigated a 90-min intervention combining both acquisition and application of knowledge about tutoring. The intervention started with an introductory text, followed by classroom video examples. Students who read a text on concrete tutoring strategies made more references to pedagogical concepts in their analyses than students who read about generic video observational guidelines. We conclude that combining a short, focused theoretical introduction and video analysis is a promising method to broadly anchor professional-vision training within teacher education.