Herstelden alle scholen even goed van leervertragingen door de pandemie? Nieuw onderzoek geeft verrassend antwoord

Een grootschalige studie uit Duitsland (>200.000 leerlingen, >1000 scholen) werpt nieuw licht op de vraag of scholen met verschillende leerlingpopulaties verschillend herstelden de leerachterstanden die leerlingen hadden opgelopen door de schoolsluitingen tijdens de COVID-19 pandemie.

De onderzoekers bekeken of herstel verschilde tussen scholen met:

• minder sociaal-cultureel kapitaal,
• meer leerlingen met migratieachtergrond,
• langere schoolsluitingen.

De verwachting was dat deze scholen zouden meer moeite hebben met herstel. De opvallende uitkomst: geen groeiende kloof tussen scholen

De data laat zien dat scholen met uiteenlopende profielen een vergelijkbaar patroon van leerwinst lieten zien. De verschillen tussen scholen groeiden dus niet verder door de pandemie.

Dat betekent niet dat er geen leervertragingen waren, die vonden de onderzoekers wel, maar het herstel verliep gemiddeld gelijk op tussen scholen.

Hoe kan dat?

Een verklaring ligt mogelijk in de enorme programma’s die de overheden instelden om de leerachterstanden terug te dringen. Veel leerlingen kregen aanvullende ondersteuning, en middelen kwamen daadwerkelijk terecht in scholen met hogere risico’s. Snelle, doelgerichte interventies lijken hun werk te hebben gedaan. Het goede nieuws is dus dat deze scholen enorm veerkrachtig bleken en dat dit gold voor de meeste scholen ongeacht bijvoorbeeld de leerlingpopulatie.

Abstract

Background

COVID-19-related restrictions on schooling resulted in learning losses, which were larger for socially and economically disadvantaged students. While recent empirical results point towards a recovery of learning loss in some subjects, it is unclear which school-related context factors may have impacted the recovery from the pandemic.

Aims

We investigate proxy indicators for three school factors, (a) socio-cultural composition, (b) proportion of students with migration background, and (c) the duration of school closures, and how they relate to differential learning gains in repeated measures from grade 5 to grade 8 for a pre-pandemic cohort compared to measures in pandemic-affected cohorts.

Samples

We analyzed educational large-scale assessment data, covering all public schools in one German state (total n > 200,000 students, k > 1000 schools). Competence test data in reading and mathematics were available for a pre-pandemic cohort (2015–2019: assessed in 5th grade in 2015 and in 8th grade in 2019) and for two cohorts affected by the pandemic (2018–2022 and 2019–2023).

Results

Difference-in-difference-in-difference analyses showed no significant moderator effects for the three risk factors at the school-level (i.e., socio-cultural capital, proportion of non-German speaking students, lost school days) regarding the recovery from learning losses (i.e., similar learning gains from grade 5 to 8 across cohorts).

Conclusions

The null effects tentatively suggest that the social divide between schools did not widen in the aftermath of school closures. On average, schools seemed to recover from restrictions on schooling regardless of the schools’ social composition.

Leesvaardigheid wereldwijd onder druk door schoolsluitingen

Een nieuwe studie werpt licht op de invloed van de schoolsluitingen als gevolg van de coronapandemie op  de leesvaardigheden van leerlingen. Hoewel het nog slechts een preprint betreft en de studie dus nog peer review moet ondergaan, zijn de gegevens die onderzoekers van de Universiteit van Hamburg deelden alvast interessant. De onderzoekers gebruikten gegevens uit het wereldwijd uitgevoerde PIRLS onderzoek om de effecten van schoolsluitingen op leesvaardigheid te onderzoeken. Deze studie laat zien dat er een significante negatieve samenhang is tussen het aantal dagen dat scholen gesloten waren en de prestaties op de PIRLS toetsen. De onderzoekers concluderen:

We estimate that an additional day of school closures is associated with a 0.14 PIRLS scale point decline in student reading performance. On average, countries in our sampleclosed schools for 110 days. To put our estimated effect size into context, this would imply that, the average country’s average student reading achievement declined about 15 points more than a country that did not close schools.

Met 108 dagen durende schoolsluitingen is de geconstateerde daling van Nederlandse leerlingen op de PIRLS toetsen mogelijk ten dele verklaard. De onderzoekers constateren ook dat de effecten van de schoolsluitingen groter zijn voor leerlingen met een lagere sociaal-economische status of voor leerlingen met beperkte toegang tot computers.

Het abstract

The COVID-19 pandemic disrupted education worldwide as educational systems made the decision to close schools to contain the spread of the virus. The duration of school closures varied greatly internationally. In this study, we use international variation in school closure policies to examine the effects of school closures on student achievement. Specifically, we use representative trend data from more than 300,000 students in 29 countries to examine whether the length of school closures is related to changes in student achievement before and after the outbreak of COVID-19. We observe a significant and substantial negative effect of school closures on student reading achievement. The estimated effect implies that a year of school closures corresponds roughly to the loss of a little more than half a school year of learning. This effect is even more pronounced for socioeconomically disadvantaged students and those without home computer access.

We estimate that

an additional day of school closures is associated with a 0.14 PIRLS scale in student reading performance. On average, countries in our sample

closed schools for 110 dayss average student reading achievement

declined about 15 points more than a country that did not close schools

Meta-analyse laat zien: wereldwijd substantiële leerachterstanden door schoolsluitingen

Dat de schoolsluitingen tijdens de coronacrisis een grote negatieve impact hebben gehad op leerlingen is al uitgebreid gedocumenteerd. Nu is er onlangs een meta-analyse verschenen in Nature Human Behavior die het wereldwijde onderzoek naar de effecten van de schoolsluitingen samenvat. Deze meta-analyse laat zien dat de effecten van de schoolsluitingen een forse negatieve impact hebben gehad op de leerprestaties (d = -0.14). Dat komt volgens de auteurs neer op een leerachterstand van gemiddeld 14 weken.

De auteurs concluderen ook dat de leerachterstanden al vroeg tijdens de pandemie zijn ontstaan en nog nauwelijks kleiner zijn geworden. Bovendien laten de resultaten zien dat de schoolsluitingen verschillen tussen leerlingen vergroot hebben: kinderen met een lage SES hebben grotere leerachterstanden. Tenslotte blijken de achterstand groter te zijn voor rekenen-wiskunde dan voor lezen en spelling. Als laatste kraken de auteurs ook enkele harde noten over de kwaliteit van sommige studies: een deel van de gevonden studies was van dusdanig lage kwaliteit dat deze niet meegenomen kon worden in de meta-analyse.

Het abstract

To what extent has the learning progress of school-aged children slowed down during the COVID-19 pandemic? A growing number of studies address this question, but findings vary depending on context. Here we conduct a pre-registered systematic review, quality appraisal and meta-analysis of 42 studies across 15 countries to assess the magnitude of learning deficits during the pandemic. We find a substantial overall learning deficit (Cohen’s d = −0.14, 95% confidence interval −0.17 to −0.10), which arose early in the pandemic and persists over time. Learning deficits are particularly large among children from low socio-economic backgrounds. They are also larger in maths than in reading and in middle-income countries relative to high-income countries. There is a lack of evidence on learning progress during the pandemic in low-income countries. Future research should address this evidence gap and avoid the common risks of bias that we identify.

Mentaal welbevinden leerkrachten stond onder druk tijdens pandemie

Nog zeer regelmatig verschijnt er onderzoek naar de effecten van de schoolsluitingen, bijvoorbeeld op leerlingen en docenten-in-opleiding. Ook op het welbevinden van leerkrachten hadden de schoolsluitingen impact. Een nieuwe, grootschalige studie uit de VS vergelijkt het welbevinden tijdens de pandemie tussen leerkrachten in het basisonderwijs en leerkrachten in andere beroepen. Deze studie laat zien dat leerkrachten vaker angstsymptomen rapporteerden dan werknemers in andere beroepen en dat leerkrachten die onderwijs op afstand gaven significant hogere niveaus van distress rapporteerden dan degenen die op school lesgaven.

Het abstract

With an emergence of research investigating the educational impacts of the COVID-19 pandemic, empirical studies assessing teachers’ mental health throughout the pandemic have been scarce. Using a large national data set, the current study compares mental health outcomes during the pandemic between pre-K–12 teachers and professionals in other occupations. Further, we compare the prevalence of mental health outcomes between in-person and remote teachers (N = 134,693). Findings indicate that teachers reported a greater prevalence of anxiety symptoms than did those in other professions and that remote teachers reported significantly higher levels of distress than did those teaching in person. We summarize the policy implications of these results.

Zorgwekkend nieuws uit Nationaal Cohortonderzoek: Nog steeds grote vertraging voor spelling en rekenen-wiskunde

Dat de schoolsluitingen in het basisonderwijs grote impact hebben gehad op Nederlandse basisschoolleerlingen was al een tijd duidelijk. Het Nationaal Cohortonderzoek Onderwijs volgt al tweeeneenhalf jaar de gevolgen van deze schoolsluitingen. Helaas zijn de cijfers die het NCO deze week presenteerden niet erg hoopgevend: bij de leerlingen die bij de start van de coronacrisis in groep 3, 4 of 5 zaten blijft de leergroei bij spelling en rekenen-wiskunde duidelijk achter.

Maak kennis met Onderwijswetenschappen: Nanocolleges over braingym, multitasken en de effecten van de schoolsluitingen

Vandaag en morgen zijn de open dagen van de Universiteit Utrecht. De kans om kennis te maken met de opleiding Onderwijswetenschappen. Vind je het leuk om wat mee te krijgen over onderwerpen waar onderwijswetenschappers zich mee bezighouden? Dan zijn de volgende drie nanocolleges interessant om te bekijken!

Braingym

Multitasken

De effecten van de schoolsluitingen

Lockdowns en schoolsluitingen hadden negatieve invloed op zelfeffectiviteit docenten-in-opleiding

Veel onderzoek naar de impact van schoolsluitingen en lockdowns richt zich op de gevolgen voor leerlingen. Maar ook voor docenten-in-opleiding hadden de schoolsluitingen en lockdowns een impact: onderwijs op de lerarenopleiding ging niet door of moest online gegeven worden en stages op school gingen niet door of moesten anders ingevuld worden. Een recente studie in Teaching and Teacher Education onderzoekt de impact van de schoolsluitingen op de zelfeffectiviteit van docenten-in-opleiding. Deze studie van Symesa, Lazaridesa en Hußnera onderzocht 201 docenten-in-opleiding. De resultaten van de studie laten zien dat zelfeffectiviteit van docenten-in-opleiding in een semester met schoolsluitingen minder toenam dan een vergelijkbaar cohort dat niet getroffen werd door schoolsluitingen. De auteurs nemen aan dat dit veroorzaakt wordt doordat deze docenten-in-opleiding minder praktische ervaring op konden doen. 

Het abstract

This study used latent growth curve models to examine the impact of the COVID-19 pandemic on the development of teacher self-efficacy in student teachers. Results indicate that the teacher self-efficacy of student teachers taught during the first COVID-19 lockdown increased significantly less across a semester compared to student teachers taught prior to the pandemic, who gained practical experience in schools. There may be a cohort of student teachers at risk of entering the profession with lower self-efficacy than is typical. Universities and schools may wish to provide additional practical experiences to compensate for the missed opportunities during the COVID-19 pandemic.

 

Schoolsluitingen vergrootten verschillen tussen leerlingen in Hongarije

Ook al zijn de schoolsluitingen al weer even geleden er verschijnt nog regelmatig onderzoek naar de effecten van deze schoolsluitingen. In de nieuwste uitgave van Learning & Instruction is een onderzoek naar de effecten van de schoolsluitingen op Hongaarse basisschoolleerlingen verschenen. Dit onderzoek onder 55.000 leerlingen liet zien dat ook in Hongarije de schoolsluiting negatieve effecten had op de ontwikkeling van leerlingen. Zo vonden de auteurs dat de schoolsluitingen een negatieve invloed hadden op beginnende gecijferdheid. Het onderzoek liet verder zien dat de negatieve effecten het grootst waren in de onderbouw. Bovendien bleken de schoolsluitingen de kansenongelijkheid verder te vergroten: de impact was het grootst op leerlingen met een lage SES.

Het abstract

Remote learning during the COVID pandemic has led to short- and long-term consequences for students' learning. So far, data on learning loss in early schooling have been limited. In this paper, we evaluate the effect of remote learning on 1st graders' school readiness skills and 2nd–8th graders’ performance in mathematics, reading and science using rich data collected in Hungary before and during the pandemic (n ≈ 55,000). The results show that kindergarten children and 1st–4th-grade students were significantly negatively affected by COVID restrictions compared to their older peers. This difference was extremely large in schools with a high share of disadvantaged students. More specifically, 1st–4th-grade low-SES students made little or no progress while learning from home.

Negatieve impact van schoolsluitingen op schrijfvaardigheid van basisschoolleerlingen

Over de impact van de schoolsluitingen als gevolg van het coronavirus is al veel geschreven. Een nieuw onderzoek, gepubliceerd in het Journal of Educational Psychology, beschrijft de impact van de schoolsluitingen in Noorwegen op de schrijfvaardigheid van leerlingen in groep 3. De schoolsluitingen in Noorwegen duurden 7 weken en tijdens deze periode gaven de Noorse leerkrachten online onderwijs. De studie van Skar, Graham en Huebner laat zien dat de schoolsluitingen een significante negatieve impact hadden op op de schrijfvaardigheid van leerlingen. De auteurs noemen hiervoor verschillende verklaringen: er was eerder sprake van emergency remote instruction dan van effectief ontworpen online onderwijs en veel jonge leerlingen hadden slechts minimaal contact met hun leerkracht tijdens de schoolsluitingen.

Het uit het abstract:

The coronavirus disease 2019 (COVID-19) pandemic and the sudden cancellation of in-class instruction for many students around the world presented an unprecedented disruption in children’s education. As the COVID-19 pandemic took form, multiple concerns were raised about the potential negative impact on students’ learning. The current study examined this proposition for children’s writing. We compared the quality of writing, handwriting fluency, and attitude toward writing of first grade Norwegian students during the COVID-19 pandemic (421 girls, 396 boys), which included emergency remote instruction for almost 7 weeks, with first grade students in the same schools a year before the pandemic began (835 girls, 801 boys). After controlling for variance due to national test scores, school size, proportion of certified teachers, students per special education teacher, school hours per student, student gender, and native language, we found that students attending first grade during the pandemic had lower scores for writing quality, handwriting fluency, and attitude toward writing than their first grade peers tested a year earlier before the COVID-19 pandemic emerged. Implications for policy and instruction as well as future research are presented.

Impact van online en hybride onderwijs op gedrag van basisschoolleerlingen

Verschillende studies hebben aangetoond dat de schoolsluitingen door de coronacrisis een impact hebben gehad op de leerprestaties van Amerikaanse basisschoolleerlingen. Maar welke impact had de coronacrisis op het gedrag van basisschoolleerlingen? In een recent onderzoek bevroegen de onderzoekers Hanno, Fritz, en Jones de ouders van 348 leerlingen in de basisschoolleeftijd. Op 4 momenten in de eerste vijf maanden van 2021 vulden deze ouders een vragenlijst in over het gedrag van hun kinderen. Ouders gaven hun percepties van het gedrag van hun kind in het algemeen (veel beter dan gewoonlijk vs. veel slechter dan gewoonlijk), het aantal keren dat opvallend of onaangepast gedrag voorkwam in de voorbije periode (bv. agressief gedrag of teruggetrokken zijn) en hoe vaak het kind problemen had met het executief functioneren in de voorbije periode. Daarbij vroegen de onderzoekers ook of het kind op het moment van invullen onderwijs op school, online onderwijs of hybride onderwijs volgde.

De resultaten van het onderzoek laten zien dat vrijwel alle deelnemende kinderen overgangen in onderwijsvorm meemaakten (bv. van klassikaal naar online, zie Figuur 1). En dat in de perceptie van de deelnemende ouders het gedrag van hun kinderen in periodes van online onderwijs beduidend problematischer was dan tijdens klassikaal onderwijs (zie Figuur 2).

Figuur 1: Onderwijsvorm per meetmoment.

Figuur 2: Verschillen in kindgedrag.

Hanno, E. C., Fritz, L. S., & Jones, S. M. (2022). School Learning Format and Children’s Behavioral Health During the COVID-19 Pandemic. JAMA Pediatrics. doi:10.1001/jamapediatrics.2021.5698

De impact van de eerste schoolsluiting op taal- en rekenprestaties

Wat was de impact van de eerste schoolsluiting op de taal- en rekenprestaties van leerlingen in groep 5-7? Deze vraag stond centraal in het onderzoek van de Werkplaats Onderwijsonderzoek Utrecht. Het onderzoek laat zien dat de leerachterstanden die leerlingen tijdens de eerste lockdown opliepen fors zijn: gemiddeld meer dan twee maanden voor zowel rekenen als begrijpend lezen. Het onderzoek richtte zich op scholen met een zeer diverse leerlingpopulatie. Het onderzoek vond ook grote verschillen tussen scholen: op scholen waar de populatie voor een groter deel bestond uit leerlingen die een risico lopen op leerachterstanden was de impact van de schoolsluitingen groter.

Het abstract:

School closures due to the COVID-19 pandemic raised concerns about increases in educational inequality. We examined the magnitude of the impact of the first school closure for vulnerable student groups in particular. This study was conducted among 886 Grade 3 - 5 students in the Netherlands in schools serving a high percentage of students from disadvantaged backgrounds. Piecewise growth analyses indicated that the school closures caused discontinuity in students’ achievement growth on national standardized tests and led to an average learning loss of 2.47 months in mathematics and 2.35 in reading comprehension, exceeding the duration of the school closure. Findings suggest that school closures contribute to educational inequality and indicate which students may particularly need additional support to overcome the adverse consequences of the lockdowns.

Schuurman, T. S., Henrichs, L. F., Schuurman, N. F., Polderdijk, S., & Hornstra, L. (2021). Learning Loss in Vulnerable Student Populations After the First Covid-19 School Closure in the Netherlands. Scandinavian Journal of Educational Research. https://doi.org/10.1080/00313831.2021.2006307