Bildnachweis: © European Association for Research on Learning and Instruction

Im Jahr 2019 fand die biennale Konferenz der European Association for Research on Learning and Instruction (EARLI) zuletzt in Präsenz statt, damals quasi „nebenan“ in Aachen. Nach einer pandemiebedingten Online-Ausgabe 2021 hießen uns und mehr als 2.500 weitere Teilnehmer*innen in diesem Sommer nun die Aristoteles Universität und die Universität von Makedonien in Thessaloniki zur bisher größten EARLI-Konferenz willkommen. Unter dem Motto „Education as a Hope in Uncertain Times“ wurde vom 22.-26. August 2023 in der griechischen Sommerhitze intensiv diskutiert, präsentiert und Networking betrieben. Wir waren als Projektteam auch dabei und möchten einige Einblicke in unsere Erlebnisse schildern.

Mit zwei Vorträgen von Thomas und Christoph und einem Posterbeitrag von Philipp war das PERFORM-LA-Team gut auf der Konferenz vertreten. Am frühen Mittwochmorgen berichtete Christoph über die Akzeptanz simulationsbasierter Prüfungsformate durch Lehramtsstudierende auf Basis von Befragungs- und Interviewdaten, bevor Thomas direkt im Anschluss die Pilotstudie seines Performanztests für das Unterrichtsfach Englisch (zur Erfassung von Feedbackkompetenz) vorstellte. Im Rahmen einer Postersession präsentierte Philipp am darauffolgenden Tag die Ergebnisse seiner Pilotstudie eines Performanztests für das bildungswissenschaftliche Studium (zur Erfassung von Beratungskompetenz).

Eine Frage der Validität

Bei insgesamt 2065 Beiträgen in 21 Panels fiel es oft nicht leicht, sich für einzelne (und damit gegen viele andere) Sessions zu entscheiden – geschweige, die Highlights dieser intensiven Woche herauszufiltern. Ein Thema, dass uns jedoch in ganz unterschiedlichen Beiträgen immer wieder begegnete und das auch für unser Projekt eine wichtige Rolle spielt, war die Frage nach der Validität von Test- und Prüfungsinstrumenten. Insbesondere das Symposium „Examining the Validity of Standardized Approaches to Measuring Teaching Quality“ und die Diskussion der vier Beiträge durch Anna-Katharina Praetorius blieben Lea dabei in Erinnerung. Unterschiedliche Perspektiven auf die Validität der Erfassung von Unterrichtsqualität standen in den Beiträgen im Vordergrund: Der Vergleich zwischen Präsenz- und Online-Unterricht (Jaekel et al., 2023), die Validität von Schüler*inneneinschätzungen als Indikator von Unterrichtsqualität (Gisladottir et al., 2023), die Förderung der Beobachtungskompetenz von Lehrkräften bei der Beurteilung von Unterrichtsqualität in Unterrichtsbesuchen sowie Urteilsfehler und -tendenzen in Beobachtungsstudien zur Unterrichtsqualität. Anna-Katharina Praetorius von der Universität Zürich griff in ihrer Diskussion grundsätzliche Fragen zum Thema des Symposiums auf, zum Beispiel nach der Validität von master scorings (= Expert*innenurteilen), und gab uns damit noch etwas „food for thought“ für die restlichen Konferenztage auf den Weg.

Core Practices

Ein weiteres Highlight-Symposium für Thomas war das zu „The Development of Core Practices from a Cross-National Perspective.“ Die Thematik um Core Practices spielt ja auch in unserem Projekt eine große Rolle, und in diesem Symposium war Pam Grossman, die Mitbegründerin dieses Konzepts (vgl. Grossman, 2021), Co-Chair und hat in ein paar einleitenden Worten das Konzept kurz dargestellt. Sie nannte auch gleich mehrere Gründe, warum wir uns auf Core Practices fokussieren sollten: Fehlende Vision für das was wir als „guten Unterricht“ bezeichnen würden, das „Technologiedefizit“ in der Lehrkräftebildung sowie die fehlenden reliablen Messmöglichkeiten. Der letzte Punkt wurde auch von der Diskutantin Tina Seidel aufgeworfen – hoffentlich können wir mit unserem Projekt hier einen Beitrag leisten, Core Practices handlungsnah und möglichst valide messen und prüfen zu können. Es gab vier spannende Vorträge aus verschiedenen Nationen. Im ersten Vortrag von Hannah Westbroek et al. (2023) von der Vrije Universiteit Amsterdam ging es um eine motivationale Perspektive auf Core Practices und wie Lehramtsstudierende zwei verschiedene Kurse bewerten, in denen sie ihren eigenen Lernbedürfnisse nachgehen konnten. Im Beitrag von Kirsti Klette et al. (2023) der Universität Oslo ging es um die Theorie-Praxis-Verzahnung mit Core Practices. Sie haben untersucht, wie der Fokus auf Core Practices im Lernprozess Studierende dabei unterstützen kann z.B. ihren analytischen Blick zu schärfen. Im dritten Teil stellten Kjersti Waege et al. (2023) von der Norwegian University of Science and Technology eine Studie vor, in der es darum ging, inwieweit der Erwerb von Core Practices durch Team Teaching-Komponenten unterstützt werden kann. Der letzte Beitrag war eine deutsch-deutsche Koproduktion der Universitäten Freiburg und Lüneburg von Hadmut Hipp et al. (2023). Sie stellten unter anderem eine Studie vor in der sie untersucht haben, ob eine Reflektion über oder Ausüben einer Core Practice (am Beispiel des Ansatzes des Reciprocal Reading, Palinscar & Brown, 1984) in halbstandardisierten Rollenspielen gewinnbringender für Studierende sind.

Bildnachweis: © Philipp Wotschel | Das PERFORM-LA Team am ersten Konferenztag (v. l. Philipp, Christoph, Lea, Thomas)

Simulationen in der Lehrkräftebildung in Israel

Philipps Highlights standen ganz im Zeichen von Untersuchungen aus dem HaLev – The Center for Simulation in Education der Bar llan Universität in Israel. Das Zentrum entwickelte das erste simulationsbasierte Lernprogramm für die Lehrkräfteausbildung in Israel und bietet umfassende Kurse und Workshops an. Zudem unterstreicht die Finanzierung durch das Israelische Bildungsministerium, dass die Institutionalisierung eines solchen Zentrums möglich ist und zeigt somit auch für unser eigenes Projekt weitere Perspektiven auf. Vor diesem Hintergrund präsentierte Ronen Kasperski unter dem Titel „The differential effect of simulations on SEL among preservice, beginner, and experienced educators“ eine Studie, zur Untersuchung der Wirkung von klinischen Simulationen auf die Entwicklung sozial-emotionaler Lernkompetenzen bei Lehrkräften. Die Ergebnisse deuten auf einen Kompetenzzuwachs bei allen Gruppen hin, während sich Unterschiede bezüglich der einzelnen Berufsphasen abzeichnen. Lehramtsstudierende profitierten am meisten, gefolgt von Berufseinsteigern und erfahrenen Lehrkräften. Ähnliches konnte auch Shira Iluz mit ihrer Posterpräsenation unter dem Titel, „Simulation based learning for facilitating understanding of others’ emotions in preservice teachers“, zeigen. Sie betonte, dass die Verwendung von simulationsbasiertem Lernen, zur Förderung sozial-emotionaler Fähigkeiten von Lehrkräften, einen vielversprechenden Bestandteil der Lehrkräftebildung darstellt, bisher jedoch nur wenige Forschungsarbeiten existierten, die eine entsprechende Wirksamkeit nachwiesen. In diesem Zusammenhang stellte sie mit ihrer Studie ein validiertes Testinstrument vor, das als Proof-of-Concept-Nachweis belegt, dass schon ein einziger Tag Simulationstraining bei Lehramtsstudierenden helfen kann, ihr emotionales Wissen im Sinne einer Perspektivübernahme zu erweitern.

Und sonst so?

Neben Beiträgen, die Themen adressieren, mit denen wir uns auch in unserer eigenen Forschungsarbeit beschäftigen, bot die EARLI auch viele Vorträge in andere Bereiche der empirischen Bildungsforschung. Christoph ist bspw. der Vortrag von Christian Kraler et al. (2023) von der Universität Innsbruck im Gedächtnis geblieben, der von Sabrina Bacher präsentiert wurde. Darin berichtete sie von einer Befragung von N=133 angehender Lehrkräfte im Masterstudium, in denen diese nach ihren future visions gefragt wurden. Damit sind Einstellungen und Orientierungen bezogen auf eine (wünschenswerte oder befürchtete) Zukunft gemeint, die auch schon einen Einfluss auf das Handeln in der Gegenwart haben können. Die inhaltsanalytische Auswertung von drei langen offenen Antworten ergab, dass 51% der Studierenden eher neutral, 30% positiv und 19% pessimistisch auf die Welt im Jahr 2040 blicken. Dabei ließen sich ihre Antworten auf sechs Hauptkategorien beziehen: Digitalisierung, Gesellschaft, Wirtschaft, Nachhaltigkeit & Klima, formale Bildung und Konflikte & Krisen. Es ergab sich also ein sehr heterogenes Bild der future visions. Welchen Einfluss diese nun genau auf das Studium und auch das schulische Handeln in der Gegenwart haben, ist Gegenstand weiterer Schritte der Kolleg*innen aus Österreich. Ebenfalls interessant war der Beitrag „Don’t we need two control groups in large Randomized Controlled Trials?“ von Sarah Pariser & André Tricot (2023) von der Université Paris 8 bzw. Université Paul Valéry in Montpellier. Darin beschäftigten sie sich mit der Frage, warum viele in kontrollierten Studien beobachtete Effekte von Lehr-Lern-Innovationen für die Schule verschwinden, wenn sie in größerem Maßstab im Bildungssystem implementiert werden. Sie vermuteten, dass dies daran liegen könnte, dass auch die Lehrkräfte in Kontrollgruppen dieser Studien die typischen Voraussetzungen im Bildungssystem abbilden und daher schon im Studiendesign verschiedene Gruppen berücksichtigt werden sollten, um die Wirkung im Hinblick auf eine mögliche Implementation in die Praxis abzuschätzen. Sie schlugen daher vor, in randomisierten Interventionsstudien zwei Kontrollgruppen zu bilden: eine Gruppe aus (wie üblich) freiwillig teilnehmenden Lehrkräften und eine Gruppe aus unfreiwillig teilnehmenden Lehrkräften. An einer Beispieluntersuchung mit 43 Klassen konnten sie beobachten, dass sich zwischen den Klassen der beiden Arten von Kontrollgruppen tatsächlich unterschiedliche Ergebnisse ergaben, die darauf hinweisen, dass sich Verzerrungen in typischen Interventionsstudien für Lehr-Innovationen in der Schule ergeben. Als Physikdidaktiker freute sich Christoph aber auch über den Vortrag von Benedikt Gottschlich et al. (2023) von der Universität Tübingen, der von einer aufwändigen Interventionsstudie zum kontextorientierten Physikunterricht unter Feldbedingungen berichtete, in der sich aber entgegen der Erwartung kein Vorteil für einen Elektrizitätsunterricht mit Kontexten im Vergleich zu einem Unterricht ohne Kontexte zeigte. Gründe hierfür werden von den Kolleg*innen noch analysiert (ob eine zweite Kontrollgruppe sinnvoll wäre, ist auch hier eine interessante Frage 😉 ).

Wer arbeitet…

Als abschließendes Highlight der EARLI 2023 darf natürlich auch der Gesellschaftsabend nicht unerwähnt bleiben: Vor spektakulärer Kulisse luden die Organisator*innen am Freitagabend in den „Ippikos Members Club“ zu tollem Essen und Kulturprogramm in Form von traditionellen Musik- und Tanzbeiträgen und der Professor*innen-Rockband der gastgebenden Universitäten ein (vielleicht auch eine Idee für die UPB…?). Für uns ein großartiger Abschluss dieser sehr intensiven Konferenzwoche!

Bildnachweis: © Lea Grotegut | Conference Dinner im Ippikos Members Club

Wir bedanken uns herzlich für die tolle Organisation und Umsetzung dieser riesigen EARLI 2023 (darunter die Konferenz-App, Verpflegung, detaillierte Lagepläne und natürlich die Helfer*innen vor Ort!) und ganz besonders für die zahlreichen Vorträge, Anregungen und Diskussionen. Bis zum nächsten Mal!

Vorträge:

• Daltoé, T., Maier, J., Ruth-Herbein, E., Goellner, R., Trautwein, U. & Fauth, B. C. (2023, 23. August). Classroom Observation Ratings of Teaching Quality – An Investigation of a Teacher Training. 20. Biennale Konferenz der European Association for Research on Learning and Instruction (EARLI), Thessaloniki, Griechenland.
• Gisladottir, B., Tengberg, M., Roe, A. & Christensen, A. S. (2023, 23. August). Student Perceptions as Indicator of Teaching Quality: A Report from Nordic Classrooms. 20. Biennale Konferenz der European Association for Research on Learning and Instruction (EARLI), Thessaloniki, Griechenland.
• Gottschlich, B., Burge, J.-P., Wilhelm, T., Dopatka, L., Spatz, V., Schubatzky, T.; Haagen-Schützenhöfer, C., Invanjek, L., & Hopf, M. (2023, 25. August). Does using real-world contexts in science teaching improve learning? A field study on electricity. 20. Biennale Konferenz der European Association for Research on Learning and Instruction (EARLI), Thessaloniki, Griechenland.
• Grossman, P. (Ed.). (2021). Teaching core practices in teacher education. Harvard Education Press.
• Hipp, H., Holstein, A., Nückles, M., & Kleinknecht, M. (2023, 24. August). How Can the Acquisition of Core Practices be optimally fostered? A Research Agenda and First Results. 20. Biennale Konferenz der European Association for Research on Learning and Instruction (EARLI), Thessaloniki, Griechenland.
• Iluz, S., Yablon, Y. B. (2023, 24. August). Simulation based learning for facilitating understanding of others’ emotions in preservice teachers. 20. Biennale Konferenz der European Association for Research on Learning and Instruction (EARLI), Thessaloniki, Griechenland.
• Jaekel, A.-K. & Goellner, R. (2023, 23. August). Students’ Perceptions of Teaching Quality in In-person Classrooms and Distance Education. 20. Biennale Konferenz der European Association for Research on Learning and Instruction (EARLI), Thessaloniki, Griechenland.
• Kasperski, R., Hemi, M. (2023, 21. August). The differential effect of simulations on SEL among preservice, beginner, and experienced educators. 20. Biennale Konferenz der European Association for Research on Learning and Instruction (EARLI), Thessaloniki, Griechenland.
• Klette, K., Staal Jenset, I. & Brataas, G. (2023, 24. August). Using Core Practices to Improve Connections between Theory and Practice in Teacher Education. 20. Biennale Konferenz der European Association for Research on Learning and Instruction (EARLI), Thessaloniki, Griechenland.
• Kraler, C., Bacher, S., & Schreiner, C. (2023, 25. August). Future Vision of Teacher Education Students. 20. Biennale Konferenz der European Association for Research on Learning and Instruction (EARLI), Thessaloniki, Griechenland.
• Palinscar, A. S., & Brown, A. L. (1984). Reciprocal teaching of comprehension-fostering and comprehension-monitoring activities. Cognition and Instruction, 1(2), 117-175. (Online)
• Pariser, S., & Tricot, A. (2023, 25. August). Don’t we need two control groups in large Randomized Controlled Trials?. 20. Biennale Konferenz der European Association for Research on Learning and Instruction (EARLI), Thessaloniki, Griechenland.
• Waege, K., Fauskanger, J. & Mosvold, R. (2023, 24. August). Supporting teachers’ learning through co-planning, rehearsing and co-enacting instruction. 20. Biennale Konferenz der European Association for Research on Learning and Instruction (EARLI), Thessaloniki, Griechenland.
• Westbroek, H., Kaal, A. & Donszelmann,S. (2023, 24. August). A motivational perspective on learning core practices: the case of a Dutch teacher education program. 20. Biennale Konferenz der European Association for Research on Learning and Instruction (EARLI), Thessaloniki, Griechenland.
• White, M. (2023, 23. August). Evaluating the Robustness of Observational Studies’ Results to Rater Error with a Linking Data Set. 20. Biennale Konferenz der European Association for Research on Learning and Instruction (EARLI), Thessaloniki, Griechenland.