„Evidenzbasiert“ vs. „Forschungsbasiert“: Die Unterschiede verstehen

Wenn wir Ressourcen, Programme oder Bewertungen prüfen, stoßen wir oft auf Begriffe wie „evidenzbasiert“ oder „forschungsbasiert“. Jeder dieser Begriffe sagt etwas über die Ressourcen aus, die sie beschreiben, und über die Beweise, die sie unterstützen. Wenn wir die Bedeutung der einzelnen Begriffe verstehen, können wir bei der Auswahl und Umsetzung von Ressourcen fundierte Entscheidungen treffen.

Was bedeuten diese Begriffe also genau?

Typischerweise beziehen sich die Begriffe „evidenzbasierte Praktiken“ oder „evidenzbasierte Programme“ auf einzelne Praktiken (z. B. einzelne Unterrichtsstunden oder klasseninterne Aktivitäten) oder Programme (z. B. ganzjährige Lehrpläne), die auf der Grundlage wissenschaftlicher Erkenntnisse als wirksam angesehen werden. Um ein Programm oder eine Praxis als „evidenzbasiert“ zu bezeichnen, untersuchen Forscher in der Regel die Auswirkungen der Ressource(n) in einem kontrollierten Umfeld – beispielsweise können sie die Unterschiede im Kompetenzzuwachs zwischen Schülern untersuchen, deren Lehrkräfte die Ressourcen verwendet haben, und Schülern, deren Lehrkräfte dies nicht getan haben. Wenn ausreichende Forschungsergebnisse darauf hindeuten, dass das Programm oder die Praxis wirksam ist, kann es als „evidenzbasiert“ bezeichnet werden.

Evidenzbasierte (oder forschungsbasierte) Praktiken sind Praktiken, die auf der Grundlage der besten verfügbaren Forschungsergebnisse auf dem Gebiet entwickelt wurden. Das bedeutet, dass die Nutzer darauf vertrauen können, dass die Strategien und Aktivitäten, die in dem Programm oder der Praxis enthalten sind, eine solide wissenschaftliche Grundlage für ihre Anwendung haben. Im Gegensatz zu evidenzbasierten Praktiken oder Programmen wurden forschungsbasierte Praktiken nicht in einem kontrollierten Rahmen erforscht.

Was ist mit der Bewertung?

Begriffe wie „evidenzbasiert“ und „forschungsbasiert“ werden häufig verwendet, um Interventionsmaßnahmen wie Strategien oder Lehrpläne zum Aufbau von Fähigkeiten in bestimmten Bereichen zu beschreiben. Aber auch der Prozess der Kompetenzmessung mit Bewertungsinstrumenten kann evidenzbasiert sein. Ein Beurteilungsprozess kann als evidenzbasiert bezeichnet werden, wenn:

• Die Auswahl der Fähigkeiten, die durch die Beurteilung gemessen werden sollen, durch die Forschung begründet wurde;
• die Beurteilungsmethode und die verwendeten Messinstrumente durch wissenschaftliche Forschung und Theorie begründet sind und die relevanten Standards für ihre beabsichtigten Anwendungen erfüllen; und
• die Art und Weise, wie die Beurteilung durchgeführt und interpretiert wird, durch die Forschung gestützt wird.

Die Verwendung einer evidenzbasierten Bewertung zur Anleitung oder Bewertung einer Intervention gibt uns die Gewissheit, dass der Prozess für unseren Zweck gut geeignet ist, auf wissenschaftlicher Theorie beruht und für unsere Schüler wirksam sein wird.

Welche Standards gibt es für Bildungsbewertungen?

Der Prozess der evidenzbasierten Bewertung beinhaltet die Verwendung eines Messinstruments, das „die relevanten Standards für die beabsichtigten Anwendungen erfüllt“. Was sind die relevanten Standards, und wie können wir wissen, ob ein Instrument sie erfüllt?

Einige grundlegende Standards für pädagogische Beurteilungen, die von Experten in den Bereichen Pädagogik, Psychologie und Beurteilung zusammengestellt wurden, umfassen:

1. Gültigkeit für einen beabsichtigten Zweck: Das Instrument sollte untersucht worden sein, um festzustellen, dass es gültig oder geeignet ist für die Entscheidungen, die wir auf der Grundlage seiner Ergebnisse treffen. Genauso wenig wie wir ein Mathe-Quiz verwenden würden, um festzustellen, ob ein Schüler zusätzliche Übungen zum Leseverständnis benötigt, sollten wir eine Bewertung nur für Zwecke verwenden, die die Forschung als „valide“ eingestuft hat.
2. Zuverlässigkeit: Das Instrument sollte untersucht worden sein, um sicherzustellen, dass es die Erwartungen an die Zuverlässigkeit oder Konsistenz erfüllt. So könnte beispielsweise untersucht werden, ob das Instrument ähnliche Ergebnisse liefert, wenn es zweimal innerhalb kurzer Zeit ausgefüllt wird. Die Zuverlässigkeit kann je nach Messinstrument mit verschiedenen Methoden untersucht werden.
3. Fairness: Das Instrument sollte untersucht worden sein, um festzustellen, wie fair oder unvoreingenommen es gegenüber verschiedenen Untergruppen von Schülern ist, z. B. Untergruppen auf der Grundlage von Rasse, ethnischer Zugehörigkeit oder kulturellem Hintergrund. Die Verwendung eines voreingenommenen Messinstruments kann zu einer voreingenommenen Entscheidungsfindung führen und unsere Fähigkeit gefährden, gerechte Leistungen zu erbringen.

Spezifische Standards in jedem dieser und anderer Bereiche sind im Handbuch „Standards for Educational and Psychological Testing“ (2014) zusammengestellt, das von der American Educational Research Association, der American Psychological Association und dem National Council on Measurement in Education verfasst wurde. Dieses Handbuch kann ein nützlicher Begleiter sein, wenn es darum geht, die spezifische Evidenz hinter Messinstrumenten zu überprüfen.

Schlussfolgerung

Begriffe wie „evidenzbasiert“ oder „forschungsbasiert“ sind nützliche Indikatoren für die Art der Evidenz hinter Programmen, Praktiken oder Bewertungen – sie können uns jedoch nur so viel über die spezifische Forschung hinter jedem Instrument sagen. In Situationen, in denen mehr Informationen über die Evidenzbasis einer Ressource von Vorteil wären, kann es hilfreich sein, Forschungszusammenfassungen oder Artikel vom Herausgeber der Ressource zur weiteren Überprüfung anzufordern.

Weiterführende Literatur

• Child Welfare Information Gateway. Evidence-Based Practice Definitions and Glossary.
• Hunsley, J., & Mash, E. J. (2007). Evidence-based assessment. Rev. Clin. Psychol., 3, 29-51.
• Joint Committee on the Standards for Educational and Psychological Testing of the American Educational Research Association, the American Psychological Association, and the National Council on Measurement in Education (2014). Standards for Educational and Psychological Testing (Standards für pädagogische und psychologische Tests). The American Educational Research Association, the American Psychological Association, and the National Council on Measurement in Education.
• S. Department of Education (2016). Using Evidence to Strengthen Education Investments.