Forschungsmethoden in der Fremdsprachendidaktik. Группа авторов
der Beteiligten zu entwickeln.
Testforschung: Hier geht es sowohl um die Entwicklung, Validierung und Implementierung standardisierter Sprachtests als auch um unterrichtsbezogene Verfahren formativer und summativer Lernstandsermittlung, ihre Entwicklung und Erprobung.
Zweitsprachenerwerbsforschung: Aus diesem wesentlich weiteren Forschungsfeld sind für die fremdsprachendidaktische Forschung solche Arbeiten relevant, die sich darum bemühen, Prozesse ungesteuerten wie gesteuerten Fremdsprachenerwerbs zu beschreiben, Erwerbssequenzen zu bestimmen und Zusammenhänge zwischen Lehren und Erwerb aufzudecken. Dabei finden u.a. das Wechselverhältnis von Erst- und Zweitsprachen sowie weiterer Sprachen Berücksichtigung, soziale Bedingungen des Erwerbs oder die besonderen Merkmale der Erwerbssituation.
Betrachtet man die ausgewählten Referenzarbeiten, so ist ein Großteil der Arbeiten in mindestens zwei ForschungsfeldForschungsfeldern angesiedelt: die Referenzarbeiten von Biebricher (2008) und Marx (2005) in der Lern- und Kompetenzforschung, die von Ehrenreich (2004) in der Begegnungs- und Professionsforschung, die von Schmidt (2007) in der Materialien- und Lernforschung, die von Schart (2003) in der Kompetenz- und Professionsforschung, die von Kienberger (2020) in der Diagnostik und Lernforschung; die Arbeit von Hochstetter (2011) betrifft die Diagnostik, die Kompetenz- und die Professionsforschung, die Untersuchung von Doff (2002) die Felder der Lernforschung, Schulforschung und Professionsforschung. Die Fokussierung dieser in mehreren Feldern angesiedelten Arbeiten erfolgt jeweils durch das Thema und die Forschungsfrage. Im Gegenzug berücksichtigen die Studien, die primär in nur einem Forschungsfeld verortet sind wie die Referenzarbeiten von Arras (2007) (Testforschung), Özkul (2011) und Gödecke (2020) (Professionsforschung), Schwab (2009) (Interaktionsforschung), von Schmenk (2002) und Tassinari (2010) (Konzeptforschung) sowie Bracker (2015) (Interaktionsforschung) die Faktorenkomplexion z.B. bei der Einordnung bzw. Gewichtung der Ergebnisse oder der Rückbindung an den Kontext bzw. eine Theorie.
Möglicherweise ist die FaktorenkomplexionFaktorenkomplexion auch ein Grund dafür, dass in der Fremdsprachendidaktik der Theorie-Empirie-Bezug in der Form der Überprüfung von zuvor aufgestellten Modellen wenig verbreitet ist. Der Vielfalt der Lehr-/Lernsituationen und der weiten Verbreitung von Einzelforschung könnte wiederum geschuldet sein, dass noch immer vergleichsweise wenige Studien auf repräsentative Ergebnisse abzielen. Dafür konnten in den letzten 20 Jahren durch zahlreiche Studien mit qualitativen Forschungsansätzen der Gegenstandsbereich des Lehrens und Lernens fremder Sprachen besser exploriert und viele Einzelfaktoren und -aspekte in ihrer Vielschichtigkeit und Komplexität erforscht und dargestellt werden.
2.3 Welche Gütekriterien gelten für fremdsprachendidaktische Forschung?
Wissenschaftliche Forschung unterscheidet sich von der anfangs erwähnten Alltagsbeobachtung nicht zuletzt durch die Einhaltung bestimmter forschungsmethodischer Standards, den sog. Gütekriterien. Nutzt man die Gütekriterien als Prinzipien für Planung, Durchführung und Auswertung einer Forschungsarbeit, so helfen sie dabei, die Qualität zu sichern; nutzt man die Gütekriterien als Bewertungskriterien, ermöglichen sie, im Nachhinein die Qualität und die Reichweite der gewonnenen Ergebnisse einer Forschungsarbeit zu beurteilen.
Auffällig ist, dass Gütekriterien bislang nahezu ausschließlich im Kontext empirischer Forschung diskutiert werden. Auffällig ist ebenfalls, dass sich die Diskussion über Gütekriterien in der empirischen Forschung nach wie vor zumeist an der sozialwissenschaftlichen, psychologischen und erziehungswissenschaftlichen Forschung orientiert. Erst seit der Etablierung der GegenstandsangemessenheitGegenstandsangemessenheit als zentralem Gütekriterium ist zu beobachten, dass in fremdsprachendidaktischen Arbeiten bei der Präsentation und Reflexion der Forschungsmethodik offensiver anhand fremdsprachenforschungsspezifischer Charakteristika argumentiert wird. Trotzdem ist der Stand der Diskussion aus den genannten Disziplinen nach wie vor wegweisend. Die im Folgenden genannten Kriterien gelten für jede Forschungsarbeit, sie werden mit zunehmender Größe und Bedeutung der Forschungsarbeiten jedoch differenzierter und strenger gehandhabt (s. auch Kap. 3.3, Stufen der Empirie).
Grundsätzlich unterscheiden sich die Gütekriterien in quantitativen und qualitativen Forschungsansätzen (vgl. Kap. 3.3). Als zentrale Kriterien quantitativer Forschung (vgl. im Folgenden Edmondson/House 2010: 39–40, Grotjahn 2003, Schmelter 2014) gelten Objektivität, Reliabilität und Validität. Unter ObjektivitätObjektivität versteht man die Intersubjektivität einer Methode, d. h. die Unabhängigkeit der Ergebnisse von den Forscher*innen, die die Untersuchung durchgeführt haben. Dabei unterscheidet man anhand der einzelnen Forschungsschritte Durchführungs-, Auswertungs- und Interpretationsobjektivität. Detaillierte Vorschriften sollen dafür sorgen, dass sowohl der Einfluss der Untersuchung auf die Untersuchungsteilnehmer*innen als auch der Einfluss der Forscher*innen auf die Untersuchung kontrolliert und möglichst geringgehalten wird. Eng mit dem Kriterium der Objektivität zusammen hängt das Kriterium der Zuverlässigkeit (ReliabilitätReliabilität). Es misst die Genauigkeit des Datenerhebungs- bzw. Messvorgangs und gibt den Grad der Verlässlichkeit der Ergebnisse an. Für ein hochreliables Ergebnis müssen bei einer Wiederholung der Untersuchung unter gleichen Bedingungen die gleichen Ergebnisse erzielt werden (Replizierbarkeit der Messergebnisse). Reliabilität umfasst drei Aspekte: die Stabilität (die Übereinstimmung der Messergebnisse zu unterschiedlichen Zeitpunkten), die Konsistenz (das Maß, mit dem die zu einem Merkmal gehörenden Items dasselbe Merkmal messen) und die Äquivalenz (die Gleichwertigkeit von Messungen, wenn z.B. durch das Wiederholen eines Tests ein Lerneffekt eintritt).
Objektivität und Reliabilität der Methoden bestimmen die ValiditätValidität, d. h. die Gültigkeit einer Variable, eines Messverfahrens bzw. der erzielten Ergebnisse. Sie bestimmt das Maß ihrer Übereinstimmung mit dem untersuchten Realitätsausschnitt. Man unterscheidet in Bezug auf Untersuchungsverfahren zum einen innere bzw. interne Validität (das Maß, in dem ein Forschungsverfahren tatsächlich das erfasst oder misst, was es erfassen oder messen soll, und nicht z.B. durch andere Einflüsse wie z.B. Störvariablen oder systematische Messfehler beeinträchtigt wird). Hierbei unterscheidet man insbesondere die Inhaltsvalidität (die Eignung eines Verfahrens für die Erfassung bzw. Messung des Konstruktes), die Kriteriumsvalidität (die Übereinstimmung der gemessenen Ergebnisse mit einem empirischen Kriterium, z.B. den Ergebnissen, die mit einem anderen Verfahren gewonnen wurden) und die Konstruktvalidität (die Zuverlässigkeit der Ergebnisse bezüglich des gesamten untersuchten Konstruktes und nicht nur einzelner Aspekte des Konstruktes).
Zum anderen bestimmt man die externe ValiditätValidität, d. h. die Möglichkeit der Übertragung der Ergebnisse über die jeweilige Stichprobe und Situation der konkreten Untersuchung hinaus (Möglichkeit der Verallgemeinerung, Repräsentativität). Grundsätzlich ist eine hohe Reliabilität eine Voraussetzung für hohe Validität, allerdings kann sich eine zu hohe Reliabilität negativ auf die Validität auswirken, weil dann nur sehr enge Konstrukte erfasst werden können.
Während Studien mit einem quantitativen Forschungsansatz das Forschungsfeld und die Forschungsgegenstände aus einer distanzierten Außenperspektive betrachten, setzt sich qualitative Forschung das Ziel, die Untersuchungsgegenstände soweit es geht aus der Innenperspektive der Beteiligten zu erforschen (s. Abschnitt 1 und Kap. 3.3). Diese Forschung verlangt daher andere Gütekriterien (vgl. im Folgenden Flick 1995 und 2020; Schmelter 2014; Steinke 1999). Ein Teil dieser Kriterien stellt eine Um- oder Neudefinition der aufgeführten Gütekriterien quantitativer Forschung dar, dazu kommen spezifische Kriterien qualitativer Forschung.
Das Kriterium der Objektivität ist nicht vereinbar mit der Subjektivität der Forschungsbeteiligten, der Notwendigkeit ihrer Interaktion und der Anwendung interpretativer Auswertungsverfahren; zudem widerspricht es zentralen Charakteristika qualitativer Forschung wie z.B. den Prinzipien der Gegenstandsentfaltung, der Offenheit, der Alltagsorientierung und der Kontextualität. Als Äquivalenzkriterium führt Steinke (1999: 143) das Kriterium der Intersubjektiven Nachvollziehbarkeitintersubjektive Nachvollziehbarkeit ein, für das die genaue Dokumentation und Reflexion der Forschungsentscheidungen und der einzelnen Forschungsschritte Voraussetzung ist. Auch das Kriterium der Reliabilität ist nicht direkt auf qualitative Forschung übertragbar, u.a. weil weder eine Standardisierung der Erhebungssituation noch eine vorgängige exakte Bestimmung und Operationalisierung des Untersuchungsgegenstandes