Читать книгу Forschungsmethoden in der Fremdsprachendidaktik - Группа авторов - Страница 13
2.3 Welche Gütekriterien gelten für fremdsprachendidaktische Forschung?
ОглавлениеWissenschaftliche Forschung unterscheidet sich von der anfangs erwähnten Alltagsbeobachtung nicht zuletzt durch die Einhaltung bestimmter forschungsmethodischer Standards, den sog. Gütekriterien. Nutzt man die Gütekriterien als Prinzipien für Planung, Durchführung und Auswertung einer Forschungsarbeit, so helfen sie dabei, die Qualität zu sichern; nutzt man die Gütekriterien als Bewertungskriterien, ermöglichen sie, im Nachhinein die Qualität und die Reichweite der gewonnenen Ergebnisse einer Forschungsarbeit zu beurteilen.
Auffällig ist, dass Gütekriterien bislang nahezu ausschließlich im Kontext empirischer Forschung diskutiert werden. Auffällig ist ebenfalls, dass sich die Diskussion über Gütekriterien in der empirischen Forschung nach wie vor zumeist an der sozialwissenschaftlichen, psychologischen und erziehungswissenschaftlichen Forschung orientiert. Erst seit der Etablierung der GegenstandsangemessenheitGegenstandsangemessenheit als zentralem Gütekriterium ist zu beobachten, dass in fremdsprachendidaktischen Arbeiten bei der Präsentation und Reflexion der Forschungsmethodik offensiver anhand fremdsprachenforschungsspezifischer Charakteristika argumentiert wird. Trotzdem ist der Stand der Diskussion aus den genannten Disziplinen nach wie vor wegweisend. Die im Folgenden genannten Kriterien gelten für jede Forschungsarbeit, sie werden mit zunehmender Größe und Bedeutung der Forschungsarbeiten jedoch differenzierter und strenger gehandhabt (s. auch Kap. 3.3, Stufen der Empirie).
Grundsätzlich unterscheiden sich die Gütekriterien in quantitativen und qualitativen Forschungsansätzen (vgl. Kap. 3.3). Als zentrale Kriterien quantitativer Forschung (vgl. im Folgenden Edmondson/House 2010: 39–40, Grotjahn 2003, Schmelter 2014) gelten Objektivität, Reliabilität und Validität. Unter ObjektivitätObjektivität versteht man die Intersubjektivität einer Methode, d. h. die Unabhängigkeit der Ergebnisse von den Forscher*innen, die die Untersuchung durchgeführt haben. Dabei unterscheidet man anhand der einzelnen Forschungsschritte Durchführungs-, Auswertungs- und Interpretationsobjektivität. Detaillierte Vorschriften sollen dafür sorgen, dass sowohl der Einfluss der Untersuchung auf die Untersuchungsteilnehmer*innen als auch der Einfluss der Forscher*innen auf die Untersuchung kontrolliert und möglichst geringgehalten wird. Eng mit dem Kriterium der Objektivität zusammen hängt das Kriterium der Zuverlässigkeit (ReliabilitätReliabilität). Es misst die Genauigkeit des Datenerhebungs- bzw. Messvorgangs und gibt den Grad der Verlässlichkeit der Ergebnisse an. Für ein hochreliables Ergebnis müssen bei einer Wiederholung der Untersuchung unter gleichen Bedingungen die gleichen Ergebnisse erzielt werden (Replizierbarkeit der Messergebnisse). Reliabilität umfasst drei Aspekte: die Stabilität (die Übereinstimmung der Messergebnisse zu unterschiedlichen Zeitpunkten), die Konsistenz (das Maß, mit dem die zu einem Merkmal gehörenden Items dasselbe Merkmal messen) und die Äquivalenz (die Gleichwertigkeit von Messungen, wenn z.B. durch das Wiederholen eines Tests ein Lerneffekt eintritt).
Objektivität und Reliabilität der Methoden bestimmen die ValiditätValidität, d. h. die Gültigkeit einer Variable, eines Messverfahrens bzw. der erzielten Ergebnisse. Sie bestimmt das Maß ihrer Übereinstimmung mit dem untersuchten Realitätsausschnitt. Man unterscheidet in Bezug auf Untersuchungsverfahren zum einen innere bzw. interne Validität (das Maß, in dem ein Forschungsverfahren tatsächlich das erfasst oder misst, was es erfassen oder messen soll, und nicht z.B. durch andere Einflüsse wie z.B. Störvariablen oder systematische Messfehler beeinträchtigt wird). Hierbei unterscheidet man insbesondere die Inhaltsvalidität (die Eignung eines Verfahrens für die Erfassung bzw. Messung des Konstruktes), die Kriteriumsvalidität (die Übereinstimmung der gemessenen Ergebnisse mit einem empirischen Kriterium, z.B. den Ergebnissen, die mit einem anderen Verfahren gewonnen wurden) und die Konstruktvalidität (die Zuverlässigkeit der Ergebnisse bezüglich des gesamten untersuchten Konstruktes und nicht nur einzelner Aspekte des Konstruktes).
Zum anderen bestimmt man die externe ValiditätValidität, d. h. die Möglichkeit der Übertragung der Ergebnisse über die jeweilige Stichprobe und Situation der konkreten Untersuchung hinaus (Möglichkeit der Verallgemeinerung, Repräsentativität). Grundsätzlich ist eine hohe Reliabilität eine Voraussetzung für hohe Validität, allerdings kann sich eine zu hohe Reliabilität negativ auf die Validität auswirken, weil dann nur sehr enge Konstrukte erfasst werden können.
Während Studien mit einem quantitativen Forschungsansatz das Forschungsfeld und die Forschungsgegenstände aus einer distanzierten Außenperspektive betrachten, setzt sich qualitative Forschung das Ziel, die Untersuchungsgegenstände soweit es geht aus der Innenperspektive der Beteiligten zu erforschen (s. Abschnitt 1 und Kap. 3.3). Diese Forschung verlangt daher andere Gütekriterien (vgl. im Folgenden Flick 1995 und 2020; Schmelter 2014; Steinke 1999). Ein Teil dieser Kriterien stellt eine Um- oder Neudefinition der aufgeführten Gütekriterien quantitativer Forschung dar, dazu kommen spezifische Kriterien qualitativer Forschung.
Das Kriterium der Objektivität ist nicht vereinbar mit der Subjektivität der Forschungsbeteiligten, der Notwendigkeit ihrer Interaktion und der Anwendung interpretativer Auswertungsverfahren; zudem widerspricht es zentralen Charakteristika qualitativer Forschung wie z.B. den Prinzipien der Gegenstandsentfaltung, der Offenheit, der Alltagsorientierung und der Kontextualität. Als Äquivalenzkriterium führt Steinke (1999: 143) das Kriterium der Intersubjektiven Nachvollziehbarkeitintersubjektive Nachvollziehbarkeit ein, für das die genaue Dokumentation und Reflexion der Forschungsentscheidungen und der einzelnen Forschungsschritte Voraussetzung ist. Auch das Kriterium der Reliabilität ist nicht direkt auf qualitative Forschung übertragbar, u.a. weil weder eine Standardisierung der Erhebungssituation noch eine vorgängige exakte Bestimmung und Operationalisierung des Untersuchungsgegenstandes möglich bzw. sinnvoll sind, auch ist das Untersuchungsphänomen in den meisten Fällen nicht ausreichend stabil. Stattdessen schlägt Flick (1995: 242) die Prüfung der Verlässlichkeit von Daten und Vorgehensweisen vor, für die u.a. die konsequente Dokumentation des Forschungsprozesses notwendig ist.
Daneben werden auch Verfahren der Reliabilitätsprüfung aus quantitativen Forschungsansätzen auf qualitative Designs übertragen, wenn z.B. zwei Forscher*innen die gleichen Texte kodieren und ihre unterschiedlichen Deutungen diskutieren (Inter-Coder-Reliabilität).
Das Kriterium der ValiditätValidität wird für qualitative Forschungsansätze dagegen teilweise übernommen und in Bezug auf den Auswertungs- und Interpretationsprozess hin erweitert. Validierung wird verstanden als – zumeist kommunikativer – Prozess, in dem das Zustandekommen der Daten, die Darstellung der Phänomene und die daraus abgeleiteten Schlüsse auf systematische Verzerrungen oder Täuschungen hin untersucht werden (Flick 1995: 244–245). Die zentrale Frage lautet, „inwieweit die Konstruktionen des Forschers in den Konstruktionen derjenigen, die er untersucht hat, begründet sind (…) und inwieweit für andere diese Begründungen nachvollziehbar sind“ (Flick 1995: 244). Ein Verfahren der Validitätsprüfung ist die Triangulation (s. Kap. 4.4), die jedoch nicht primär auf die Bestätigung der Ergebnisse und damit auf die Gewinnung eines einheitlichen Gesamtbildes abzielt, sondern auf ergänzende und vertiefende Perspektiven.
Neben den drei genannten gelten als weitere wichtige Kriterien qualitativer Forschung Offenheit (gegenüber dem Forschungsfeld und gegenüber unerwarteten Ergebnissen), Flexibilität (angesichts gewachsener Erkenntnisse oder als Reaktion auf Unerwartetes), die Darlegung des Vorverständnisses, die Reflexion der Rolle der Forscher*in, die Indikation des Forschungsprozesses und der Bewertungskriterien (d. h. die Prüfung, ob die getroffenen methodischen Entscheidungen angemessen gewählt worden waren) sowie die empirische Verankerung der Theoriebildung (die Theoriebildung erfolgt dicht an den Daten). Obwohl mit qualitativen Untersuchungen keine Generalisierung angestrebt werden kann, ist zu prüfen, wie weit die gewonnenen Ergebnisse über den Untersuchungskontext hinaus GültigkeitGültigkeit beanspruchen können (Kriterium der Limitation bzw. Reichweite). Im Unterschied zu den Gütekriterien in quantitativen Forschungsansätzen zielen die Kriterien in qualitativen Forschungsansätzen weniger auf Kontrolle, sondern auf Vertrauenswürdigkeit, Glaubwürdigkeit und Verlässlichkeit.
Wichtige Gütekriterien für beide Ansätze sind die Offenlegung des Gegenstandsverständnisses (es bildet die Grundlage für die Beurteilung der Angemessenheit des gewählten Ansatzes und der eingesetzten Methoden) sowie die theoretische und praktische Relevanz der Fragestellung und der Forschungsergebnisse (es muss z.B. deutlich erkennbar sein, an welchen Theorien und Ergebnissen die Untersuchung anknüpft, welche Praxisaspekte sie aufgreift sowie welche neuen Deutungen oder Erklärungen für die untersuchten Phänomene sie bereitstellt und welches Innovationspotential sie enthält). Darüber hinaus müssen jeweils ethische Standards eingehalten werden (s. Kap. 4.6). Die zentralen Gütekriterien sind in jedem Fall die GegenstandsangemessenheitGegenstandsangemessenheit der gewählten Ansätze und Verfahren für die Bearbeitung der Forschungsfrage und, darüber hinaus, die Passung, d. h. das sinnvolle Zusammenwirken der einzelnen Elemente und Entscheidungen innerhalb der Forschungsarbeit: zum einen Passung von Gegenstand, Fragestellung, Zielsetzung, Relevanz untereinander, zum anderen Passung von Forschungstradition, Forschungskonzept bzw. -design und Verfahren untereinander sowie die unerlässliche Passung beider Stränge.
› Literatur
Arras, Ulrike (2007). Wie beurteilen wir Leistung in der Fremdsprache? Strategien und Prozesse bei der Beurteilung schriftlicher Leistungen in der Fremdsprache am Beispiel der Prüfung Test Deutsch als Fremdsprache (TestDAF). Tübingen: Narr. [Referenzarbeit, s. Kap. 7]
Bausch, Karl-Richard/Christ, Herbert/Krumm, Hans-Jürgen (2003). Fremdsprachendidaktik und Sprachlehrforschung. In: Dies. (Hg.). Handbuch Fremdsprachenunterricht. 4. vollständig neu bearbeitete Ausgabe. Tübingen: Francke, 1–9.
Bausch, Karl-Richard/Burwitz-Melzer, Eva/Krumm, Hans-Jürgen/Mehlhorn, Grit/Riemer, Claudia (2016). Fremdsprachendidaktik und Sprachlehr-/-lernforschung. In: Burwitz-Melzer, Eva/Mehlhorn, Grit/Riemer, Claudia/Bausch, Karl-Richard/Krumm, Hans-Jürgen (Hg.). Handbuch Fremdsprachenunterricht. 6., völlig überarbeitete und erweiterte Auflage. Tübingen: Francke, 1–7.
Biebricher, Christiane (2008). Lesen in der Fremdsprache. Eine Studie zu Effekten extensiven Lesens. Tübingen: Narr. [Referenzarbeit, s. Kap. 7]
Bracker, Elisabeth (2015). Fremdsprachliche Literaturdidaktik. Ein Plädoyer für die Realisierung bildender Erfahrungsräume im Unterricht. Wiesbaden: Springer VS. [Referenzarbeit, s. Kap. 7]
Cohen, Louis/Manion, Lawrence/Morrison, Keith (2018). Research Methods in Education. 8. Auflage. London: Routledge.
Doff, Sabine (2002). Englischlernen zwischen Tradition und Innovation. München: Langenscheidt-Longman. [Referenzarbeit, s. Kap. 7]
Doff, Sabine (2008). Englischdidaktik in der BRD 1949 bis 1989. Konzeptuelle Genese einer Wissenschaft. München: Langenscheidt.
Doff, Sabine (2010). Englischdidaktik in den 1970er und 1980er Jahren: Stationen auf dem Weg zu einer wissenschaftlichen Disziplin. In: Fremdsprachen Lehren und Lernen 39, 145–159.
Edmondson, Willis J./House, Juliane (2006). Einführung in die Sprachlehrforschung. 3. Auflage. Tübingen: Francke.
Ehrenreich, Susanne (2004). Auslandsaufenthalt und Fremdsprachenlehrerbildung. Das „assistant“-Jahr als ausbildungsbiographische Phase. München: Langenscheidt. [Referenzarbeit, s. Kap. 7]
Flick, Uwe (1995). Qualitative Forschung: Theorie, Methoden, Anwendung in Psychologie und Sozialwissenschaften. Reinbek: Rowohlt.
Flick, Uwe (2020). Gütekriterien qualitativer Forschung. In: Mey Günter/Mruck Katja (Hg.): Handbuch Qualitative Forschung in der Psychologie. 2., erweiterte und überarbeitete Auflage. Wiesbaden: Springer, 247–264.
Gödecke, Georgia (2020). Gestaltung eines e-Portfolios in der Fremdsprachenlehrkräfteausbildung zur Förderung fachspezifischer Reflexionskompetenz – Eine empirische Studie. Trier: WVT. [Referenzarbeit, s. Kap. 7]
Groeben, Norbert/Wahl, Diethelm/Schlee, Jörg/Scheele, Brigitte (1988). Das Forschungsprogramm Subjektive Theorien. Eine Einführung in die Psychologie des reflexiven Subjekts. Tübingen: Francke.
Grotjahn, Rüdiger (1993). Qualitative vs. quantitative Fremdsprachenforschung: Eine klärungsbedürftige und unfruchtbare Dichotomie. In: Timm, Johannes-Peter/Vollmer, Helmut Johannes (Hg.). Kontroversen in der Fremdsprachenforschung. Dokumentation des 14. Kongresses für Fremdsprachendidaktik, veranstaltet von der Deutschen Gesellschaft für Fremdsprachenforschung (DGFF) Essen, 7.–9. Oktober 1991. Bochum: Brockmeyer, 223–248.
Grotjahn, Rüdiger (2006). Zur Methodologie der Fremdsprachenerwerbsforschung. In: Scherfer, Peter/Wolff, Dieter (Hg.). Vom Lehren und Lernen fremder Sprachen. Eine vorläufige Bestandsaufnahme. Frankfurt/M.: Lang, 247–270.
Hochstetter, Johanna (2011). Diagnostische Kompetenz im Englischunterricht der Grundschule: Eine empirische Studie zum Einsatz von Beobachtungsbögen. Tübingen: Narr. [Referenzarbeit, s. Kap.7]
Ingenkamp, Karlheinz/Lissmann, Urban (2005). Lehrbuch der Pädagogischen Diagnostik. 5. Auflage. Weinheim: Beltz.
Kanning, Uwe Peter et al. (2007). Angewandte Psychologie im Spannungsfeld zwischen Grundlagenforschung und Praxis – Plädoyer für mehr Pluralismus. In: Psychologische Rundschau 58, 238–248.
Kienberger, Martina (2020). Das Potenzial des potenziellen Wortschatzes nutzen. Dissertation, Universität Wien. Philologisch-Kulturwissenschaftliche Fakultät. Online: http://othes.univie.ac.at/62970/ (29.09.2021) [Referenzarbeit, s. Kap. 7]
Königs, Frank G. (2010). Faktorenkomplexion. In: Barkowski, Hans/Krumm, Hans-Jürgen (Hg.). Fachlexikon Deutsch als Fremd- und Zweitsprache. Tübingen: Francke, 78.
Marx, Nicole (2005). Hörverstehensleistungen im Deutschen als Tertiärsprache. Zum Nutzen eines Sensibilisierungsunterrichts im „DaF-nE“. Baltmannsweiler: Schneider Verlag Hohengehren. [Referenzarbeit, s. Kap. 7]
Özkul, Senem (2011). Berufsziel Englischlehrer/in. Berufswahlmotive der Lehramtsstudierenden in Anglistik/Amerikanistik. München: Langenscheidt. [Referenzarbeit, s. Kap. 7]
Schart, Michael (2003). Projektunterricht – subjektiv betrachtet. Baltmannsweiler: Schneider Verlag Hohengehren. [Referenzarbeit, s. Kap. 7]
Schlömerkemper, Jörg (2010). Konzepte Pädagogischer Forschung. Eine Einführung in Hermeneutik und Empirie. Badheilbrunn: Klinkhardt.
Schmelter, Lars (2014). Gütekriterien. In: Settinieri, Julia/Demirkaya, Sevuken/Feldmeier, Alexis/Gültekin-Karakoç, Nazan/Riemer, Claudia (Hg.) (2014). Empirische Forschungsmethoden für Deutsch als Fremd- und Zweitsprache. Eine Einführung. Paderborn: Schöningh, 33–45.
Schmenk, Barbara (2002). Geschlechtsspezifisches Fremdsprachenlernen? Zur Konstruktion geschlechtstypischer Lerner- und Lernbilder in der Fremdsprachenforschung. Tübingen: Stauffenburg. [Referenzarbeit, s. Kap. 7]
Schmidt, Torben (2007). Gemeinsames Lernen mit Selbstlernsoftware im Englischunterricht. Eine empirische Analyse lernprogrammgestützter Partnerarbeitsphasen. Tübingen: Narr. [Referenzarbeit, s. Kap. 7]
Schwab, Götz (2009). Gesprächsanalyse und Fremdsprachenunterricht. Landau: Verlag Empirische Pädagogik. [Referenzarbeit, s. Kap.7]
Steinke, Ines (1999). Kriterien qualitativer Forschung: Ansätze zur Bewertung qualitativ-empirischer Sozialforschung. Weinheim: Juventa.
Tassinari, Giovanna (2010). Autonomes Fremdsprachenlernen. Komponenten, Kompetenzen, Strategien. Frankfurt/M.: Lang. [Referenzarbeit, s. Kap.7]
» Zur Vertiefung empfohlen
Caspari, Daniela ( 2019 ). Forschungstendenzen in der Fremdsprachendidaktik – Grundsatzüberlegungen und Auswertung der Dissertationen der Jahre 2014 bis 2016 aus dem deutschsprachigen Raum. In: Kreft, Annika/Hasenzahl, Mona (Hg.). Aktuelle Tendenzen in der Fremdsprachendidaktik. Zwischen Professionalisierung, Lernerorientierung und Kompetenzerwerb. Frankfurt/M.: Lang, 17 – 45 .
Für diesen Beitrag wurden die in diesem Zeitraum erschienenen 68 Dissertationen in die allgemeinen Forschungstendenzen in der Fremdsprachendidaktik eingeordnet. Auf dieser Basis konnten neun Thesen zur Entwicklung der Disziplin abgeleitet werden.
Cohen, Louis/Manion, Lawrence/Morrison, Keith ( 2018 ). Research Methods in Education . 8 . Auflage London: Routledge, 3 – 30 .
Im ersten Kapitel dieses Handbuches „The nature of enquiry: setting the field“ erläutern die Autoren die zentralen Forschungsparadigmen einschließlich ihrer erkenntnistheoretischen Grundlagen.
Kron, Friedrich W. ( 1999 ). Wissenschaftstheorie für Pädagogen . Tübingen: E. Reinhardt. [=UTB]
In diesem Handbuch wird ein systematischer Überblick über die wichtigsten wissenschaftstheoretischen Begriffe, Fragen und Konzepte gegeben. Die Darstellung der zentralen Paradigmen und Methoden erfolgt aus Sicht der Pädagogik.
Schmelter, Lars ( 2014 ). Gütekriterien. In: Settinieri, Julia/Demirkaya, Sevuken/Feldmeier, Alexis/Gültekin-Karakoç, Nazan/Riemer, Claudia (Hg.) ( 2014 ). Empirische Forschungsmethoden für Deutsch als Fremd- und Zweitsprache. Eine Einführung. Paderborn: Schöningh, 33 – 45 .
Dieser Artikel gibt, ausgehend vom Forschungsgegenstand der Fremdsprachenforschung, einen Überblick über Gütekriterien quantitativer und qualitativer Forschungsansätze. Außerdem werden übergreifende Gütekriterien sowie bislang ungelöste Fragen hinsichtlich der Gütekriterien fremdsprachendidaktischer Forschung diskutiert.
Wilden, Eva/Rossa, Henning (Hg.) ( 2019 ). Fremdsprachenforschung als interdisziplinäres Projekt . Frankfurt/M.: Lang.
Dieser Sammelband widmet sich einem der zentralen Charakteristika der Fremdsprachendidaktik als Forschungsdisziplin, der Interdisziplinarität. In den Beiträgen werden zum einen theoretische Überlegungen zur Disziplinarität dieser „bunten Disziplin“ angestellt, zum anderen wird, auch an konkreten Projekten, die Vielfalt interdisziplinärer Zugänge, Formate und Methoden aktueller fremdsprachendidaktischer Forschung sichtbar.