Читать книгу Forschungsmethoden in der Fremdsprachendidaktik - Группа авторов - Страница 12

2.3 Welche GütekriterienGütekriterien gelten für fremdsprachendidaktische Forschung?

Оглавление

Wissenschaftliche Forschung unterscheidet sich von der anfangs erwähnten Alltagsbeobachtung nicht zuletzt durch die Einhaltung bestimmter forschungsmethodischer Standards, den sog. Gütekriterien. Als Prinzipien verstanden, helfen sie dabei, sich der jeweiligen qualitativen Standards bewusst zu werden und sie bei der Planung und Durchführung der Untersuchung einzuhalten; als Kriterien verstanden, ermöglichen sie, im Nachhinein die Qualität und die Reichweite der gewonnenen Ergebnisse einer Forschungsarbeit zu beurteilen.

Auffällig ist, dass Gütekriterien bislang nahezu ausschließlich im Kontext empirischer Forschung diskutiert werden. Sowohl in der theoretisch-hermeneutischen wie auch in der historischen Forschung steht eine intensivere forschungsmethodologische Diskussion erst am Anfang.

Auffällig ist ebenfalls, dass sich die Diskussion über GütekriterienGütekriterien in der empirischen Forschung nach wie vor zumeist an der soziologischen, psychologischen und erziehungswissenschaftlichen Forschung orientiert. Erst seit der Etablierung der GegenstandsangemessenheitGegenstandsangemessenheit als zentralem Gütekriterium ist zu beobachten, dass in fremdsprachendidaktischen Arbeiten bei der Präsentation und Analyse der Forschungsmethodik offensiver anhand fremdsprachenforschungsspezifischer Charakteristika argumentiert wird. Trotzdem ist der Stand der Diskussion aus den genannten Disziplinen nach wie vor wegweisend.

Grundsätzlich unterscheiden sich die Gütekriterien in quantitativen und qualitativen Forschungsansätzen (vgl. Kap. 3.3). Als zentrale Kriterien quantitativer Forschung (vgl. im Folgenden Edmondson/House 2006: 39–40, Grotjahn 2006, Schmelter 2014) gelten Objektivität, Reliabilität und Validität. Unter ObjektivitätObjektivität versteht man die Intersubjektivität einer Methode, d.h. die Unabhängigkeit der Ergebnisse von den Forscher_innen, die die Untersuchung durchgeführt haben. Dabei unterscheidet man anhand der einzelnen Forschungsschritte Durchführungs-, Auswertungs- und Interpretationsobjektivität. Detaillierte Vorschriften sollen dafür sorgen, dass sowohl der Einfluss der Untersuchung auf die Untersuchungsteilnehmer_innen als auch der Einfluss der Forscher_innen auf die Untersuchung kontrolliert und möglichst gering gehalten wird. Eng mit dem Kriterium der Objektivität zusammen hängt das Kriterium der Zuverlässigkeit (ReliabilitätReliabilität). Es misst die Genauigkeit des Datenerhebungs- bzw. Messvorgangs und gibt den Grad der Verlässlichkeit der Ergebnisse an. Für ein hochreliables Ergebnis müssen bei einer Wiederholung der Untersuchung unter gleichen Bedingungen die gleichen Ergebnisse erzielt werden (Replizierbarkeit der Messergebnisse). Reliabilität umfasst drei Aspekte: die Stabilität (die Übereinstimmung der Messergebnisse zu unterschiedlichen Zeitpunkten), die Konsistenz (das Maß, mit dem die zu einem Merkmal gehörenden Items dasselbe Merkmal messen) und die Äquivalenz (die Gleichwertigkeit von Messungen, wenn z.B. durch das Wiederholen eines Tests ein Lerneffekt eintritt).

Objektivität und Reliabilität der Methoden bestimmen die ValiditätValidität, d.h. die Gültigkeit einer Variable, eines Messverfahrens bzw. der erzielten Ergebnisse. Sie bestimmt das Maß ihrer Übereinstimmung mit dem untersuchten Realitätsausschnitt. Man unterscheidet in Bezug auf Untersuchungsverfahren zum einen innere bzw. interne Validität (das Maß, mit dem ein Forschungsverfahren tatsächlich das erfasst oder misst, was es erfassen oder messen soll – und nicht z.B. durch andere Einflüsse wie z.B. Störvariablen oder systematische Messfehler beeinträchtigt wird). Hierbei unterscheidet man insbesondere die Inhaltsvalidität (die Eignung eines Verfahrens für die Erfassung bzw. Messung des Konstruktes), die Kriteriumsvalidität (die Übereinstimmung der gemessenen Ergebnisse mit einem empirischen Kriterium, z.B. den Ergebnissen, die mit einem anderen Verfahren gewonnen wurden) und die Konstruktvalidität (die Zuverlässigkeit der Ergebnisse bezüglich des gesamten untersuchten Konstruktes und nicht nur einzelner Aspekte des Konstruktes).

Zum anderen bestimmt man die externe ValiditätValidität, d.h. die Möglichkeit der Übertragung der Ergebnisse über die jeweilige Stichprobe und Situation der konkreten Untersuchung hinaus (Möglichkeit der Verallgemeinerung, RepräsentativitätRepräsentativität). Grundsätzlich ist eine hohe Reliabilität eine Voraussetzung für hohe Validität, allerdings kann sich eine zu hohe Reliabilität negativ auf die Validität auswirken, weil dann nur sehr enge Konstrukte erfasst werden können.

Während Studien mit einem quantitativen Forschungsansatz das Forschungsfeld und die Forschungsgegenstände aus einer distanzierten Außenperspektive betrachten, setzt sich qualitative Forschung das Ziel, die Untersuchungsgegenstände soweit es geht aus der Innenperspektive der Beteiligten zu erforschen (vgl. Kapitel 3.3). Diese Forschung verlangt daher andere GütekriterienGütekriterien (vgl. im Folgenden Flick 1987 und 1995, Schmelter 2014, Steinke 1999). Ein Teil dieser Kriterien stellt eine Um- oder Neudefinition der aufgeführten Gütekriterien quantitativer Forschung dar, dazu kommen spezifische Kriterien qualitativer Forschung.

Das Kriterium der Objektivität ist nicht vereinbar mit der Subjektivität der Forschungsbeteiligten, der Notwendigkeit ihrer Interaktion und der Anwendung interpretativer Auswertungsverfahren; zudem widerspricht es zentralen Charakteristika qualitativer Forschung wie z.B. den Prinzipien der Gegenstandsentfaltung, der Offenheit, der Alltagsorientierung und der Kontextualität. Als Äquivalenzkriterium führt Steinke (1999: 143) das Kriterium der Intersubjektiven intersubjektive NachvollziehbarkeitNachvollziehbarkeitNachvollziehbarkeitintersubjektive ein, für das die Reflexivität des/der Forscher_in wichtig ist. Auch das Kriterium der Reliabilität ist nicht direkt auf qualitative Forschung übertragbar, u.a. weil weder eine Standardisierung der Erhebungssituation noch eine vorgängige exakte Bestimmung und Operationalisierung des Untersuchungsgegenstandes möglich bzw. sinnvoll sind, auch ist das Untersuchungsphänomen in den meisten Fällen nicht ausreichend stabil. Stattdessen schlägt Flick (1995: 242) die Prüfung der Verlässlichkeit von Daten und Vorgehensweisen vor, für die u.a. die konsequente Dokumentation des Forschungsprozesses notwendig ist.

Daneben werden auch Verfahren der Reliabilitätsprüfung aus quantitativen Forschungsansätzen auf qualitative Designs übertragen, wenn z.B. zwei Forscher_innen die gleichen Texte kodieren und ihre unterschiedlichen Deutungen diskutieren (Inter-Coder-ReliabilitätInter-Coder-Reliabilität).

Das Kriterium der ValiditätValidität wird für qualitative Forschungsansätze dagegen teilweise übernommen und in Bezug auf den Auswertungs- und Interpretationsprozess hin erweitert. Validierung wird verstanden als – zumeist kommunikativer – Prozess, in dem das Zustandekommen der Daten, die Darstellung der Phänomene und die daraus abgeleiteten Schlüsse auf systematische Verzerrungen oder Täuschungen hin untersucht werden (Flick 1995: 244–245). Die zentrale Frage lautet, „inwieweit die Konstruktionen des Forschers in den Konstruktionen derjenigen, die er untersucht hat, begründet sind (…) und inwieweit für andere diese Begründungen nachvollziehbar sind“ (Flick 1995: 244). Ein Verfahren der Validitätsprüfung ist die TriangulationTriangulation (vgl. auch Kapitel 4.4), die hierbei jedoch nicht primär auf die Bestätigung der Ergebnisse und damit auf die Gewinnung eines einheitlichen Gesamtbildes abzielt, sondern auf ergänzende und vertiefende Perspektiven.

Neben den drei genannten gelten als weitere wichtige Kriterien qualitativer Forschung Offenheit (gegenüber dem Forschungsfeld und gegenüber unerwarteten Ergebnissen), Flexibilität (angesichts gewachsener Erkenntnisse oder als Reaktion auf Unerwartetes), die Darlegung des Vorverständnisses, die Reflexion der Rolle der Forscher_in, die Indikation des Forschungsprozesses und der Bewertungskriterien (d.h. die Prüfung, ob die getroffenen methodischen Entscheidungen indiziert, d.h. angemessen gewählt worden waren) sowie die empirische Verankerung der Theoriebildung (die Theoriebildung erfolgt dicht an den Daten). Obwohl mit qualitativen Untersuchungen keine Generalisierung angestrebt werden kann, ist zu prüfen, wie weit die gewonnenen Ergebnisse über den Untersuchungskontext hinaus GültigkeitGültigkeit beanspruchen können (Kriterium der Limitation bzw. ReichweiteReichweite). Im Unterschied zu den GütekriterienGütekriterien in quantitativen Forschungsansätzen zielen die Kriterien in qualitativen Forschungsansätzen weniger auf Kontrolle, sondern auf Vertrauenswürdigkeit, Glaubwürdigkeit und Verlässlichkeit.

Wichtige Gütekriterien für beide Ansätze sind die Offenlegung des Gegenstandsverständnisses (es bildet die Grundlage für die Beurteilung der Angemessenheit des gewählten Ansatzes und der eingesetzten Methoden) sowie die theoretische und praktische Relevanz der Fragestellung und der Forschungsergebnisse (es muss z.B. deutlich erkennbar sein, an welchen Theorien und Ergebnissen die Untersuchung anknüpft, welche Praxisaspekte sie aufgreift sowie welche neuen Deutungen oder Erklärungen für die untersuchten Phänomene sie bereitstellt und welches Innovationspotential sie enthält). Darüber hinaus müssen in jedem Fall ethische Standards eingehalten werden (vgl. Kapitel 4.6). Das zentrale Gütekriterium sind in jedem Fall die GegenstandsangemessenheitGegenstandsangemessenheit der gewählten Ansätze und Verfahren für die Bearbeitung der Forschungsfrage und, darüber hinaus, die Passung, das sinnvolle Zusammenwirken der einzelnen Elemente und Entscheidungen innerhalb der Forschungsarbeit: zum einen Passung von Gegenstand, Fragestellung, Zielsetzung und Relevanz untereinander, zum anderen Passung von Forschungstradition, Forschungskonzept bzw. -design und Verfahren untereinander sowie die unerlässliche Passung beider Stränge.

› Literatur

Arras, Ulrike (2007). Wie beurteilen wir Leistung in der Fremdsprache? Strategien und Prozesse bei der Beurteilung schriftlicher Leistungen in der Fremdsprache am Beispiel der Prüfung „Test Deutsch als Fremdsprache“ (TestDAF). Tübingen: Narr. [Referenzarbeit, Kapitel 7]

Bausch, Karl-Richard/Christ, Herbert/Krumm, Hans-Jürgen (2003). Fremdsprachendidaktik und Sprachlehrforschung. In: Dies. (Hg.). Handbuch Fremdsprachenunterricht. 4. vollständig neu bearbeitete Ausgabe. Tübingen: Francke.

Biebricher, Christiane (2008). Lesen in der Fremdsprache. Eine Studie zu Effekten extensiven Lesens. Tübingen: Narr. [Referenzarbeit, Kapitel 7]

Burwitz-Melzer, Eva/Königs, Frank/Riemer, Claudia (Hg.) (2015). Lernen an allen Orten? Die Rolle der Lernorte beim Lehren und Lernen von Fremdsprachen. Arbeitspapiere der 35. Frühjahrskonferenz zur Erforschung des Fremdsprachenunterrichts. Tübingen: Narr.

Cohen, Louis/Manion, Lawrence/Morrison, Keith (2011). Research Methods in Education. 7. Auflage. London: Routledge.

DESI-Konsortium (2008) (Hg.). Unterricht und Kompetenzerwerb in Deutsch und Englisch. Ergebnisse der DESI-Studie. Weinheim: Beltz.

Doff, Sabine (2002). Englischlernen zwischen Tradition und Innovation. München: Langenscheidt-Longman. [Referenzarbeit, Kapitel 7]

Doff, Sabine (2008). Englischdidaktik in der BRD 1949 bis 1989. Konzeptuelle Genese einer Wissenschaft. München: Langenscheidt.

Doff, Sabine (2010). Englischdidaktik in den 1970er und 1980er Jahren: Stationen auf dem Weg zu einer wissenschaftlichen Disziplin. In: Fremdsprachen Lehren und Lernen 39, 145–159.

Edmondson, Willis J./House, Juliane (2006). Einführung in die Sprachlehrforschung. 3. Auflage. Tübingen: Francke.

Ehrenreich, Susanne (2004). Auslandsaufenthalt und Fremdsprachenlehrerbildung. Das „assistant“-Jahr als ausbildungsbiographische Phase. München: Langenscheidt. [Referenzarbeit, Kapitel 7]

Flick, Uwe (1987). Methodenangemessene Gütekriterien in der qualitativ-interpretativen Forschung. In: Bergold, Jarg B./Flick, Uwe (Hg.). Ein-Sichten. Zugänge zur Sicht des Subjekts mittels qualitativer Forschung. Tübingen: Deutsche Gesellschaft für Verhaltenstherapie.

Flick, Uwe (1995). Qualitative Forschung: Theorie, Methoden, Anwendung in Psychologie und Sozialwissenschaften. Reinbek: Rowohlt.

Groeben, Norbert/Wahl, Diethelm/Schlee, Jörg/Scheele, Brigitte (1988). Das Forschungsprogramm Subjektive Theorien. Eine Einführung in die Psychologie des reflexiven Subjekts. Tübingen: Francke.

Grotjahn, Rüdiger (1993). Qualitative vs. quantitative Fremdsprachenforschung: Eine klärungsbedürftige und unfruchtbare Dichotomie. In: Timm, Johannes-Peter/Vollmer, Helmut Johannes (Hg.). Kontroversen in der Fremdsprachenforschung. Dokumentation des 14. Kongresses für Fremdsprachendidaktik, veranstaltet von der Deutschen Gesellschaft für Fremdsprachenforschung (DGFF) Essen, 7.–9. Oktober 1991. Bochum: Brockmeyer, 223–248.

Grotjahn, Rüdiger (2006). Zur Methodologie der Fremdsprachenerwerbsforschung. In: Scherfer, Peter/ Wolff, Dieter (Hg.). Vom Lehren und Lernen fremder Sprachen. Eine vorläufige Bestandsaufnahme. Frankfurt/M.: Lang, 247–270.

Hochstetter, Johanna (2011). Diagnostische Kompetenz im Englischunterricht der Grundschule: Eine empirische Studie zum Einsatz von Beobachtungsbögen. Tübingen: Narr. [Referenzarbeit, Kapitel 7]

Ingenkamp, Karlheinz/Lissmann, Urban (2005). Lehrbuch der Pädagogischen Diagnostik. 5. Auflage. Weinheim: Beltz.

Königs, Frank G. (2010). Faktorenkomplexion. In: Barkowski, Hans/Krumm, Hans-Jürgen (Hg.). Fachlexikon Deutsch als Fremd- und Zweitsprache. Tübingen: Francke: 78.

Marx, Nicole (2005). Hörverstehensleistungen im Deutschen als Tertiärsprache. Zum Nutzen eines Sensibilisierungsunterrichts im „DaF-nE“. Baltmannsweiler: Schneider Verlag Hohengehren. [Referenzarbeit, Kapitel 7]

Özkul, Senem (2011). Berufsziel Englischlehrer/in. Berufswahlmotive der Lehramtsstudierenden in Anglistik/Amerikanistik. München: Langenscheidt. [Referenzarbeit, Kapitel 7]

Schart, Michael (2003). Projektunterricht – subjektiv betrachtet. Baltmannsweiler: Schneider Verlag Hohengehren. [Referenzarbeit, Kapitel 7]

Schlömerkemper, Jörg (2010). Konzepte Pädagogischer Forschung. Eine Einführung in Hermeneutik und Empirie. Bad Heilbrunn: Klinkhardt.

Schmelter, Lars (2014). Gütekriterien. In: Settinieri, Julia/Demirkaya, Sevilen/Feldmeier, Alexis/Gültekin-Karakoç, Nazan/Riemer, Claudia (Hg.) (2014). Empirische Forschungsmethoden für Deutsch als Fremd- und Zweitsprache. Eine Einführung. Paderborn: Schöningh, 33–45.

Schmenk, Barbara (2002). Geschlechtsspezifisches Fremdsprachenlernen? Zur Konstruktion geschlechtstypischer Lerner- und Lernbilder in der Fremdsprachenforschung. Tübingen: Stauffenburg. [Referenzarbeit, Kapitel 7]

Schmidt, Torben (2007). Gemeinsames Lernen mit Selbstlernsoftware im Englischunterricht. Eine empirische Analyse lernprogrammgestützter Partnerarbeitsphasen. Tübingen: Narr. [Referenzarbeit, Kapitel 7]

Schwab, Götz (2009). Gesprächsanalyse und Fremdsprachenunterricht. Landau: Verlag Empirische Pädagogik. [Referenzarbeit, Kapitel 7]

Steinke, Ines (1999). Kriterien qualitativer Forschung: Ansätze zur Bewertung qualitativ-empirischer Sozialforschung. Weinheim: Juventa.

Tassinari, Giovanna (2010). Autonomes Fremdsprachenlernen. Komponenten, Kompetenzen, Strategien. Frankfurt/M.: Lang. [Referenzarbeit, Kapitel 7]

» Zur Vertiefung empfohlen

Cohen, Louis/Manion, Lawrence/Morrison, Keith (2011). Research Methods in Education. 7. Auflage London: Routledge, 3–30.

Im ersten Kapitel dieses Handbuches „The nature of enquiry: setting the field“ erläutern die Autoren die zentralen Forschungsparadigmen einschließlich ihrer erkenntnistheoretischen Grundlagen.

Gnutzmann, Claus/Königs, Frank/Küster, Lutz (2011). Fremdsprachenunterricht und seine Erforschung. Ein subjektiver Blick auf 40 Jahre Forschungsgeschichte und auf aktuelle Forschungstendenzen in Deutschland. In: Fremdsprachen Lehren und Lernen 40, 1–28.

Nach einer Klärung des Gegenstandsbereiches fremdsprachendidaktischer Forschung zeichnen die Autoren anhand von sechs aktuellen Forschungsfeldern, darunter Forschungsmethoden, die Entwicklung der Fremdsprachendidaktik in den letzten 40 Jahren nach.

Grotjahn, Rüdiger (1993). Qualitative vs. quantitative Fremdsprachenforschung: Eine klärungsbedürftige und unfruchtbare Dichotomie. In: Timm, Johannes-Peter/Vollmer, Helmut Johannes (Hg.). Kontroversen in der Fremdsprachenforschung. Dokumentation des 14. Kongresses für Fremdsprachendidaktik, veranstaltet von der Deutschen Gesellschaft für Fremdsprachenforschung (DGFF) Essen, 7.–9. Oktober 1991. Bochum: Brockmeyer, 223–248.

Ausgehend von dem seiner Meinung nach unfruchtbaren Gegensatz zwischen qualitativer und quantitativer Forschung erläutert der Autor grundlegende methodologische Paradigmen und Gütekriterien. Von den Spezifika der Fremdsprachendidaktik aus konturiert er Ansätze zur Überwindung dieses methodologischen Gegensatzes.

Kron, Friedrich W. (1999): Wissenschaftstheorie für Pädagogen. Tübingen: E. Reinhardt.

In diesem Handbuch wird ein systematischer Überblick über die wichtigsten wissenschaftstheoretischen Begriffe, Fragen und Konzepte gegeben. Die Darstellung der zentralen Paradigmen und Methoden erfolgt aus Sicht der Pädagogik.

Schmelter, Lars (2014). Gütekriterien. In: Settinieri, Julia/Demirkaya, Sevilen/Feldmeier, Alexis/Gültekin-Karakoç, Nazan/Riemer, Claudia (Hg.) (2014). Empirische Forschungsmethoden für Deutsch als Fremd- und Zweitsprache. Eine Einführung. Paderborn: Schöningh, 33–45.

Dieser Artikel gibt, ausgehend vom Forschungsgegenstand der Fremdsprachenforschung, einen Überblick über Gütekriterien quantitativer und qualitativer Forschungsansätze. Außerdem werden übergreifende Gütekriterien sowie bislang ungelöste Fragen hinsichtlich der Gütekriterien fremdsprachendidaktischer Forschung diskutiert.

Forschungsmethoden in der Fremdsprachendidaktik

Подняться наверх