Die Sicherstellung der Fairness und Validität von GRE-Tests während der gesamten Entwicklung, Durchführung und Bewertung von Tests hat höchste Priorität. Um diese Ziele zu erreichen, hat ETS ein sorgfältiges System interner Kontrollmechanismen entwickelt, und Auditteams überprüfen routinemäßig, dass alle Tests und Dienstleistungen strengen professionellen Standards wie den von APA, AERA und NCME festgelegten erfüllt sind. Darüber hinaus führt unser Forschungs- und Entwicklungsteam Umfragen, Ausschussarbeit, umfangreiche Datenanalysen und verschiedene Studien durch, die sich auf Messungen, Bewertungen und Vergleiche konzentrieren.
Testfairness und Validität
Fairness
Fairness-Bedenken sind ein integraler Bestandteil der Entwicklung und Bewertung aller Tests. Die vielen Aktivitäten, die Fairness gewährleisten, umfassen:
- Einsatz speziell geschulter Fairness-Gutachter, um sicherzustellen, dass die Testfragen strenge Standards erfüllen
- Pilottests, Vortests und fortlaufende statistische Analysen der Testfragen, um sicherzustellen, dass die Fragen fair sind und nicht ungerechtfertigt zu Gruppenunterschieden beitragen
- Strenge Schulungen für alle an der Entwicklung oder Bewertung von Prüfungsfragen beteiligten Personen, um sicherzustellen, dass alle Prüflinge die gleiche Chance haben, ihre Fähigkeiten und Fertigkeiten zu demonstrieren
- angemessene Anpassungen (z. B. alternative Formate, zusätzliche Zeit) für Prüflinge mit Behinderungen oder gesundheitlichen Bedürfnissen
Gültigkeit
Validitätsforschung und -analysen zeigen, dass der Test das misst, was er messen soll. Aspekte des Validitätsarguments, die die angemessene Nutzung von GRE-Ergebnissen unterstützen, umfassen:
- Konstruktvalidität (der Test misst die Fähigkeiten/Fähigkeiten, die gemessen werden sollten)
- Inhaltsvalidität (der Test misst geeignete Inhalte)
- Prädiktive Validität (der Test sagt Erfolg voraus)
- Konsequenzvalidität (wenn sie im Rahmen einer ganzheitlichen Überprüfung angemessen verwendet wird, zeigt der Test, dass negative Folgen minimal sind)
- Externe Validität (der Test hat die erwartete Beziehung zu anderen Messgrößen desselben Konstrukts)
Obwohl ETS in jeder Phase des Liefer- und Bewertungsprozesses Validitätsbelege sammelt, basiert die anfängliche Richtung der Validitätsforschung auf Rückmeldungen von Mitgliedern der Graduiertengemeinschaft, einschließlich Wirtschaft und Recht, die Informationen über die Fähigkeiten und Fertigkeiten liefern, die sie als entscheidend für den Erfolg in Graduiertenprogrammen ansehen.
Konstrukt- und Inhaltsvalidität sind zwei Aspekte des Validitätsarguments, die das GRE-Programm stützen.
- Konstruktvalidität bedeutet, dass der Test die Fähigkeiten/Kompetenzen misst, die gemessen werden sollten.
- Inhaltsvalidität bedeutet, dass der Test angemessene Inhalte misst.
ETS sammelt Informationen aus Graduierten- und Fachschulprogrammen, einschließlich Wirtschafts- und Rechtsfakultäten, über die Fähigkeiten, die sie für den Erfolg in ihren Programmen als essenziell ansehen.
Abschnitt Verbales Denken
Der Abschnitt Verbal Reasoning des GRE General Test misst Fähigkeiten, die Dozenten durch Umfragen als wichtig für den Erfolg auf Graduiertenniveau identifiziert haben. Die bewerteten Fähigkeiten umfassen:
- die Fähigkeit, Text zu verstehen (wie die Fähigkeit, die Bedeutungen von Sätzen zu verstehen, eine genaue Zusammenfassung eines Textes zu erkennen oder Hauptpunkte von irrelevanten Punkten in einem Text zu unterscheiden); und
- die Fähigkeit, Diskurse zu interpretieren (wie die Fähigkeit, Schlussfolgerungen zu ziehen, fehlende Informationen zu schließen oder Annahmen zu identifizieren).
Abschnitt Quantitatives Schließen
Der Abschnitt Quantitative Reasoning des GRE General Test misst Fähigkeiten, die mit denen übereinstimmen, die im Quantitative Reasoning for College Grads: A Complement to the Standards der Mathematical Association of America beschrieben sind und auf Rückmeldungen aus Fakultätsbefragungen basieren. Die im GRE Quantitative Reasoning-Maß bewerteten Fähigkeiten umfassen:
- Lesen und Verständnis quantitativer Informationen
- Interpretieren und analysieren quantitativer Informationen, einschließlich Schlussfolgerungen aus Daten ziehen
- Anwendung mathematischer Methoden zur Lösung quantitativer Probleme
Sektion für analytisches Schreiben
Interviews mit Graduierten-Dozenten, Umfragen unter Graduierten-Dozenten und die Arbeit des GRE Writing Test Committee haben konsequent festgestellt, dass kritisches Denken und Schreibfähigkeiten als wichtig für den Erfolg in Graduiertenprogrammen sind.
Die beiden Aufgaben, die den Abschnitt Analytisches Schreiben ausmachen (Bewertung eines Themas und Bewertung eines Arguments), gelten beide in vielen Bereichen des Graduiertenstudiums als essenziell. Daher kann gezeigt werden, dass die Struktur des Tests inhaltlich gültig ist, da der Test Fähigkeiten bewertet, die von der Graduiertengemeinschaft als entscheidend für den Erfolg in vielen Bereichen der Graduiertenarbeit identifiziert werden.
Bei ETS verlassen wir uns auf ein strenges internes System von Checks and Balances, um die Fairness und Validität von GRE-Tests und -Ergebnissen sicherzustellen. Unser Forschungs- und Entwicklungsteam führt Umfragen, Ausschussarbeit, umfangreiche Datenanalysen und eine Vielzahl von Studien durch, die sich auf Messungen, Bewertungen und Vergleiche konzentrieren. Weitere Informationen finden Sie in den folgenden Dokumenten:
- Daten bestätigen, dass GRE-Ergebnisse® gültige Prädiktoren für den Erfolg in MBA-Programmen sind
- Die Validität von GRE-Ergebnissen® zur Vorhersage akademischer Leistungen an US-amerikanischen juristischen Fakultäten
- Die Research Foundation for the GRE® überarbeiteter General Test: A Compendium of Studies (PDF) — Eine umfassende Sammlung umfangreicher Forschungsarbeiten und anderer Aktivitäten, die zum erfolgreichen Start des GRE General Test im August 2011 führten. Zusammenfassungen von fast einem Jahrzehnt Forschung sowie bisher unveröffentlichte Informationen zum überarbeiteten Test decken eine Vielzahl von Themen ab, darunter die Begründung für die Überarbeitung des Tests, den Entwicklungsprozess, Testdesign, Score-Skalen, automatisierte Bewertung, Validität, Fairness und Zugänglichkeit.
- Eine umfassende Übersicht über veröffentlichte GRE-Validitätsdaten® (PDF) — Fasst Validitätsstudien der GRE General Test-Maße zusammen.
- Wie gut sagt der allgemeine GRE-Test® den Erfolg von Biologiestudierenden voraus? (PDF) — Präsentiert Analysen, die den Wert des GRE General Test als Indikator für die Graduiertennoten von Biologiestudenten im ersten Jahr zeigen.
- Wie gut sagt der GRE® General Test den Erfolg von Chemieschülern voraus? (PDF) — Präsentiert Analysen, die den Wert des GRE General Test als Indikator für die Noten der Chemiestudenten im ersten Jahr zeigen.
- Wie gut sagt der GRE® General Test den Erfolg von Bildungsschülern voraus? (PDF) — Präsentiert Analysen, die den Wert des GRE General Test als Indikator für die Noten der Erstsemester-Graduiertenschüler von Pädagogikstudenten zeigen.
- Wie gut sagt der GRE® General Test den Erfolg von Studierenden in Englisch-Fachbereichen voraus? (PDF) — Präsentiert Analysen, die den Wert des GRE General Test als Indikator für die Noten der Englischstudenten im ersten Jahr zeigen.
- Wie gut sagt der allgemeine GRE-Test® den Erfolg von Psychologiestudierenden voraus? (PDF) — Präsentiert Analysen, die den Wert des GRE General Test als Indikator für die Noten von Psychologiestudierenden im ersten Jahr zeigen.
- Gültigkeit des GRE® General Test: Eine Fallstudie der veterinärmedizinischen Fakultäten (PDF)
- GRE-Testvalidität: Ins rechte Licht rücken (PDF)