GRE: Physiker sagen, dass die Aufnahmeprüfung der Graduate School ein schlechter Prädiktor für den Erfolg ist

Für die meisten Doktoranden beginnt der Weg zu einem fortgeschrittenen Abschluss in einem kleinen, lichtlosen Raum vor einem Computerbildschirm und nimmt eine weitere Runde standardisierter Tests vor. Während sie verzweifelt einen Essay tippen, der dazu bestimmt ist, von einem Computer bewertet zu werden, fragen sie sich vielleicht: "Wie wird mir das helfen, durch die Schule zu kommen?" Wissenschaftliche Fortschritte ist hier, um ihre innere Angst zu bestätigen. Der GRE ist nicht nur ein schlechter Weg, um den Erfolg der Schule zu bestimmen. es könnte auch mehr schaden als nützen.

Unter der Leitung von Casey Miller, einem experimentellen Physiker am Rochester Institute of Technology, konzentriert sich diese Studie speziell auf Absolventenprogramme für Physik, obwohl Miller der Meinung ist, dass seine Ergebnisse wahrscheinlich für eine Vielzahl von Bereichen zutreffen würden. Als er anonyme GRE-Bewertungen aus 27 Universitätsstudiengängen im ganzen Land analysierte, stellte er fest, dass sie nicht vorhersagen konnten, ob sie am Ende des Tages tatsächlich ihren Abschluss hatten.

Er ist unter Physikern bereits ziemlich bekannt, aber seine Studie fügt harte Daten hinzu, um zu zeigen, dass beide den allgemeinen GRE-Test durchführen und der physik-spezifische Test sind nicht ein sicherer Weg, um zu sagen, wer einen großartigen Physiker ausmachen würde.

„Physiker sind eine listige Gruppe. Sie ändern normalerweise nicht, wie sie Dinge ohne Daten tun “, sagt er Inverse „Die Tatsache, dass wir speziell in der Physik-Community Daten dazu bereitstellen können, wird der Fakultät dabei helfen, den Nutzen dieser Tools zu erkennen. So werden sie hoffentlich sehen, dass die Tests keine Promotion vorhersagen. Abschluss oder Noten sehr gut."

Das erste Mal, als ich den GRE Adv Physics-Test ablegte, erzielte ich das 7. Perzentil. Beim zweiten Mal wurde ich elfter. Seitdem habe ich in Röntgenphysik promoviert, bei NIST und der NASA gearbeitet und bin stolz darauf, bedeutende technische Herausforderungen beim Entwurf und beim Testen des Weltraumteleskops von James Webb gelöst zu haben.

- Scott Rohrbach (@scottrohrbach), 30. April 2018

Dinge, die das GRE nicht vorhersagen kann

In der Studie analysierte Miller die Ergebnisse von drei verschiedenen GRE-Testabschnitten: GRE-V (verbal), GRE-Q (Mathematik) und GRE-P (physikspezifischer Test). Er verglich diese Ergebnisse mit den Abschlussquoten und Noten der Physikstudenten. Programme in vier sich überschneidenden Gruppen: Studenten aus den USA, Studenten aus dem Ausland, Studentinnen aus den USA und männliche Studenten aus den USA. In allen vier Gruppen hat der GRE-P * konnte nicht vorhersagen ob die Schüler ihr Programm beenden würden, ebenso wie der Abschnitt GRE-V.

Es gab einen kleinen Hoffnungsschimmer für die Mathematikabteilung des GRE, der eine gewisse Korrelation mit der Abschlussquote zeigte, als die Ergebnisse von weiblichen Studentinnen und männlichen Studenten aus den USA kombiniert wurden. Es war jedoch kein guter Prädiktor für Studenten insgesamt und nur für Studenten außerhalb der USA.

Trotzdem sehen die Dinge für das GRE in diesem Dokument nicht besonders gut aus - insbesondere das physikspezifische GRE. Studenten, die punkteten unten Das 50. Perzentil hatte ähnliche Abschlussgrade wie diejenigen, die in den oberen Perzentilen punkten, betont Miller. Er fügt hinzu, dies sei eine Schlüsselbeobachtung, da einige Ph.D.-Programme der Physik harte Grenzwerte haben. Etwa 25 Prozent der Physikprogramme geben an, dass ein GRE-Wert über dem 55. Perzentil liegen sollte, damit ein Bewerber einen Aufnahmebewusstsein hat.

Dinge die GRE Können Vorhersagen

Kurz gesagt, die GRE-Werte können nicht vorhersagen, wie gut sich ein Physiker herausstellt. Stattdessen spiegeln sie demographische Muster (http://www.nature.com/naturejobs/science/articles/10.1038/nj7504-303aa) wider, die für die Vorhersage des Erfolgs einer Person in der Graduiertenschule ebenso nutzlos sind. Es gibt keine statistisch signifikante Korrelation zwischen dem Geschlecht und der Wahrscheinlichkeit einer Person, eine Promotion abzuschließen. in der Physik, sagt Miller, aber da ist Ein signifikanter geschlechtsspezifischer Unterschied bei den GRE-P-Werten: Der Medianwert für eine Frau in den USA beträgt 580 und der Medianwert für einen Mann in den USA beträgt 680. Die Implikation ist, dass beide Gruppen eine ähnliche Chance haben würden, sich zu übertreffen Für den Physikerstudiengang ist zwar eine Kursarbeit erforderlich, aber nach ihren Testergebnissen ist einer beim Eintreten besser als der andere.

Bezeichnenderweise wäre keine dieser Bewertungen wahrscheinlich sogar gut genug, um einen der Bewerber in geschätzte 25 Prozent der Programme zu bringen - obwohl Miller nach Geschlecht, Rasse und ethnischer Zugehörigkeit signifikante Lücken aufweisen konnte, wer diese Punktzahl erreicht und wer nicht. Und das berücksichtigt nicht einmal die Einkommen Muster im Zusammenhang mit GRE-Testergebnissen.

Der große Imbiss, sagt MIller, ist, dass der GRE den Zulassungsausschüssen nichts darüber sagt, was einen guten Physiker ausmacht - und dass er teilweise für die abscheuliche Diversitätsstatistik der Physik verantwortlich sein könnte. Nur 5 Prozent der Physik Ph.D. Die jährlich verliehenen Abschlüsse gehen an unterrepräsentierte Minderheitengruppen und nur 20 Prozent an Frauen. Millers Ergebnisse deuten darauf hin, dass es in diesen beiden Gruppen viele Menschen gibt, deren Testergebnisse sie auf den abgelehnten Haufen bringen, bevor sie überhaupt die Möglichkeit haben, ihre Kräfte zu testen.

"Wir sind einigermaßen gut darin, auszuwählen, wer in der Kursarbeit gut abschneidet. Natürlich sind die für einen erfolgreichen Kurs erforderlichen Fähigkeiten nicht die gleichen Fähigkeiten, die für einen erfolgreichen Forschungsphysiker wichtig sind", sagt Miller. "In Zukunft versuchen wir, uns auf die Dinge zu konzentrieren, von denen wir wissen, dass sie ein guter Forscher sind, was mit dem derzeitigen System nicht sehr gut funktioniert."