GRE: Fizycy mówią, że egzamin wstępny do szkoły jest złym predyktorem sukcesu

Dla większości absolwentów ścieżka do stopnia zaawansowanego zaczyna się w małym bezwietrznym pokoju przed ekranem komputera, podejmując kolejną rundę standardowych testów. Kiedy gorączkowo piszą esej, który ma być oceniany przez komputer, mogą się zastanawiać: „Jak to pomoże mi przejść przez szkołę średnią”? Postępy naukowe jest tutaj, aby potwierdzić ich wewnętrzny niepokój. GRE to nie tylko zły sposób na określenie sukcesu szkoły grad; może też zrobić więcej szkody niż pożytku.

Badania prowadzone przez Casey Miller, Ph.D., fizyka eksperymentalnego z Rochester Institute of Technology, koncentrują się w szczególności na programach dla absolwentów fizyki, choć Miller uważa, że ​​jego odkrycia prawdopodobnie dotyczą różnych dziedzin. Kiedy przeanalizował anonimowe wyniki GRE z 27 programów uniwersyteckich dla absolwentów w całym kraju, odkrył, że nie przewidzieli, czy rzeczywiście skończyli z dyplomem pod koniec dnia.

Jest to już dość dobrze znane wśród fizyków, ale jego badanie dodaje twarde dane, aby pokazać, że zarówno ogólny test GRE i test specyficzny dla fizyki nie pewny sposób, by stwierdzić, kto byłby wspaniałym fizykiem.

„Fizycy to chytry grono. Zazwyczaj nie zmieniają sposobu, w jaki robią rzeczy bez danych ”, mówi Odwrotność. „Tak więc fakt, że możemy w tym celu umieścić dane w społeczności fizyki, pomoże wydziałowi dostrzec użyteczność tych narzędzi. Mam nadzieję, że zobaczą, że testy nie przewidują doktoratu ukończenie lub oceny bardzo dobrze. ”

Po raz pierwszy wziąłem test GRE Adv Physics I zdobyłem 7 percentyl. Za drugim razem dostałem 11 miejsce. Od czasu ukończenia studiów doktoranckich w dziedzinie fizyki rentgenowskiej, pracowałem w NIST i NASA, i jestem dumny, że udało mi się rozwiązać znaczące wyzwania inżynieryjne w projektowaniu i testowaniu Kosmicznego Teleskopu Jamesa Webba.

- Scott Rohrbach (@scottrohrbach) 30 kwietnia 2018 r

Rzeczy, których GRE nie może przewidzieć

W badaniu Miller przeanalizował wyniki z trzech różnych sekcji testu GRE: GRE-V (werbalny), GRE-Q (matematyka) i GRE-P (test przedmiotu specyficzny dla fizyki). Porównał te wyniki ze stopniami ukończenia i ocenami doktorantów fizyki. programy w czterech pokrywających się grupach: studenci ze Stanów Zjednoczonych, studenci z zagranicy, studentki ze Stanów Zjednoczonych oraz studenci z USA. We wszystkich czterech grupach GRE-P * nie udało się przewidzieć czy uczniowie skończą swój program, podobnie jak sekcja GRE-V.

W sekcji matematyki GRE pojawił się niewielki promyk nadziei, który wykazał pewną korelację ze wskaźnikiem ukończenia, gdy połączono wyniki amerykańskich studentek i amerykańskich studentów płci męskiej. Jednak nie był to dobry predyktor, gdy stosowano go do studentów jako całości i wyłącznie studentów spoza USA.

Niemniej jednak w tym artykule rzeczy nie wyglądają szczególnie dobrze dla GRE - w szczególności specyficzne dla fizyki GRE. Uczniowie, którzy strzelili gole poniżej 50-ty percentyl miał podobny współczynnik ukończenia stopnia do tych, którzy zdobyli najwyższe percentyle, wskazuje Miller. To, dodaje, jest kluczową obserwacją, ponieważ wiele programów Ph.D. fizyki ma twarde granice. Około 25 procent programów z dziedziny fizyki ogłasza, że ​​wynik GRE powinien być wyższy niż 55-ty percentyl, aby osoba ubiegająca się o wizę miała szansę na przyjęcie.

Rzeczy GRE Mogą Przepowiadać, wywróżyć

W skrócie, wyniki GRE nie pozwalają przewidzieć, jak dobry może być fizyk. Zamiast tego odzwierciedlają wzorce demograficzne (http://www.nature.com/naturejobs/science/articles/10.1038/nj7504-303a), które są równie bezużyteczne w przewidywaniu sukcesu danej osoby w szkole wyższej. Nie ma statystycznie istotnej korelacji między płcią a prawdopodobieństwem ukończenia doktoratu przez osobę w fizyce, mówi Miller, ale tam jest znacząca luka płci w punktacji GRE-P: mediana wyniku dla kobiety w USA wynosi 580, a mediana wyniku dla mężczyzny w USA wynosi 680. Sugeruje to, że obie grupy miałyby podobną szansę na przewagę w Zajęcia wymagane do zostania fizykiem, ale postępując zgodnie z wynikami testów, lepiej oddajemy się przy przyjęciu niż inni.

Co ważne, żadna z tych ocen nie byłaby nawet wystarczająco dobra, aby uzyskać jednego z wnioskodawców na około 25 procent programów - choć Miller był w stanie wykazać znaczne różnice pod względem płci, rasy i pochodzenia etnicznego u tych, którzy osiągnęli punkt odcięcia, a kto nie. I to nawet nie bierze pod uwagę dochód wzorce związane z wynikami testu GRE.

Zdaniem Michela, wielkim wyzwaniem jest to, że GRE nie mówi komisjom rekrutacyjnym niczego o tym, co czyni dobrego fizyka - i może być częściowo odpowiedzialna za fatalne statystyki różnorodności fizyki. Tylko 5 procent doktora fizyki Stopnie przyznawane co roku trafiają do mniej reprezentowanych grup mniejszościowych, a tylko 20 procent trafia do kobiet. Ustalenia Millera sugerują, że w obu tych grupach jest wiele osób, których wyniki testów rzetelnie umieszczają je w odrzuconym stosie, zanim nawet będą miały szansę spróbować swoich sił.

„Jesteśmy dość dobrzy w wyborze osób, które dobrze sobie radzą w kursach, ale oczywiście umiejętności wymagane do osiągnięcia sukcesu na kursach nie są tymi samymi umiejętnościami, które są ważne, aby odnieść sukces jako fizyk badawczy”, mówi Miller. „Idąc dalej, staramy się skupić na rzeczach, które wiemy, że są dobrymi badaczami, których obecny system nie robi zbyt dobrze”.