Hlavní datový stratég žebříčku právnických škol U.S. News and World Report Bob Morse před několika dny přednášel o žebříčcích právnických škol. Jedním z hlavních témat rozhovoru byl vliv výsledků GRE u přijatých studentů na žebříčky U.S. News. Výsledkům testů je při výpočtu přiřazena váha 12,5 %, takže v sázce je hodně bodů.

Přestože je to již několik let, co se tyto výsledky započítávají do metodiky, stále panují velké nejasnosti ohledně toho, jak přesně se výsledky GRE srovnávají s výsledky LSAT při výpočtu žebříčku právnických škol. Mnoho lidí, se kterými jsme mluvili, si myslí, že přijetí uchazečů s GRE poškodí hodnocení jejich školy. S rostoucím počtem škol, které přijímají GRE, a s téměř 6 % letošních uchazečů o studium na právnické fakultě, kteří se doposud přihlásili bez skóre LSAT (místo něj zpravidla používají GRE), se otázka GRE v žebříčcích stává stále aktuálnější.

Zadávání mediánů skóre testů

Nejprve několik slov o tom, jak se testy hodnotí. Test LSAT je hodnocen na stupnici 120-180 bodů, která se pohybuje po 1 bodu. Existuje také část LSAT Writing, která se neboduje, ačkoli se poskytuje právnickým fakultám spolu s přihláškami. GRE má tři bodované části: Verbal Reasoning a Quantitative Reasoning jsou hodnoceny na stupnici 130-170 a pohybují se nahoru nebo dolů po 1 bodu. Existuje také bodovaná písemná část, Analytical Writing, která je na stupnici 0-6 a pohybuje se po půlbodech.

Jak již mnozí vědí, U.S. News nezakládá příspěvky mediánů do žebříčku škol na intervalové stupnici (120-180 LSAT, 130-170 GRE), ale na percentilu spojeném s každým skóre. ETS i LSAC zveřejňují převodní tabulky skóre, které ukazují intervalové skóre a jemu odpovídající percentil, např. 162 LSAT je přibližně 85. percentil; 155 Verbal GRE je 68. percentil. ETS i LSAC zpřístupnily kopie svých převodních tabulek skóre na internetu (LSAC bude mít nedávno aktualizovanou tabulku, i když případné změny budou marginální).

Rádi bychom také poznamenali, pokud to ještě někdo neví, že jediné uváděné skóre je to nejvyšší. To je důvod, proč školy obvykle nezajímají opakované testy uchazečů (v rozumných mezích).

Rozdíly ve výpočtu GRE vs. LSAT

Tady se to trochu zamotává. Způsob výpočtu celkových percentilů GRE se liší od způsobu výpočtu percentilů LSAT. LSAC poskytuje převodní tabulku, která ukazuje percentilový ekvivalent pro každý výsledek 120-180 bodů LSAT (170 bodů je 97,5 %, 150 bodů je 44,7 % atd.). Pro LSAT je důležitý celkový percentilový ekvivalent skóre v intervalu 120-180. Ve skutečnosti U.S. News nikdy nevidí ani dílčí skóre pro LSAT.

Uchazeč může podat velmi dobrý nebo velmi špatný výkon v kterékoli sekci testu LSAT, ale školy ani U.S. News se to nikdy nedozví, stejně jako se nedozví, jaký vliv má takový výkon například v Analytical Reasoning na celkové skóre. Nepřímo bude pořadí ovlivněno výkonem v dílčích sekcích tím, že se zvýší nebo sníží celkové skóre.

To není případ zkoušky GRE. Výsledky všech tří dílčích sekcí jsou hlášeny školám a časopisu U.S. News. U.S. News počítá GRE v žebříčku jako nerovnoměrně vážený složený průměr mediánů tří dílčích sekcí školy: Kvantitativní uvažování (váha 40 %), Verbální uvažování (váha 40 %) a Analytické psaní (váha 20 %).

Předpokládejme, že existuje škola, jejíž mediány GRE jsou: verbální 160, kvantitativní 155 a analytické psaní 4,5. Tato škola by měla percentily složek 86 %, 56 % a 81 %. To by dohromady znamenalo 73 % „složeného“ GRE a těchto 73 % by se použilo pro výpočet pořadí. Pro vaši informaci, to zhruba odpovídá mediánu testu LSAT 158.

Váhy obou testů

Druhou částí vzorce pro sestavení žebříčku je příslušná váha, kterou mají jednotlivé testy, LSAT a GRE. U.S. News v této oblasti neupřednostňuje ani jeden z testů; jde prostě o poměrné zastoupení. Pokud na školu nastupuje 90 uchazečů s LSAT a 10 uchazečů s GRE, pak LSAT získá 90 % váhy a GRE 10 %. V tomto smyslu se s testy LSAT a GRE zachází stejně. U.S. News nezáleží na tom, zda škola přijímá především uchazeče s LSAT, uchazeče s GRE nebo kombinaci obou.

Příklad

Tady je hypotetický příklad. Princeton Law School má medián LSAT 161, přičemž 156 imatrikulovaných studentů má skóre LSAT. Medián percentilu LSAT na Princetonu je 82,7 %.

Princeton má medián GRE 163 Verbal Reasoning, 161 Quantitative Reasoning a 4,5 Analytical Writing, přičemž 19 imatrikulovaných studentů má skóre GRE. Její mediánové percentily GRE jsou tedy 93 % Verbal, 76 % Quantitative a 81 % Writing.

Na základě různých dílčích výsledků GRE má tedy Princeton celkový složený percentil GRE 83,8 %.

Vzhledem k počtu studentů s jednotlivými testy by LSAT byla přiřazena celková váha 89,1 % a GRE 10,9 %.

Princetonský percentil celkového skóre testu, vypočítaný pro použití v žebříčku U.S. News, by byl 82,8 %. V tomto případě pomohl test GRE právnické fakultě Princeton zvýšit její celkový percentilový průměr, i když jen velmi málo vzhledem k relativně nízkému podílu imatrikulovaných studentů s testem GRE.

Stejně tak je samozřejmě možné vytvořit scénáře, kdy medián GRE dané škole ve skutečnosti snižuje její průměrný percentil testů a poškozuje její celkové umístění. Kdykoli je „složený“ percentil skóre GRE vyšší než percentil spojený s mediánem LSAT dané školy, GRE pomůže pro pořadí. Pokud je složený percentil GRE nižší než percentil spojený s mediánem LSAT, pořadí to poškodí. Jak moc tak či onak bude záležet na tom, jak daleko je od mediánu LSAT, a na tom, jak velká část nastupujícího ročníku byla přijata s GRE oproti LSAT.

Důsledky

Nejzřejmějším důsledkem toho všeho je, že obavy z toho, že imatrikulanti s GRE nevyhnutelně poškodí pořadí škol, jsou neopodstatněné. Je to možné? Rozhodně ano. Stejně jako je možné, že uchazeči s nízkou úrovní LSAT poškodí žebříčky, pokud sníží medián škol. Ale nemusí to tak být. Prozíravá přijímací oddělení mohou využít GRE k přijetí skvělých uchazečů, kteří také potenciálně pomohou hodnocení školy nebo doplní třídu jiným způsobem, stejně jako využívají LSAT.

Druhou věcí je, že na poměru imatrikulací GRE záleží, a to hodně. Daná škola může pohodlně přijmout uchazeče, kteří mají skóre GRE výrazně nižší než celkový medián ekvivalentu LSAT, pokud udrží poměr takto přijatých uchazečů k uchazečům s LSAT velmi malý. Je nepravděpodobné, že by několik procent studentů s výsledky GRE pod mediánem mělo nějaký znatelný dopad na pořadí. Naopak, když se tento poměr začne zvyšovat, musí školy velmi svědomitě dbát na to, jak přesně výsledky kandidátů GRE ovlivní celkový medián výsledků složeného testu LSAT/GRE. V současné době jen několik škol přijímá dostatečný počet uchazečů o GRE, aby se jejich percentily výsledků testů skutečně změnily.

Mírně nepříjemným vedlejším efektem této metodiky je, že přijímací oddělení musí pečlivě sledovat, jak si uchazeči vedou ve všech třech dílčích částech testu GRE, jak jejich výsledky v jednotlivých dílčích částech ovlivní celkový medián složeného testu GRE, a tedy i celkový percentil mediánu testu. Nejzřetelnější oblastí, kde to může být problematické, jsou výsledky v testu Analytical Writing, kde percentily velmi rychle klesají – rozdíl mezi 4,5 a 4 je 24 percentilových bodů. Ačkoli by se účastníci testu měli snažit o co nejlepší výsledky ve všech částech testu, vzhledem k percentilovému propadu, který představuje každý půlbod, by bylo dobré brát tuto část testu obzvlášť vážně. To také znamená trochu matematiky navíc pro přijímací úředníky v průběhu celého roku, i když to není nic zvlášť náročného.

Výhled do budoucna

Ačkoli LSAT zůstává dominantní, počet a procento uchazečů o GRE stále roste, stejně jako počet škol, které jej akceptují jako platný test pro přijímací řízení. LSAT má však zabudovanou výhodu v tom, že uchazeči, kteří mají v evidenci oba testy, jsou nahlášeni pouze na základě výsledku LSAT. Změna systému, který by se více podobal testování na bakalářském stupni, kdy by bylo možné zohlednit jak ACT, tak SAT, přičemž uchazeči a školy by si vybírali, které z nich budou vykazovat, by výrazně změnila situaci. Ve skutečnosti je snadné vytvořit metodiku, podle níž by uchazeči, kteří skládají LSAT a GRE, mohli být do žebříčku zahrnuti na základě obou výsledků.

Jakmile ABA zvýší sofistikovanost vykazování výsledků jiných než LSAT školami v jejich výročních 509, mohlo by to také pomoci prosadit změnu metodiky U.S. News.

Vzhledem k tomu, že mnohé právnické fakulty pravděpodobně čelí rostoucímu tlaku na rozpočet, bude zde dostatek motivace k hledání dalších uchazečů. Očekáváme pokračující vzestupný trend počtu škol, které přijímají testy GRE, což by zase mohlo přispět k vytvoření tlaku na U.S. News a ABA, aby změnily svůj přístup.

Bob Morse hovořil o několika dalších oblastech, které U.S. News zvažuje nebo je otevřená jejich zvažování. Své názory na ně napíšeme později, zejména pokud jde o vliv COVID-19 na žebříčky.