Den øverste datastrateg for U.S. News and World Report’s rangliste over jurastudier, Bob Morse, holdt for et par dage siden et foredrag om ranglisten over jurastudier. Et af de vigtigste samtaleemner var den indflydelse, som GRE-resultater for optagne studerende har på U.S. News’ ranglister. Testresultater tildeles en vægt på 12,5 % i beregningen, så der er en stor score på spil.

På trods af at der er gået et par år med at disse scoringer indgår i metodologien, er der stadig stor forvirring om, hvordan GRE-scoringer præcist står i forhold til LSAT-scoringer ved beregning af ranglisterne for jurastudier. Mange af dem, vi har talt med, mener, at det vil skade deres skoles placering, hvis de accepterer GRE-ansøgere. Med et stigende antal skoler, der accepterer GRE, og med næsten 6 % af dette års ansøgere til jurastudier til dato, der ansøger uden en LSAT-score (generelt bruger de GRE i stedet), bliver spørgsmålet om GRE i ranglisterne stadig mere relevant.

Inputting Test Score Medians

Først et ord om, hvordan testene scorer. LSAT scorer på en skala på 120-180, der bevæger sig i trin på 1 point. Der er også en LSAT Writing-sektion, som ikke scorer, selv om den udleveres til jurastudierne sammen med ansøgningerne. GRE har tre dele, der scorer: Verbal Reasoning og Quantitative Reasoning scorer på en skala på 130-170 og går op eller ned i intervaller på 1 point. Der er også en skriftlig sektion, Analytical Writing, der er scoret på en skala fra 0-6 og bevæger sig i halve point.

Som mange allerede ved, baserer U.S. News ikke medianernes bidrag til skolernes ranglister på intervalskalaen (120-180 LSAT, 130-170 GRE), men snarere på den percentil, der er forbundet med hver score. Både ETS og LSAC offentliggør score-konverteringsdiagrammer, der viser intervalscoren og den tilsvarende percentil, f.eks. er en 162 LSAT ca. den 85. percentil; 155 Verbal GRE er den 68. percentil. ETS og LSAC har begge gjort kopier af deres score-konverteringsdiagrammer tilgængelige online (LSAC har for nylig opdateret deres diagram, men eventuelle ændringer vil være marginale).

Vi vil også bemærke, i tilfælde af at nogen ikke allerede ved det, at den eneste rapporterede score er den højeste score. Dette er grunden til, at skolerne normalt er ligeglade med kandidaternes testgennemgang (inden for rimelige grænser).

GRE vs. LSAT-beregningsforskelle

Her bliver tingene lidt rodet. Den måde, hvorpå de overordnede GRE-percentiler beregnes, er forskellig fra den måde, hvorpå LSAT-percentiler beregnes. LSAC leverer konverteringsdiagrammet, der viser percentilækvivalenten for hver 120-180 LSAT-score (et 170-tal er et 97,5 %-tal, et 150-tal er et 44,7 %-tal osv.). For LSAT er det den samlede percentil, der svarer til intervallet 120-180 point, der er det, der betyder noget. Faktisk ser U.S. News ikke engang underafsnitsscoren for LSAT.

En ansøger kan præstere meget godt eller meget dårligt på et hvilket som helst afsnit i LSAT, men skoler og U.S. News vil aldrig vide det, og de vil heller ikke vide, hvilken indvirkning en sådan præstation i f.eks. analytisk ræsonnement har på den samlede score. Indirekte vil placeringen blive påvirket af resultaterne i underafsnittene ved at hæve eller sænke den samlede score.

Det er ikke tilfældet for GRE. Alle tre underafdelingers resultater rapporteres til skolerne og til U.S. News. U.S. News beregner GRE i ranglisten som et uligevægtet sammensat gennemsnit af skolernes tre medianer for de tre delafsnit: Quantitative Reasoning (40 % vægt), Verbal Reasoning (40 % vægt) og Analytical Writing (20 % vægt).

Sæt, der var en skole med GRE-medianer på Verbal 160, Quantitative 155 og Writing 4,5. Denne skole ville have komponentpercentiler på henholdsvis 86 %, 56 % og 81 %. Det ville give en samlet “sammensat” GRE på 73 %, og disse 73 % ville blive brugt til at beregne ranglister. Til din orientering svarer det nogenlunde til en LSAT-median på 158.

Vægtning af begge tests

Del to af rangordningsformlen er den respektive vægt, der gives til hver test, LSAT og GRE. U.S. News favoriserer ikke nogen af testene på dette område; det er simpelthen proportional repræsentation. Hvis en skole har en indgangsklasse på 90 LSAT-ansøgere og 10 GRE-ansøgere, så får LSAT 90 % af vægten, og GRE får 10 %. I denne forstand behandles LSAT og GRE ens. U.S. News er ligeglad med, om en skole primært indskriver LSAT-ansøgere, GRE-ansøgere eller en blanding af begge dele.

Eksempel

Her er et hypotetisk eksempel. Princeton Law School har en LSAT-median på 161, og 156 indskrivende studerende har LSAT-scoringer. Princetons median LSAT-percentile er 82,7 %.

Princeton har GRE-medianer på 163 Verbal Reasoning, 161 Quantitative Reasoning og 4,5 Analytical Writing, med 19 indskrivende studerende med GRE-scoringer. Derfor er dets GRE-medianpercentiler 93% Verbal, 76% Kvantitativ og 81% Skriftlighed.

Så baseret på de forskellige GRE-underafsnitsscorer har Princeton en samlet GRE-komposit percentil på 83,8%.

Givet antallet af studerende med hver test ville LSAT få tildelt 89,1% samlet vægt og GRE 10,9% samlet vægt.

Princetons samlede testscore-percentil, som beregnet til brug i U.S. News’ rangliste, ville være en 82,8 %. Her hjalp GRE Princeton Law med at hæve sit samlede testpercentilgennemsnit, om end kun en meget lille mængde i betragtning af den relativt lave andel af indskrivende studerende med en GRE.

Det er naturligvis lige så muligt at skabe scenarier, hvor en given skoles GRE-medianer faktisk sænker dens gennemsnitlige testscore-percentil og skader dens samlede placering. Hver gang den “sammensatte” GRE-percentilescore er højere end den percentil, der er forbundet med en skoles LSAT-median, vil GRE hjælpe på ranglisten. Hvis den sammensatte GRE-percentil er lavere end LSAT-medianpercentilen, vil det skade placeringen. Hvor meget på den ene eller den anden måde vil afhænge af, hvor langt den ligger fra LSAT-medianen, og hvor stor en del af den indgående klasse, der blev optaget med en GRE i forhold til en LSAT.

Implikationer

Den mest indlysende konsekvens af alt dette er, at frygten for, at GRE-matrikulanter uundgåeligt skader skolernes rangering, er ubegrundet. Er det muligt? Helt sikkert. På samme måde som det er muligt for ansøgere med lav LSAT at skade ranglisterne, hvis de reducerer en skoles median. Men det behøver ikke at være på den måde. Kyndige optagelsesafdelinger kan bruge GRE til at optage gode kandidater, som også potentielt vil hjælpe skolens placering eller tilføje til klassen på andre måder, på samme måde som de bruger LSAT.

Det andet er, at forholdet mellem GRE-matrikulanterne betyder noget, meget. En given skole kan sagtens optage ansøgere, der har GRE-scores langt under deres samlede LSAT-medianækvivalent, så længe de holder forholdet mellem sådanne optagne og LSAT-ansøgere meget lille. Det er usandsynligt, at nogle få procent af de studerende med GRE-scores, der ligger under gennemsnittet, vil have nogen mærkbar indvirkning på ranglisten. Omvendt skal skolerne, når dette forhold begynder at stige, være meget opmærksomme på, hvordan GRE-kandidaternes score præcist vil påvirke den samlede LSAT/GRE-sammensatte testscore-median. På nuværende tidspunkt er det kun få skoler, der optager nok GRE-ansøgere til at gøre en reel forskel i deres percentiler af testscorer.

En lidt irriterende bivirkning af denne metode er, at optagelsesafdelingerne skal holde nøje øje med, hvordan ansøgerne klarer sig i alle tre underafsnit til GRE, hvordan deres præstationer i hvert underafsnit vil påvirke de samlede sammensatte GRE-medianer og dermed den samlede testmedianpercentilen. De mest indlysende områder, hvor dette kan være problematisk, er i Analytical Writing-scoren, hvor percentilerne falder meget hurtigt – forskellen fra en 4,5 til en 4 er 24 percentilpoint. Selv om testdeltagerne bør gøre deres absolut bedste på alle dele af testen, vil de gøre klogt i at tage dette afsnit særligt alvorligt i betragtning af det procentvise fald, som hvert halvt point repræsenterer. Det betyder også en smule ekstra matematik for de ansatte ved optagelseskontoret i løbet af året, men det er ikke specielt besværligt.

Fremadrettet

Og selv om LSAT fortsat er dominerende, fortsætter antallet og procentdelen af GRE-ansøgere med at stige, og det samme gør antallet af skoler, der accepterer den som en gyldig adgangsprøve. LSAT har en indbygget fordel, idet ansøgere, der har begge prøver i deres register, udelukkende bliver rapporteret på grundlag af deres LSAT-score. En ændring af systemet, så det i højere grad kommer til at ligne prøverne på universitetsniveau, hvor ACT og SAT begge kan tages i betragtning, og hvor ansøgerne og skolerne vælger, hvilken af dem der skal indberettes, ville ændre landskabet betydeligt. Faktisk er det let at skabe en metode, hvor ansøgere, der tager LSAT og GRE, kan indregnes i ranglisten på grundlag af begge resultater.

Da ABA øger sofistikeringen af skolernes rapportering af ikke-LSAT-scoringer på deres årlige 509’er, kunne dette også være med til at skubbe U.S. News metodologiændring.

Med mange jurastudier, der sandsynligvis står over for et stigende budgetpres, vil der være masser af motivation til at opsøge yderligere ansøgere. Vi forventer en fortsat opadgående tendens i antallet af skoler, der tager GRE, hvilket igen kan være med til at skabe pres på U.S. News og ABA for at ændre deres metode.

Bob Morse drøftede flere andre områder, som U.S. News enten overvejer, eller er åben for at overveje. Vi vil skrive vores tanker om disse på et senere tidspunkt, især i forhold til COVID-19’s indvirkning på ranglisterne.