U.S. News and World Reportin lakikoulujen rankingin päätietostrategi Bob Morse piti muutama päivä sitten puheen lakikoulujen rankingista. Yksi tärkeimmistä keskustelunaiheista oli hyväksyttyjen opiskelijoiden GRE-pisteiden vaikutus U.S. Newsin rankingiin. Testituloksilla on 12,5 prosentin painoarvo laskennassa, joten kyse on paljon pisteitä.

Huolimatta siitä, että nämä pisteet vaikuttavat menetelmiin jo muutaman vuoden ajan, on edelleen paljon epäselvyyttä siitä, miten GRE-pisteet tarkalleen ottaen vastaavat LSAT-pisteitä oikeustieteellisten oppilaitosten sijoituksia laskettaessa. Monet ihmiset, joiden kanssa olemme keskustelleet, ajattelevat, että GRE-hakijoiden hyväksyminen vahingoittaa heidän koulunsa sijoitusta. Koska yhä useammat koulut hyväksyvät GRE-testin ja koska lähes 6 prosenttia tämän vuoden hakijoista hakee ilman LSAT-pisteitä (yleensä he käyttävät sen sijaan GRE-testiä), GRE-testin merkitys rankingissa on yhä tärkeämpi.

Kokeiden pistemediaanien laskeminen

Aluksi pari sanaa siitä, miten testit pisteytetään. LSAT pisteytetään asteikolla 120-180, ja pisteet vaihtelevat yhden pisteen välein. LSAT:ssa on myös LSAT Writing -osio, jota ei pisteytetä, vaikka se toimitetaan oikeustieteellisille tiedekunnille hakemusten yhteydessä. GRE-kokeessa on kolme pisteytettävää osiota: Verbaalinen päättely (Verbal Reasoning) ja kvantitatiivinen päättely (Quantitative Reasoning) pisteytetään asteikolla 130-170, ja ne nousevat tai laskevat yhden pisteen askelin. Lisäksi on yksi pisteytettävä kirjallinen osio, Analytical Writing, joka arvioidaan asteikolla 0-6, ja siinä siirrytään puolen pisteen askelin.

Kuten monet jo tietävätkin, U.S. News ei perusta mediaanien osuutta koulujen rankingissa intervalliasteikon (120-180 LSAT, 130-170 GRE) perusteella vaan pikemminkin kuhunkin pistemäärään liittyvän prosenttiosuuden perusteella. Sekä ETS että LSAC julkaisevat pistemäärän muuntotaulukoita, joista käy ilmi intervallipistemäärä ja sitä vastaava prosenttiluku, esimerkiksi 162 LSAT-pistettä vastaa noin 85. prosenttilukua; 155 verbaalista GRE-pistettä vastaa 68. prosenttilukua. ETS ja LSAC ovat molemmat julkaisseet kopiot pisteiden muuntotaulukoista verkossa (LSAC on hiljattain päivittänyt taulukkonsa, mutta mahdolliset muutokset ovat marginaalisia).

Huomauttaisimme myös, jos joku ei vielä tiedä, että ainoa ilmoitettu pistemäärä on korkein pistemäärä. Tämän takia koulut eivät yleensä välitä ehdokkaiden testien uusimisesta (kohtuullisissa rajoissa).

GRE vs. LSAT -laskennan erot

Tässä kohtaa asiat menevät hieman sekaisin. Se, miten GRE:n yleiset prosenttiluvut lasketaan, eroaa siitä, miten LSAT:n prosenttiluvut lasketaan. LSAC tarjoaa muuntokaavion, josta käy ilmi kunkin 120-180 LSAT-pistemäärän vastaava prosenttiluku (170 on 97,5 %, 150 on 44,7 % jne.). LSAT:n osalta merkitystä on 120-180 pistettä vastaavalla kokonaisprosenttiosuudella. Itse asiassa U.S. News ei koskaan edes näe LSAT:n osa-alueiden pistemääriä.

Hakija voi suoriutua erittäin hyvin tai erittäin huonosti mistä tahansa LSAT:n osiosta, mutta koulut ja U.S. News eivät koskaan tiedä sitä, eivätkä ne tiedä tällaisen suorituksen vaikutusta esimerkiksi Analytical Reasoning -osiossa kokonaispisteisiin. Osa-alueiden suoritukset vaikuttavat sijoitukseen epäsuorasti nostamalla tai laskemalla kokonaispistemäärää.

Se ei päde GRE:n kohdalla. Kaikkien kolmen osa-alueen pisteet ilmoitetaan kouluille ja U.S. Newsille. U.S. News laskee GRE:n rankingissa koulun kolmen osa-alueen mediaanien epätasaisesti painotettuna yhdistettynä keskiarvona: Quantitative Reasoning (40 prosentin painoarvo), Verbal Reasoning (40 prosentin painoarvo) ja Analytical Writing (20 prosentin painoarvo).

Oletetaan, että on koulu, jonka GRE:n mediaanit ovat Verbal 160, Quantitative 155 ja Writing 4,5. Tämän koulun komponenttiprosenttiilit olisivat vastaavasti 86 %, 56 % ja 81 %. Tämä olisi yhteensä 73% ”komposiitti” GRE, ja tätä 73%:a käytettäisiin sijoitusten laskemiseen. Tiedoksi vain, että se vastaa suunnilleen 158 LSAT:n mediaania.

Kummankin testin painotus

Ranking-kaavan toinen osa on kummankin testin, LSAT:n ja GRE:n, painoarvo. U.S. News ei suosi kumpaakaan testiä tällä alueella; kyse on yksinkertaisesti suhteellisesta edustuksesta. Jos koulun aloittavassa luokassa on 90 LSAT-hakijaa ja 10 GRE-hakijaa, LSAT saa 90 % painoarvosta ja GRE 10 %. Tässä mielessä LSAT- ja GRE-koetta kohdellaan tasavertaisesti. U.S. News ei välitä siitä, otetaanko kouluun ensisijaisesti LSAT-hakijoita, GRE-hakijoita vai sekoitetaanko molempia.

Esimerkki

Tässä hypoteettinen esimerkki. Princeton Law Schoolin LSAT:n mediaani on 161, ja 156 ilmoittautuvalla opiskelijalla on LSAT-pisteet. Princetonin LSAT:n mediaaniprosentti on 82,7 %.

Princetonin GRE:n mediaani on 163 Verbal Reasoning, 161 Quantitative Reasoning ja 4.5 Analytical Writing, ja 19 opiskelijalla on GRE-pisteet. Näin ollen sen GRE:n mediaanipersentiilit ovat 93 % Verbaalinen, 76 % Kvantitatiivinen ja 81 % Kirjoittaminen.

Siten GRE:n eri osa-alueiden pisteiden perusteella Princetonin GRE:n yhteenlaskettu kokonaisprosentti on 83,8 %.

Kunkin kokeen suorittaneiden opiskelijoiden lukumäärän perusteella LSAT:lle annettaisiin 89,1 %:n painoarvo ja GRE:lle 10,9 %:n kokonaispaino.

Princetonin koepisteiden kokonaisprosentti, sellaisena kuin se on laskettu käytettäväksi U.S. Newsin rankingissa, olisi 82,8 %. Tässä tapauksessa GRE auttoi Princeton Law’ta nostamaan kokeen kokonaisprosenttiosuuden keskiarvoa, vaikkakin vain hyvin vähän, kun otetaan huomioon GRE:n suorittaneiden opiskelijoiden suhteellisen pieni osuus.

Yhtä mahdollista on tietysti luoda skenaarioita, joissa tietyn koulun GRE-mediaani itse asiassa laskee sen keskimääräistä koepisteprosenttilukua ja vahingoittaa sen yleistä sijoitusta. Aina kun ”yhdistetty” GRE-prosenttipistemäärä on korkeampi kuin koulun LSAT:n mediaaniin liittyvä prosenttipiste, GRE tulee auttamaan rankingissa. Jos yhdistetty GRE-prosenttiosuus on LSAT:n mediaaniprosenttiosuuden alapuolella, se haittaa sijoitusta. Kuinka paljon, riippuu siitä, kuinka kaukana se on LSAT:n mediaanista, ja siitä, kuinka suuri osa sisäänpäässeistä hyväksyttiin GRE:llä ja kuinka suuri osa LSAT:lla.

Implikaatiot

Kaikkein ilmeisin seuraus tästä kaikesta on se, että pelko siitä, että GRE-matrikkelit vahingoittavat väistämättä koulujen ranking-listoja, on perusteeton. Onko se mahdollista? Ehdottomasti. Samalla tavalla kuin on mahdollista, että alhaisen LSAT-arvosanan hakijat vahingoittavat rankingia, jos he alentavat koulun mediaania. Mutta sen ei tarvitse olla niin. Asiantuntevat sisäänotto-osastot voivat käyttää GRE-koetta hyvien hakijoiden hyväksymiseen, jotka mahdollisesti myös auttavat koulun sijoitusta tai lisäävät luokkaa muilla tavoin, aivan samalla tavalla kuin LSAT-koetta.

Toiseksi GRE-matrikkelien suhteella on väliä, paljonkin. Tietty koulu voi mukavasti ottaa sisään hakijoita, joiden GRE-pisteet ovat reilusti LSAT:n mediaanipistemäärän alapuolella, kunhan se pitää tällaisten sisäänpääsyjen ja LSAT-hakijoiden suhdeluvun hyvin pienenä. Muutaman prosentin osuus opiskelijoista, joiden GRE-pisteet ovat alle keskiarvon, ei todennäköisesti vaikuta merkittävästi sijoitukseen. Sitä vastoin kun tämä suhde alkaa kasvaa, koulujen on oltava hyvin tarkkoja siitä, miten GRE-ehdokkaiden pistemäärät vaikuttavat LSAT/GRE-testien yhteenlasketun pistemäärän mediaaniin. Tällä hetkellä vain muutama koulu ottaa sisään niin paljon GRE-hakijoita, että niiden testitulosprosenttiileilla on todellista merkitystä.

Hieman ärsyttävä sivuvaikutus tästä menetelmästä on se, että sisäänpääsyosastojen on seurattava tarkkaan, miten hakijat suoriutuvat GRE-testin kaikista kolmesta osa-alueesta ja miten heidän suorituksensa kussakin osa-alueessa vaikuttavat GRE-testin kokonaismediaaneihin ja siten koko testin mediaanipersentiiliin. Selkeimmin tämä voi olla ongelmallista analyyttisen kirjoittamisen pisteissä, joissa prosenttiluvut laskevat hyvin nopeasti – ero 4,5:stä 4:ään on 24 prosenttiyksikköä. Vaikka kokeen osallistujien tulisi tehdä parhaansa kaikissa kokeen osioissa, heidän kannattaisi suhtautua kyseiseen osioon erityisen vakavasti, kun otetaan huomioon, että jokainen puoli pistettä merkitsee prosenttiyksikön pudotusta. Tämä tarkoittaa myös sitä, että pääsykoevastaavat joutuvat tekemään ylimääräistä matematiikkaa koko vuoden ajan, vaikkakaan ei mitään erityisen raskasta.

Katsoen tulevaisuuteen

Vaikka LSAT on edelleen hallitseva testi, GRE:n hakijoiden määrä ja prosenttiosuus jatkaa kasvuaan, samoin kuin niiden koulujen määrä, jotka hyväksyvät sen kelvollisena testinä sisäänpääsyä varten. LSAT:lla on kuitenkin se etu, että hakijat, jotka ovat suorittaneet molemmat kokeet, ilmoitetaan ainoastaan LSAT-pisteiden perusteella. Järjestelmän muuttaminen siten, että se muistuttaisi enemmän perustutkintokokeita, joissa sekä ACT- että SAT-testit voidaan ottaa huomioon ja hakijat ja koulut voivat valita, kumman he ilmoittavat, muuttaisi tilannetta merkittävästi. Itse asiassa on helppo luoda menetelmä, jossa LSAT:n ja GRE:n suorittaneet hakijat voitaisiin ottaa huomioon rankingissa molempien pisteiden perusteella.

Kun ABA lisää koulujen muiden kuin LSAT-pisteiden raportoinnin hienostuneisuutta vuotuisissa 509:ssä, tämä voisi myös edistää U.S. Newsin menetelmämuutosta.

Koska moniin oikeustieteellisiin kouluihin kohdistuu todennäköisesti kasvavia budjettipaineita, on runsaasti motivaatiota hakea lisää hakijoita. Odotamme, että GRE-testin ottavien koulujen määrä jatkaa kasvuaan, mikä puolestaan voi osaltaan luoda painetta U.S. Newsille ja ABA:lle muuttaa lähestymistapaansa.

Bob Morse käsitteli useita muita alueita, joita U.S. News joko harkitsee tai on valmis harkitsemaan. Kirjoitamme ajatuksemme niistä myöhemmin, erityisesti siltä osin kuin ne liittyvät COVID-19:n vaikutukseen rankingiin.