Di John Willingham, Editore
Recentemente, le ricerche su Google stanno elencando due nuovi siti che pretendono di classificare i programmi delle università pubbliche e i college d’onore. Le loro “classifiche” nella maggior parte dei casi hanno una stretta somiglianza con le valutazioni che abbiamo prodotto dal 2012. A parte la probabilità di un prestito esteso (non attribuito) dal nostro lavoro protetto da copyright, il fatto è che la maggior parte dei dati necessari per classificare o valutare questi programmi non è disponibile al pubblico. Siamo l’unico sito o organizzazione nel paese che ha accesso, ottenuto solo dopo molti anni di dialogo e collaborazione con i decani e i direttori di honors di tutta la nazione. Ci si chiede come siano state sviluppate queste nuove classifiche. O sono state per lo più “prese in prestito”?
Il nostro processo collaborativo produce enormi quantità di dati. Per esempio, per calcolare le dimensioni delle classi di onorificenza, dobbiamo analizzare circa 10.000 classi di onorificenza per ogni aggiunta. Molti dei dati necessari per questa analisi non sono disponibili sui siti di onorificenze o anche sugli orari dei corsi a livello universitario.
E ancora non “classifichiamo” i programmi. In genere, ho un’opinione, basata sui dati, sui migliori cinque o dieci programmi della nazione tra quelli valutati in una data edizione. I dati possono mostrare che uno è “migliore” (un totale di punti più alto) di tutti gli altri. E poi penso a come ho ponderato ciascuna delle 13 categorie di valutazione. Se dovessi cambiarne una qualsiasi, le valutazioni cambierebbero. Tutto è guidato dalla metodologia, e la metodologia di nessuno è perfetta. È una questione di giudizio in ultima analisi. Non è scientifico nel vero senso della parola, anche con tutti i dati coinvolti. Posso darvi una cifra esatta per le dimensioni delle classi Honors dell’Honors College A, ma la proporzione di valutazione che assegno a quella cifra esatta è soggettiva.
Se non è scienza, non presentarla come tale. Le classifiche ordinali si presentano come scienza. Ma immaginate come cambierebbero le classifiche di U.S. News se tutte le metriche di ricchezza istituzionale fossero rimosse o se la selettività non contasse.
Grazie alla cooperazione dei decani e dei direttori di honors di tutta la nazione, ora riceviamo per ogni profilo valutato 10-20 pagine di documenti, molti dei quali dati concreti sulle sezioni di classe e sulle offerte di corsi. Nessun altro ottiene questo livello di dati unici. Anche andando online e leggendo ogni voce del calendario dei corsi dell’università non si troverà il volume e la specificità dei dati di cui abbiamo bisogno per le analisi dei corsi honors. Questo perché i programmi honors offrono sezioni miste e a contratto che non sono trasparenti negli elenchi dei corsi online.
Questo ci porta alle nuove classifiche.
Una elenca “The 9 Best Honors Programs” nella nazione. Ecco la metodologia:
“Per mettere insieme la nostra lista, abbiamo valutato le classifiche nazionali degli honors college degli ultimi due anni. Abbiamo anche valutato gli honors college in base ai requisiti di ammissione, alle offerte di programmi curriculari ed extracurriculari, all’enfasi sulla promozione di una comunità di studenti honors, alle opportunità di aiuti finanziari e agli approcci unici o innovativi all’esperienza educativa honors.”
In primo luogo, come si fa a quantificare “l’enfasi sulla promozione di una comunità di studenti onorari” o “approcci innovativi all’esperienza educativa onoraria”?
In secondo luogo, non conosco nessuna “classifica nazionale degli honors college”, anche se annunciamo i primi 5-10 programmi, in un gruppo alfabetico, ogni due anni. Questi programmi sono “top” solo all’interno del set di dati dei programmi valutati per una data edizione. Nessun programma è dichiarato numero uno, o numero tre, o numero dieci per quella serie di dati, tanto meno per l’intero universo dei programmi honors. Sono invece inseriti in un gruppo. Il nostro rifiuto di consacrare qualsiasi programma con un numero di classifica specifico ha, infatti, fatto sì che un programma importante abbia smesso di collaborare con noi.
Il sito “9 Best” non esita a farlo: “Classificato al primo posto tra i college honors negli Stati Uniti, il Barrett College è presente nei quattro campus dell’ASU a Phoenix, Mesa, Tempe e Glendale, Arizona”. Anche se Barrett, sotto il suo decano di lunga data, Mark Jacobs, raggiunge risultati eccellenti anno dopo anno, non sono a conoscenza di nessuna classifica recente che elenchi specificamente Barrett o qualsiasi altro programma o college onorifico come numero 1. È vero che Barrett è stato nel gruppo più alto (cinque mortarboard) in tutte le nostre edizioni. Ma anche il South Carolina Honors College, lo Schreyer Honors College della Penn State, il Plan II Honors Program della UT Austin, l’University Honors Program del Kansas e, dal 2016, il Macaulay Honors College del CUNY. Si tratta di programmi molto diversi, che vanno da estremamente grandi (Barrett) a molto piccoli (UT Plan II.)
Altri programmi forti sono a Clemson, Delaware, Georgia, Houston e Ole Miss. I dati di Maryland, Michigan e North Carolina non sono più disponibili, ma in una o più edizioni precedenti, tutti hanno ricevuto valutazioni eccellenti.
Il sito “9 Best” di cui sopra elenca anche Penn State Schreyer, Clemson, e Rutgers Honors College tra i migliori college honors, e aggiunge UT Plan II, Kansas UHP, e il programma Echols Scholar a UVA. Poi, in una categoria “il miglior bang per il dollaro”, elenca CUNY Macaulay e l’Alabama Honors College. (Non abbiamo incluso Echols dopo l’edizione del 2014 perché la nuova metodologia in vigore dal 2016 richiede molti più dati di classe. Gli studenti Echols possono prendere quasi tutte le classi all’UVA, e non è possibile determinare quali sono in un dato momento.)
Un altro sito elenca “i 50 migliori programmi e college onorifici” – un elenco che ha una sorprendente somiglianza con i programmi che abbiamo valutato nel corso degli anni. L’elenco include diversi programmi che non sono stati menzionati in modo prominente fino a quando non sono apparsi in uno dei nostri libri: New Jersey Institute of Technology, Temple, Colorado State, e CUNY Macaulay, tra questi.
Qui c’è la metodologia dietro questa lista:
“Di seguito, abbiamo compilato una lista dei migliori college/programmi honors della nazione. La selezione si è basata sui seguenti indicatori di qualità del programma.
- La selettività del college/università (in generale)
- La selettività del programma honors
- La dimensione media della classe honors
- Numero di classi honors
- Disponibilità di alloggi honors
- Se la registrazione prioritaria è offerta agli studenti honors
“Le scuole segnate con un asterisco (*) hanno ottenuto un punteggio particolarmente alto su diversi indicatori e sono state classificate tra i primi 20 programmi honors secondo la nostra metodologia.”
Tutte le informazioni di cui sopra sono nelle nostre pubblicazioni. Inoltre, la “disponibilità” di alloggi honors può essere calcolata solo se si conosce sia il numero di “letti” honors che il numero di studenti honors idonei. Si può conoscere il vero numero di classi honors solo se si ha accesso a fogli di calcolo completi, non solo agli elenchi online, specialmente quelli limitati alla homepage honors. E anche la vera dimensione media delle classi dipende da dati estremamente dettagliati non disponibili da fonti online. Infine, alcuni dei punteggi dei test elencati sul sito sono errati e fuorvianti.
