By John Willingham, Editor
Ostatnio, wyszukiwania Google wymieniają dwie nowe strony, które twierdzą, że ranking publicznych programów uniwersyteckich honors i honors colleges. Ich „rankingi” w większości przypadków noszą bliskie podobieństwo do ocen, które stworzyliśmy od 2012 roku. Pomijając prawdopodobieństwo szerokiego (bez atrybucji) zapożyczenia z naszej pracy chronionej prawem autorskim, faktem jest, że większość danych niezbędnych do stworzenia rankingu lub oceny tych programów nie jest publicznie dostępna. Jesteśmy jedyną stroną lub organizacją w kraju, która ma do nich dostęp, uzyskany dopiero po wielu latach dialogu i współpracy z dziekanami honorowymi i dyrektorami w całym kraju. Można się zastanawiać, jak te nowe rankingi zostały opracowane. Czy były one w większości „pożyczone”?
Nasz proces współpracy dostarcza ogromnych ilości danych. Na przykład, aby obliczyć liczebność klas honorowych, musimy przeanalizować około 10,000 klas honorowych dla każdego dodatku. Wiele z danych wymaganych do tej analizy nie jest dostępnych na stronach honorowych lub nawet na ogólnouniwersyteckich harmonogramach kursów.
I nadal nie „rankingujemy” programów. Zazwyczaj mam opinię, w oparciu o dane, o najlepszych pięciu do dziesięciu programów w kraju wśród tych ocenianych w danej edycji. Dane mogą pokazać, że jeden jest „lepszy” (wyższa suma punktów) niż wszystkie pozostałe. I wtedy myślę o tym, jak mam ważone każdej z 13 kategorii ratingowych. Gdybym zmienił którąkolwiek z nich, oceny uległyby zmianie. Wszystko zależy od metodologii, a żadna metodologia nie jest doskonała. W ostatecznym rozrachunku jest to kwestia oceny. Nie jest to naukowe w najprawdziwszym sensie, nawet z wszystkimi danymi. Mogę dać ci dokładną liczbę dla honoru wielkości klasy w Honors College A, ale proporcja oceny, którą przypisuję do tej dokładnej liczby jest subiektywna.
Jeśli to nie jest nauka, nie przedstawiaj jej jako nauki. Rankingi porządkowe przedstawiają się jako nauka. Ale wyobraź sobie, jak zmieniłyby się rankingi U.S. News, gdyby wszystkie wskaźniki bogactwa instytucjonalnego zostały usunięte lub gdyby selektywność się nie liczyła.
Dzięki współpracy dziekanów honorowych i dyrektorów w całym kraju, otrzymujemy teraz dla każdego ocenianego profilu 10-20 stron dokumentów, z których wiele to twarde dane na temat sekcji klasowych i oferty kursów. Nikt inny nie uzyskuje takiego poziomu unikalnych danych. Nawet wchodząc na stronę internetową i czytając każdy wpis w uniwersyteckim planie zajęć, nie znajdziemy takiej ilości i specyficzności danych, które są nam potrzebne do analizy kursów honorowych. To dlatego, że programy honorowe oferują mieszane i kontraktowe sekcje, które nie są przejrzyste w listach kursów online.
To prowadzi nas do nowych rankingów.
Jeden z nich wymienia „9 najlepszych programów honorowych” w kraju. Oto metodologia:
„Aby ułożyć naszą listę, oceniliśmy krajowe rankingi uczelni honorowych z ostatnich dwóch lat. Oceniliśmy również honors colleges na podstawie wymagań wstępnych, programowych i pozalekcyjnych ofert programowych, nacisku na rozwijanie społeczności studentów honors, możliwości pomocy finansowej oraz unikalnych lub innowacyjnych podejść do doświadczenia edukacyjnego honors.”
Po pierwsze, jak ktoś określa ilościowo „nacisk na wspieranie społeczności studentów honorowych” lub „innowacyjne podejście do doświadczenia edukacyjnego honoru”?
Po drugie, nie znam żadnych „krajowych rankingów uczelni honorowych”, chociaż ogłaszamy 5-10 najlepszych programów, w jednej grupie alfabetycznej, co drugi rok. Programy te są „top” tylko w ramach zestawu danych ocenianych programów dla danej edycji. Żaden program nie jest ogłoszony numerem jeden, numerem trzy, czy numerem dziesięć dla tego zestawu danych, a tym bardziej dla całego uniwersum programów honorowych. Są one zamiast tego umieszczone w grupie. Nasza odmowa namaszczenia jakiegokolwiek programu z konkretnym numerem rankingowym w rzeczywistości spowodowała, że jeden wybitny program przestał z nami współpracować.
Strona „9 Best” nie waha się tego zrobić: „Ranked # 1 wśród honors colleges w Stanach Zjednoczonych, Barrett College ma obecność na ASU czterech kampusów w Phoenix, Mesa, Tempe, i Glendale, Arizona”. Chociaż Barrett, pod jego wieloletnim dziekanem, Markiem Jacobsem, osiąga doskonałe wyniki rok w rok, nie znam żadnego niedawnego rankingu, który w sposób szczególny wymienia Barretta lub jakikolwiek inny program honorowy lub college jako numer 1. To prawda, że Barrett był w najwyższej (pięć mortarboard) grupie we wszystkich naszych edycjach. Ale tak samo było z South Carolina Honors College, Penn State’s Schreyer Honors College, Plan II Honors Program na UT Austin, University Honors Program w Kansas, a od 2016 roku Macaulay Honors College na CUNY. Są to bardzo różne programy, od ekstremalnie dużych (Barrett) do bardzo małych (UT Plan II.)
Inne silne programy są w Clemson, Delaware, Georgia, Houston i Ole Miss. Dane z Maryland, Michigan, i Karolina Północna nie jest już dostępna, ale w jednym lub więcej poprzednich wydaniach, wszystkie otrzymały doskonałe oceny.
The „9 Best” strona powyżej również wymienia Penn State Schreyer, Clemson, i Rutgers Honors College wśród najlepszych kolegiów honorowych, i dodaje UT Plan II, Kansas UHP, i Echols Scholar program w UVA. Następnie w kategorii „najlepszy stosunek jakości do ceny”, wymienia CUNY Macaulay i Alabama Honors College. (Nie uwzględniliśmy Echols po edycji 2014, ponieważ nowa metodologia obowiązująca od 2016 roku wymaga znacznie więcej danych klasowych. Studenci Echols mogą wziąć prawie każdą klasę na UVA i nie jest możliwe ustalenie, które z nich są w danym momencie.)
Inna strona wymienia „50 najlepszych programów honorowych i college’ów”- lista, która nosi niesamowite podobieństwo do programów, które ocenialiśmy przez lata. Lista zawiera kilka programów, które nie były wyraźnie wspomniane, dopóki nie pojawiły się w jednej z naszych książek: New Jersey Institute of Technology, Temple, Colorado State, i CUNY Macaulay, wśród nich.
Tutaj jest metodologia za tą listą:
„Poniżej, mamy skompilowane listę narodu najlepszych honors colleges / programów. Wybór został oparty na następujących wskaźnikach jakości programu.
- Wybiórczość college’u/uniwersytetu (ogólnie)
- Wybiórczość programu honorowego
- Średnia wielkość klasy honorowej
- Liczba klas honorowych
- Dostępność mieszkań honorowych
- Dostępność mieszkań honorowych
- Czy priorytetowa rejestracja jest oferowana studentom honorowym
„Szkoły oznaczone gwiazdką (*) ocenione szczególnie wysoko w kilku wskaźnikach i zostały zaliczone do 20 najlepszych programów honorowych zgodnie z naszą metodologią.”
Wszystkie powyższe informacje znajdują się w naszych publikacjach. Ponadto, „dostępność” mieszkań honorowych może być obliczona tylko wtedy, gdy zna się zarówno liczbę „łóżek” honorowych, jak i liczbę kwalifikujących się studentów honorowych. Prawdziwą liczbę klas honorowych można poznać tylko wtedy, gdy ma się dostęp do pełnych arkuszy kalkulacyjnych, a nie tylko do list online, zwłaszcza tych ograniczonych do strony głównej honorowej. A prawdziwa średnia wielkość klasy podobnie opiera się na bardzo szczegółowych danych, które nie są dostępne w źródłach online. Wreszcie, niektóre z wyników testów wymienionych na stronie są nieprawidłowe i wprowadzające w błąd.
.
