Undervisningsrammeverk - Teaching Excellence Framework

The Teaching Excellence and Student Outcomes Framework ( TEF ) er en kontroversiell myndighetsvurdering av kvaliteten på grunnskoleundervisning ved universiteter og andre leverandører av høyere utdanning i England , som kan brukes fra 2020 for å avgjøre om statlig finansierte tilbydere har lov til å øke studieavgiften. . Høyere utdanningsleverandører fra andre steder i Storbritannia har lov til å melde seg, men vurderingen har ingen innvirkning på finansieringen. TEF rangerer universitetene som gull , sølv eller bronse , i rekkefølge etter kvaliteten på undervisningen. De første resultatene ble publisert i juni 2017. Dette ble ansett som et "prøveår" (selv om de ikke-foreløpige klassifiseringene som gis, er gyldige i 3 år) og skal følges av en "leksjonert læringsøvelse" som vil mate inn i 2018 TEF og langsiktige planer for vurdering på fagnivå.

I oktober 2017 ble den offisielle tittelen på øvelsen offisielt omdøpt fra Teaching Excellence Framework til Teaching Excellence and Student Outcomes Framework .

Rangeringer

TEF-rangeringene er basert på statistikk som frafall, resultater fra undersøkelser av studenttilfredshet og sysselsettingsgrad. Disse vurderes av eksperter innen undervisning og læring som gir en anbefaling til et TEF-panel, som inkluderer akademikere og studenter, som vil gi den endelige prisen. Universiteter måles på tre områder: undervisningskvalitet, læringsmiljø, studentresultater og læringsgevinst. For 2017 vil alle institusjoner som oppfyller grunnleggende standarder få lov til å øke avgiftene. De første vurderingene skulle ha blitt kunngjort 14. juni 2017, etter at publiseringen var forsinket fra mai på grunn av stortingsvalget i Storbritannia , men ble utsatt til 22. juni etter at valget resulterte i et hengt parlament . Det ble forventet at 20–30% av institusjonene skulle bli vurdert gull, 50–60% sølv og 20% ​​bronse. Den faktiske fordelingen, på alle institusjoner, inkludert videreutdanning og alternative leverandører, var 26% gull, 50% sølv, 24% bronse.

Rangeringene er beskrevet av Department of Education som:

  • Gull : "tilbudet er jevnlig enestående og av høyeste kvalitet som finnes i UK Higher Education sektor"
  • Silver : "tilbudet er av høy kvalitet og overskrider betydelig og konsekvent den grunnleggende kvalitetsterskelen som forventes av UK Higher Education"
  • Bronse : "tilbudet er av tilfredsstillende kvalitet"

Institusjoner som ikke går inn i TEF eller som ikke oppfyller minimumskvalitetsgrensen, vil ikke motta en pris. Institusjoner med utilstrekkelig data for en fullstendig vurdering, men som oppfyller kvalitetsstandardene, kan motta en foreløpig pris uten vurdering.

TEF-rangeringene måler ikke absolutt resultat, som tradisjonelle universitetsliga-tabeller, men heller ytelse mot referanseverdier basert på studentinntaket. Et universitet med et lavt absolutt frafall på 2% og en referanseindeks på 2% vil således bli vurdert dårligere på dette tiltaket enn et universitet med en mye høyere absolutt frafall på 8%, men en referanse på 11%. Karakterene er således et mål på om et universitet overgår, oppfyller eller faller under forventningene basert på profilen til studenter som er tatt opp og undervist i fag.

Den "innledende hypotesen" for rangeringene er basert på seks kjernemetoder, for hvilke institusjoner får et dobbelt-positivt flagg, et positivt flagg, ingen flagg, et negativt flagg eller et dobbelt-negativt flagg, avhengig av om de overstiger eller mangler av deres referanseindeks etter visse terskler. Disse er:

Institusjoner mottok tre eller flere positive flagg og ingen negative flagg regnes i utgangspunktet som gull; institusjoner med to eller flere negative flagg blir opprinnelig ansett som bronse; alle andre institusjoner blir i utgangspunktet betraktet som sølv. Denne innledende hypotesen kan deretter endres av panelet basert på de skriftlige innleveringene og 'delte' beregningene (en fordeling av kjernemålingene etter kjønn, etnisitet, alder, funksjonshemning, etc.). Mens omfanget av disse modifikasjonene var forventet å være begrenset, ble det gjort endringer i den opprinnelige hypotesen i 22% av tilfellene. Blant høyere utdanningsinstitusjoner og alternative tilbydere ble tre nedgradert, 17 ble oppgradert fra bronse til sølv, 15 ble oppgradert fra sølv til gull, og en ble oppgradert fra bronse til gull.

Etter publiseringen av resultatene fra "prøveåret" for 2017, skal TEF gjennomgå en "leksjonert øvelse" som vil mate inn i 2018-øvelsen, samt en fullstendig uavhengig gjennomgang av bruken av statistikk innen 2020.

Reaksjon på 2017-resultatene

Etter publisering av resultatene sa fungerende direktør for Russell Group at "TEF måler ikke absolutt kvalitet, og vi har reist bekymring for at den nåværende tilnærmingen til flagg og benchmarking kan ha en betydelig utilsiktet innvirkning." mens visekansler ved University of Southampton , som ble rangert som bronse, sa "Det er ingen logikk i vårt resultat i det hele tatt", og at han hadde "dype bekymringer for dets subjektive vurdering, dets manglende gjennomsiktighet og med forskjellige referanser for hver institusjon å fjerne enhver følelse av rettferdighet og likestilling ". Han påpekte også at det å overskride referanseverdien etter det TEF anså som en betydelig margin, var mye enklere for institusjoner med lavere referanseverdier - for å slå referanseindeksen for frafall på 4,5% med de nødvendige to prosentpoengene, måtte Southampton ha oppnådd et frafall på bare 2,5% - noe som førte til at han konkluderte med at "benchmarking er grunnleggende feil".

Analyse av resultatene og panelet uttalelser fra tynnank Wonkhe politikk for høyere utdanning bemerket at University of Nottingham , som hadde et positivt flagg for høyt kvalifisert arbeid og et negativt flagg for studenttilfredshet, ble tildelt gull, "antagelsen om at et negativt flagg ville utelukke at Gold har blitt omgjort av panelet, kanskje fordi TEF-veiledningen også styrte panelet bort fra overdreven tillit til NSS-score. " Tilsvarende overvann University of Bristol to negative flagg - begge i NSS-relaterte kategorier - for å bli tildelt sølv, men University of Liverpool , med samme antall negative flagg, mottok bronse, "kanskje fordi man ikke var i en NSS- avledet kategori ". Wonkhe bemerket videre at "det virker pervers at en institusjon - i Bristols tilfelle - som" spesielt "var under referanseindeksen, skulle få et høyere utfall enn Liverpool som uttalelsen er mykere for" og at "for institusjoner med lignende datamønster som Bristols, som Southampton (med to negative flagg i de samme kategoriene, men som ikke ble oppgradert til Silver), kunne det være noe velfortjent sinne. Og hvis du ser til Durham, med sitt ene positive flagg, og ingen negativer, er det bare har et sølvresultat sammenlignet med Nottinghams gull. "

Nick Hillman , direktør for Higher Education Policy Institute (HEPI), sa etter at resultatene ble offentliggjort at "det faktum at noen av resultatene virker overraskende antyder at det fungerer", ettersom det var designet for å være forskjellig fra andre ligatabeller. Han la imidlertid til at "i denne tidlige formen er TEF langt fra en perfekt vurdering av undervisning og læring. Selv om den forteller oss mange nyttige ting, gjenspeiler ingen av dem nøyaktig hva som foregår i forelesningssalene."

Som svar på noen av disse punktene, sa Chris Husbands , styreleder for TEF-panelet at TEF ikke var ment å være et "direkte mål for undervisning", men snarere "et tiltak basert på noen av resultatene av undervisningen", som er forskjellige resultatene for institusjoner med lignende beregninger skulle rettes som "TEF er metrisk ledet, ikke beregnet" og at TEF var "et relativt, snarere enn absolutt mål på universitetets og høyskolens ytelse". Han bemerket også at "mens universitetene har vært imponerende med å utvide deltakelsen, har de vært mindre pålitelige i å bekjempe virkningen av ulempe etter at studentene har meldt seg", og sa at TEF var med å gjøre som det hadde "løftet profilen til undervisning" og "fokusert oppmerksomhet på ting som må gjøres bedre ".

På en konferanse avholdt i slutten av juni, Imperial College London 's Vice Provost, Simone Buitendijk , uttalte at TEF var en gudegave "for høyere utdanning. Hun uttalte: "For folk som meg, en vice-provost, er TEF-øvelser faktisk en gave, fordi det som skjer, for første gang, begynner presidenten og provosten å følge nøye med på kvaliteten på undervisningen ... Det er ikke en dårlig ting hvis det er veldig nøye med undervisning ved forskningsintensive universiteter. " University College Londons president, Michael Arthur , foreslo at TEF ville gi fordeler for universitetene på lang sikt.

Atten institusjoner valgte å anke sine 2017-rangeringer, inkludert minst fire fra Russell Group. Av elleve institusjoner som sa at de appellerte, ble tre tildelt sølv og åtte bronse. Klager må demonstrere en "betydelig prosessuell uregelmessighet" og kan ikke utfordre den akademiske vurderingen til TEF-panelene. Minst en institusjon, Swansea University , sendte inn en intensjon om å anke, men fikk saken avvist. Bare University of East Anglia ble omklassifisert etter anke, og flyttet fra sølv til gull, og den eneste andre endringen som ble gjort var en revisjon av uttalelsen om funn for Durham University ; alle andre anker ble avvist. I tillegg anket fire institusjoner om de var berettiget til foreløpige TEF-priser, hvorav tre var vellykkede.

Kontrovers

Før publikasjonen ble det forventet at TEF-resultatene ville være betydelig forskjellige fra den vanlige rangeringen av universiteter i Storbritannia . The Guardian rapporterte i mai 2017 at en rekke "verdenskjente" universiteter sto i fare for å få en bronsevurdering; spesielt London-institusjoner, som normalt har lavere studenttilfredshet. The Times Higher Education også rapportert i begynnelsen av juni 2017 at medlemmene av Russell gruppen (to i London) var i fare for å bli rangert bronse, mens post-1992 universiteter var forventet å gjøre det bra. Imidlertid sendte universitetene også ytterligere skriftlig informasjon til TEF for å avklare deres institusjonelle kontekst: sjefen for King's College London sa at han håpet dette ville heve institusjonen fra en bronse til en sølvvurdering, mens SOAS bemerket at de økonomiske kostnadene ved å bo i London mente at studentrenten i byen var lavere enn landsgjennomsnittet. Direktøren for HEPI, Nick Hillman, sa at det kanskje ikke var noen gullklassifiserte universiteter i London, men at for institusjoner som London School of Economics ville dette ikke ha noen betydelig innvirkning som "[i] ts name and reputation for forskningsekspertise vil trumfe enhver negativ press den får fra TEF ". Tilsvarende viste en "Mock TEF" utført av dataanalyseteamet på Times Higher Education i 2016 at mens Russell Group- institusjonene gjorde det bra med absolutte resultater, ble resultatene bare justert for studentinntaket Cambridge , Durham , Birmingham , Exeter og Newcastle ( etter rangering) ble definitivt vurdert som gull, selv om dette ikke inkluderte noen justeringer som kan gjøres for de kvalitative innleveringene fra institusjonene.

Koblingen mellom TEF og studieavgift har blitt kritisert, med National Union of Students (NUS) som i 2016 stemte for å boikotte National Student Survey (NSS), hvis resultater mates inn i TEF, med mindre koblingen ble brutt. Det var forslag om at boikotten kan ha slått tilbake da deltakelsesnivået i National Student Survey steg nasjonalt, med noen kommentatorer som knytter dette til den ekstra publisiteten fra boikotten. Imidlertid ble 12 institusjoner, inkludert Cambridge , Oxford og flere andre Russell Group- universiteter, utelatt fra NSS-resultatene i 2017 på grunn av at mindre enn de nødvendige 50% av sisteårsstudentene fullførte undersøkelsen; som blir sett på som bevis på at boikotten var vellykket i det minste noen av disse institusjonene. Med boikotten som kommer for sent for å forhindre bruk av NSS i 2017 TEF, ville det imidlertid være nødvendig å opprettholde den i ytterligere to år for å ha noen effekt, og den nasjonale NUS-konferansen stemte i 2017 for ikke å diskutere en fortsatte boikotten eller send den til deres nasjonale eksekutivkomité. Boikotten kan også være til fordel for universiteter som Bristol som studenttilfredshet tradisjonelt har vært lav for. Hvorvidt målinger som studenttilfredshet og data om ansettbarhet er gyldige mål for undervisningskvalitet, er også blitt stilt spørsmål ved.

Noen toppuniversiteter truet med å boikotte TEF, og fryktet at omdømmeskader kan oppveie potensiell gevinst. I januar 2017, like før fristen for påmelding, sa imidlertid utdanningsministeren at "nesten alle" universiteter tross alt ville delta, og Times Higher Education var i stand til å bekrefte at alle bortsett fra fem engelske Russell Gruppe universiteter hadde forpliktet seg til å delta, sammen med de andre ennå ikke bestemt.

Referanser