Extensions of the kernel method of test score equating

Gabriel Wallin presenterar i sin avhandling en metod för att kunna göra mer rättvisa jämförelser vid storskaliga kunskapsprov.

Fakta
Disputation

2020-01-17

Titel (eng)

Extensions of the kernel method of test score equating

Författare

Gabriel Wallin

Handledare

Professor Marie Wiberg, Umeå universitet Jenny Häggström, Umeå universitet

Opponent

PhD Anton A. Béguin, Cito Institute for Educational Measurement

Institution

Institutionen för lingvistik och filologi

Lärosäte

Umeå universitet

Länkar
Läs pressmeddelande
Läs Skolportens intervju med Gabriel Wallin

Abstract in English:

This thesis makes contributions within the area of test score equating and specifically kernel equating. The first paper of this thesis studies the estimation of the test score distributions needed in kernel equating. There are currently two families of models implemented within kernel equating for this purpose, namely log-linear models and item response theory models. The impact of model selection criteria for these models on the equated scores are studied using both empirical and simulated data.

The second paper focuses on the continuization of the estimated score distributions, where different bandwidth selection methods are studied. The study considers multiple data collection designs, sample sizes and score distributions and investigates how large impact the bandwidth selection has on the equated scores.

When the test groups differ in their ability distributions it is necessary to adjust for such differences to make fair comparisons possible. The most common way of adjusting for ability imbalance is by using items that are common for both test forms, known as anchor items. If no such items are available, it has been suggested to use background information about the test-takers instead. However, when the covariate vector of background information increases, the combination of covariates with no observations tends to increase as well. The third paper of this thesis therefore suggests to transform the covariate vector into a scalar propensity score. Two equating estimators are suggested under this setting and the standard error of equating (SEE) for both estimators are given.

The SEE for kernel equating has previously been derived using the delta method. The fourth paper revisits the Bahadur representation of sample quantiles to derive the SEE. Both methods of calculating the SEE are compared, and it is shown that they are equivalent for all common data collection designs when the terms of the Bahadur SEE are estimated using Taylor expansions. An implementation of an alternative estimator of the Bahadur SEE for which the equivalence result does not hold is also included to illustrate when the two methods differ.

Sidan publicerades 2020-01-14 16:33 av Moa Duvarci Engman
Sidan uppdaterades 2020-05-15 11:49 av Moa Duvarci Engman


Relaterat

Stor variation i digital kompetens hos utländska lärare

Läraridentiteten och den pedagogiska grundsynen påverkar vad utländska lärare upplever som nytt eller främmande i en svensk utbildningskontext. Annika Käcks avhandling visar också att det är stor spridning i digital kompetens bland utländska lärare.  

Sociala medier utmanar studenters olika roller

Att parera mellan rollerna som student, privat och professionell är en balansakt. Det konstaterar Pernilla Josefsson som utforskat hur högskolestudenter förhåller sig till sociala medier när de integreras i lärmiljön.

Lärlingsläraren – en studie om hur vård- och yrkeslärares uppdrag formas i samband med införandet av gymnasial lärlingsutbildning

Annica Lagströms avhandling "Lärlingsläraren - en studie om hur vård- och yrkeslärares uppdrag formas i samband med införandet av gymnasial lärlingsutbildning" tar upp vad lärlingslärarens uppdrag blir när en stor del av utbildningen arbetsplatsförläggs och hur uppdraget formar lärlingsläraren?

”Ja bare skrivar som e låter”: En studie av en grupp Närpesungdomars skriftpraktiker på dialekt med fokus på sms

I Anna Greggas Bäckströms avhandling ""Ja bare skrivar som e låter": En studie av en grupp Närpesungdomars skriftpraktiker på dialekt med fokus på sms" studeras en grupp Närpesungdomars skriftpraktiker medfokus på sms såväl på standardsvenska som på dialekt.

Doing research in primary school: information activities in project-based learning

Syftet med Anna Lundhs avhandling "Doing research in primary school: information activities in project-based learning" är att beskriva och illustrera hur informationskompetenser tar form, och de möjligheter till lärande som barn möter, i informationsaktiviteter under de första skolåren i början av 2000-talet.

Lärares intentioner och kunskapsfokus vid ämnesintegrerad naturvetenskaplig undervisning i skolår 7-9

Målet med Helena Perssons avhandling "Lärares intentioner och kunskapsfokus vid ämnesintegrerad naturvetenskaplig undervisning i skolår 7-9" är att öka kunskaperna om ämnesintegrerad naturvetenskaplig undervisning.

Resa i röstens landskap. En narrativ studie av hur lärare blir professionella röstanvändare.

Syftet med Christin Furus avhandling "Resa i röstens landskap. En narrativ studie av hur lärare blir professionella röstanvändare." är att utforska och belysa vad det innebär att bli professionell röstanvändare i läraryrket.

Decision-making in health issues: Teenagers’ use of science and other discourses

Syftet med Mats Lundströms avhandling "Decision-making in health issues: Teenagers' use of science and other discourses" är att utveckla kunskap om unga individers resonemang och hur de motiverar sina ställningstaganden avseende tillförlitlighet och beslutsfattande i frågor med anknytning till hälsa.

”Vi har nästan blivit för bra”: lärares sociala representationer av förskolan som pedagogisk praktik

Syftet med Ingrid Granboms avhandling ""Vi har nästan blivit för bra": lärares sociala representationer av förskolan som pedagogisk praktik" är att beskriva och analysera lärarnas konstruktion av mening och vardagskunskap beträffande förskolan som pedagogisk praktik.

Ett särskilt perspektiv på högre studier?: Folkhögskoledeltagares sociala representationer om högskola och universitet

Annelie Anderséns avhandling "Ett särskilt perspektiv på högre studier?: Folkhögskoledeltagares sociala representationer om högskola och universitet" syftar till att undersöka folkhögskoledeltagares sociala representationer om högskola och universitet.

Effects of management by objectives: studies of Swedish upper secondary schools and the Influence of role stress and self-efficacy on school leaders

Syftet med Erik Lindbergs avhandling "Effects of management by objectives: studies of Swedish upper secondary schools" är att undersöka effekterna av Management by Objectives (MBO) inom svensk gymnasieutbildning.

Med blicken på barnet : Om olikheter inom förskolan som diskursiv praktik

Linda Pallas avhandling "Med blicken på barnet : Om olikheter inom förskolan som diskursiv praktik" syftar till att synliggöra hur barn skapas som subjekt när deras beteenden förbryllar, oroar eller utmanar personal i förskolan.

Att vördsamt värdesätta eller tryggt trotsa: Gymnasiefysiken, undervisningstraditioner och fysiklärares olika strategier för energiundervisning

I Susanne Engströms avhandling "Att vördsamt värdesätta eller tryggt trotsa: Gymnasiefysiken, undervisningstraditioner och fysiklärares olika strategier för energiundervisning" studeras ämnesinnehåll för insikter i exempelvis hållbar energianvändning och huruvida ett sådant innehåll undervisas eller inte inom fysikämnet.

Asperger Syndrome: Social functioning in relation to behavioural and cognitive traits from infancy to young adulthood

I avhandlingen "Asperger Syndrome: Social functioning in relation to behavioural and cognitive traits from infancy to young adulthood" har Petra Dewrang undersökt hur personer mellan 14 och 24 år med Aspergers syndrom uppfattar sig själva i relation till diagnosen.

Social Relations and Health: How do the associations vary across contexts and subgroups of individuals?

Syftet med Daniel Berghs avhandling "Social Relations and Health: How do the associations vary across contexts and subgroups of individuals?" är att studera sambandet mellan sociala relationer och hälsa i olika sociala sfärer.

An employeeship model and its relation to psychological climate: A study of congruence in the behavior of leaders and followers

Johan Bertletts avhandling "An employeeship model and its relation to psychological climate: A study of cong" behandlar organisatoriska aspekter som organisationsklimat, psykologiskt klimat samt medarbetarskap utifrån ledarskapsbeteende, arbetskamratsbeteende och interaktivt ledare-följarebeteende.

Konferenser
SKOLPORTENS MAGASIN
Nytt nr ute 22 oktober!

Nytt nr ute 22 oktober!

Tema: En skola på vetenskaplig grund? Intervju: Skolverkets generaldirektör Peter Fredriksson vill inte släppa lärarperspektivet.

Läs mer här
Fortbildning
Skolbibliotek
  Konferensen äger rum 1-2 december 2020 i Stockholm.

Skolbibliotek

Vi bjuder in till två dagars fortbildning för skolbibliotekarier, skolledare och alla som samarbetar med biblioteket. Ta del av forskares, bibliotekariers, rektors, lärares, journalisters och författares perspektiv för att skapa ett kraftfullt och modernt skolbibliotek. Välkommen!

Läs mer och boka plats
Kommande disputationer
5 mest lästa på FoU

”Want to rethink education after Covid-19? Creative solutions mean taking more risks”

Act like entrepreneurs and avoid missing opportunities. Educational leaders should be less risk averse, seize opportunities and try out new ideas, even if you only have 50 percent of the information, writes Henry M. Smith, assistant professor at the Johns Hopkins School of Education and a former U.S. assistant secretary of education.

Annorlunda om förändringsarbete

Såväl unga som erfarna skolledare kommer att finna mycket användbart i boken. Unga, som kan få stöd och inspiration för de förändringar man själv gått och tänkt på men ännu inte hunnit sjösätta. Mer erfarna, som kan få bekräftelse på saker man genomfört och kanske också reflektera över saker man kunnat göra annorlunda, skriver Per Hällström i en recension.

Knowledge is power against hate: Online course designed to set Holocaust record straight

Initially geared to help educators, the free program was designed to help everyone from parents, grandparents, clergy of all faiths, youth-group leaders and the general public seeking a way to begin to understand what really happened.

Hur ska man veta vad forskningen säger?

Forskning är en central komponent för att utveckla undervisningens kvalitet och sedan år 2010 ställer skollagen krav på att undervisningen ska vila på vetenskaplig grund. Det är dock lättare sagt än gjort. Skolforskningsinstitutet har därför tagit fram en ny rapport i syfte att stödja skolans och förskolans verksamma i arbetet.

Hur förebygger skolan kränkningar?

I en ny bok beskriver Ylva Odenbring, forskare vid Göteborgs universitet, hur lärare och skolledare kan förebygga våld i skolvardagen. "Framför allt behövs fler vuxna i skolan och fler vuxna som rör sig i korridorerna", säger hon.