Effekter på krav på läsförmåga när matematikuppgifter översätts mellan olika språk

Projektbeskrivning

Syftet med projektet är att fördjupa förståelsen för relationen mellan språket i matematiska provuppgifter och dessa uppgifters krav på läsförmåga, både när det gäller språkliga egenskaper hos uppgifterna (till exempel ordval och grammatisk struktur) och valet av naturligt språk som används för att formulera uppgiften (till exempel engelska eller svenska).

Forskningsfrågor:
1. Hur påverkar valet av naturligt språk som en matematikuppgift är skriven i uppgiftens krav på läsförmåga?
2. Vilka är orsakerna till stora skillnader när det gäller krav på läsförmåga mellan olika språkversioner av samma uppgift?

I detta projekt kommer vi att använda och undersöka matematikuppgifter från PISA på engelska, svenska och tyska. Inom PISA är uppgifterna avsedda att vara identiska och mäta samma matematiska förmåga oavsett språk, vilket gör dessa uppgifter lämpliga för ändamålet. Dessutom använder PISA omfattande rutiner för översättning och anpassning av uppgifter på olika språk, vilket ses som en fördel för vårt projekt. Anledningen är att detta förfarande förhoppningsvis har uteslutit alla eventuella direkta översättningsfel och det blir därmed lättare att fokusera på andra orsaker till skillnader mellan olika språkversioner av uppgifter.

Även om kommunikation och matematik inte kan separeras så är det möjligt att statistiskt sett fokusera på en utav dessa aspekter åt gången, genom att betrakta två överlappande latenta variabler motsvarande matematisk förmåga respektive läsförmåga. Därför har vi utvecklat en metod med principalkomponentanalys (PCA) på datamängder med elevers resultat på både läsning och matematik för att undersöka uppgifters krav på läsförmåga. I jämförelse med andra metoder har vår metod visat sig ha god validitet och reliabilitet. Om PCA används på en datamängd med elevernas resultat på läsuppgifter och på matematikuppgifter är det möjligt att identifiera matematiska uppgifter med "onödiga" krav på läsförmåga. En jämförelse av olika språkversioner av en specifik uppgift avseende krav på läsförmåga kan därför identifiera skillnader i läskomponenten i lösningsprocessen. Alltså fokuseras då på en viss potentiell källa till så kallad Differential Item Functioning (DIF) för uppgifter skrivna på olika språk.

Projektet kommer att undersöka krav på läsförmåga med statistiska metoder för matematikuppgifter skrivna på olika språk. Denna metod kommer att kompletteras med mer traditionella DIF-analyser, för att kunna relatera olika typer av slutsatser som kan dras av olika metoder. Projektet är viktigt både internationellt och nationellt, eftersom stora internationella jämförande studier av elevers matematikkunskaper är vanliga och har inverkan på utbildningspolitik i många länder.