Er det forskjeller i skolers og
kommuners bidrag til elevenes
læring i grunnskolen?
– en kvantitativ studie
Kjartan Steffensen,
Seniorrådgiver ved seksjon for utdanningsstatistikk
1
Plan for presentasjonen…
• Bakgrunn, hva er en skole- og
kommunebidragsindikator?
• Datagrunnlag og vår modell for å
beregne skole- og kommunebidrag
• Håndtering av små skoler og kommuner
• Håndtering av nyopprettede/
nedlagte/sammenslåtte skoler
• Utvalgte eksempler på tolkning av
indikatorene
• Spørsmål kan sendes underveis til:
[email protected]
2
[email protected]
Hvordan kan vi bruke eksisterende
data for å lage gode mål på skolers
bidrag til elevenes læring?
3
Foto: Lucélia Ribeiro
Utgangspunkt: Hva har betydning for elevens
resultater?
Elevens forutsetninger
• Tidligere ferdigheter
• Foreldrenes
utdanningsnivå
• Foreldrenes inntekt
• Bosted
• Kjønn
• Innvandringsbakgrunn
•…
Tilfeldigheter
• Dårlig dag på eksamen
• Støyende
bygningsarbeidere på
eksamensdagen
• Tilfeldig drilling av
temaet de blir testet på
eksamen
•…
Skolen
• Lærere
• Ressurser
• Klasserom
• Klima
• Miljøfaktorer
•…
Vi må ta hensyn til at elevenes forutsetninger
ikke er like på tvers av skoler og kommuner!
[email protected]
Skolebidragsindikatorer…
•
Gir en indikasjon …
•
•
… på en gitt skoles …
•
•
Ikke uttømmende mål
supplerer gjennomsnittlige resultat for nasjonale prøver og eksamen som allerede
publiseres på skolenivå i dag
… bidrag til elevenes resultater
•
Tar hensyn til elevens forutsetninger,
forsøker å isolere hva skolen har bidratt med
Tolkning: Hvilket resultat ville en skole ha fått, dersom
elevene ved skolen var gjennomsnittlige med tanke på de
elevkjennetegnene som er inkludert i beregningen?
5
[email protected]
Typer skolebidragsindikatorer – hvordan kunne
elever vært «gjennomsnittlige»?…
«Tverrsnittsindikatorer»: Tar hensyn til forskjeller i foreldres utdanning mm.
•
Småskoletrinnet (1.-4. trinn)
Resultatet til elevene ved skolen/kommunen målt ved nasjonale prøver 5. trinn justeres for elevenes
familiebakgrunn.
«Value-added»: Tar hensyn til elevenes tidligere resultater i tillegg til familiebakgrunn
•
Måler læring over en periode
•
I praksis: Tidligere resultater fanger opp bl.a. foreldres utdanning, elevenes motivasjon og evner mm.
•
Mellomtrinnet(5.–7. trinn)
Resultatet til elevene ved skolen/kommunen målt ved nasjonale prøver 8. trinn justeres for elevenes tidligere
resultater fra nasjonale prøver 5. trinn + deres familiebakgrunn.
•
Ungdomstrinnet (8.–10.trinn)
Resultatet til elevene ved skolen/kommunen målt ved skriftlig eksamen 10. trinn justeres for elevenes tidligere
resultater fra nasjonale prøver 8. trinn + deres familiebakgrunn.
6
[email protected]
Kommunebidragsindikatorer
• Gir et samlemål på bidraget til elevenes
læring i kommunen
• Beregnet på en tilsvarende måte som
skolebidragsindikatorene
• Kan leses som gjennomsnittet av
skolebidragene til de offentlige skolene i
kommunen, vektet etter antall elever
7
[email protected]
Et bedre grunnlag for sammenligning
• Grunnlag for riktigere sammenligning av:
• Skolers bidrag til elevenes grunnleggende ferdigheter slik disse
måles ved nasjonale prøver (småskole- og mellomtrinn)
• Skoler bidrag til elevenes læring i det skriftlige eksamensfaget
elevene kommer opp i (ungdomstrinn)
• Skolebidragsindikatorene gir ikke i seg selv svar på
hvorfor en skole har et høyt eller lavt bidrag
8
[email protected]
Skole-/kommunebidrag og
ujusterte resultater
•
Ujusterte resultater:
Elevene på skolen eller i kommunen
sine faktiske resultater på nasjonale
prøver eller eksamen.
•
Vi bryr oss om begge:
• Ujusterte resultater: Det
som betyr noe for den
enkelte elev
Skolebidrag
Gjennomsnitt publiseres på skole- og
kommunenivå allerede. Tar ikke
hensyn til forskjeller i elevgrunnlag.
Ujustert resultat
lavt
Høyt
Høyt
Mer av
det samme?
Bra!
(relativt)
Lavt
Gjør noe
annet?
Gjør noe
annet?
• Skole- kommunebidrag:
Forskjellen skoler (og
skoleeiere) utgjør
9
[email protected]
Bygger videre på tidligere arbeid med
skolebidragsindikatorer i Norge
•
Utredning Skolebidragsindikatorer: SSB rapport 2004/11
•
•
Flere senere utredninger: Oslo/nasjonalt, grunnskole/VG, tverrsnitt/value-added
Publiserte indikatorer:
•
Oslo-skoler: Flere omganger
•
Videregående (SØF): 2016
Rapporten som publiseres 19. januar tar analyser av skolebidrag i Norge noen steg videre:
•
For første gang blir det publisert skolebidragsindikatorer for grunnskolen på skolenivå for
hele landet
•
For første gang er det undersøkt om indikatorer som tar hensyn til elevenes tidligere
resultater er stabile over tid. Dette har vi kunnet gjøre siden vi begynner å få nasjonale
prøvedata ganske langt tilbake i tid
•
For første gang er det beregnet kommunebidragsindikatorer for kommuner i Norge
10
[email protected]
Datagrunnlag og modell
11
Foto: Colourbox
Data gir grunnlag for å beregne
indikatorer f.o.m. 2010
Småskoletrinnet
Mellomtrinnet
Ungdomstrinnet
Elever som avla nasjonale
prøver 5. trinn f.o.m.
høsten 2010 t.o.m. høsten
2015
Elever som avla nasjonale
prøver 8. trinn f.o.m.
høsten 2010 t.o.m. høsten
2015
Elever som avla skriftlig
eksamen
10. trinn f.o.m. våren 2010
t.o.m. våren 2015
De samme elevenes
resultater på nasjonale
prøver 5. trinn altså f.o.m.
høsten 2007
De samme elevenes
resultater på nasjonale
prøver 8. trinn altså f.o.m.
høsten 2007
Registeropplysninger om foreldres utdanningsnivå, husholdningsinntekt og
elevenes innvandringsbakgrunn
12
[email protected]
Hvem er ikke tatt med i beregningene?
• Skoler hvor mer enn 4 av 10 elever har spesialundervisning
• Barnetrinnet: Elever som ikke har deltatt på noen av de tre prøvene
ved NP 5. trinn
• Mellomtrinnet: Elever som ikke har deltatt på noen av de tre prøvene
ved NP 8. trinn
• Ungdomstrinnet: Elever som ikke har avlagt skriftlig eksamen 10. trinn
• I beregningen av kommunebidrag er elever ved private skoler i
kommunen ikke tatt med
13
[email protected]
14
[email protected]
Indikatorene presenteres på en
skala fra 1 til 6
•
Skole- og kommunebidragene presenteres i rapporten på en felles
poengskala fra 1-6 på alle trinn
•
Gjennomsnittet for hele landet er satt til 3,4 for hver sammenslåtte årgang
•
•
Over tid viser indikatorene ikke absolutt utvikling i skoler og kommuners bidrag, men
utvikling relativt til gjennomsnittet for hele landet
Gjennomsnittlig resultat som ikke tar hensyn til elevsammensetning («ujustert
resultat») og tidligere resultat presenteres også på en tilsvarende skala
Tidligere
resultater,
NP 5. trinn
(skala 1-6)
skolenavn
Skole A
Resultater
nasjonale
prøver 8. trinn,
ujustert
(skala 1-6)
Skolebidrag og
usikkerhetsintervall
(skala 1-6)
Offentlig/
privat
Kommune
0301 Oslo
O
15
3,5
3,5
3,4 (3,3-3,5)
[email protected]
Håndtering av små
skoler og kommuner
16
Foto: Ximonic (Simo Räsänen)
Utfordring: I Norge er det mange små
skoler og kommuner
•
Tilfeldigheter kan i stor grad påvirke
resultater ved små skoler/kommuner
•
Høy statistisk usikkerhet
•
Liten nytteverdi, fare for feiltolkning
•
Personvern til lærere og elever
•
Håndtering:
•
To og to sammenslåtte årganger
2010+2011, 2012+2013, 2014+2015
•
Benytter et gjennomsnitt av nasjonale prøver for
alle tre emner
•
Publiseres ikke for skoler/kommuner med
<20 elever med prøveresultater
•
Indikatorene publiseres med usikkerhetsintervall
og kun én desimal
17
[email protected]
Mange skoler utelates, men få elever
Sammenslått
årgang
2014+2015
Antall kommuner som
er inkludert i
publisering av
kommunebidrag
Antall kommuner som Antall skoler som er
utelates fra publisering inkludert i publisering av
av kommunebidrag
skolebidrag
p.g.a. få elever
Antall skoler som
utelates fra publisering
av skolebidrag p.g.a. få
elever
Småskoletrinnet
396 (112 092 elever)
33 (439 elever)
1604 (108 850 elever)
664 (7085 elever)
Mellomtrinnet
402 (111 873 elever)
27 (390 elever)
1632 (108 798 elever)
652 (6675 elever)
Ungdomstrinnet
403 (111 793 elever)
24 (326 elever)
884 (112 873 elever)
225 (2065 elever)
18
[email protected]
Håndtering av endringer i skolestruktur
• Hvordan håndteres nyopprettede skoler?
•
Inkluderes i publiseringen, men merkes:
•
•
Eksempel: Skolebidraget 2014+2015 til skoler som er opprettet i 2013 eller senere er markert med NY fordi
elevene ved skolen har hatt deler av opplæringen på en annen skole.
Skoler som opprettes i løpet av en sammenslått årgang tas ikke med i publisering
for den sammenslåtte årgangen den ble opprettet
•
Eksempel: Skolebidraget publiseres ikke for den sammenslåtte årgangen 2014+2015 for en skole som startet
opp i skoleåret som endte i 2015
•
Tilsvarende for skoler som er lagt ned i løpet av en sammenslått årgang
• Hvordan håndteres sammenslåinger av skoler?
•
Identifisering av skoler er basert på organisasjonsnummer
•
Vi har ikke slått sammen skoler tilbake i tid
•
Dersom to skoler slås sammen med en eksisterende skole, vil skolebidrag for
årganger før sammenslåingen dermed bli presentert separat for hver av de tre
skolene.
19
[email protected]
Utvalgte eksempler
20
Hvordan kan indikatorene brukes?
•
Har skolen/kommunen et bidrag over/under landsgjennomsnittet på 3,4?
•
Har skole A et høyere skolebidrag enn skole B?
•
Hvordan er utviklingen over tid? Har skolen sett en positiv eller negativ utvikling i
skolebidraget sammenlignet med gjennomsnittet for hele landet?
•
Hvordan endrer bildet seg når vi går fra å se på «ujustert resultat» til skolebidrag?
…men…
•
Ta i betraktning usikkerhetsintervall
•
Husk at skolebidragsindikatorene fanger opp en viktig, men begrenset del av skolens formål
og virkeområde
21
[email protected]
Eksempel skolebidrag småskoletrinnet
Skolenavn
Solmyra skole
Resultater
nasjonale prøver
5.trinn (skala 1-6)
2010+2011
Skolebidrag og
usikkerhetsintervall
(skala 1-6)
3,2
3,7 (3,5-3,9)
Resultater
nasjonale prøver
5.trinn (skala 1-6)
2012+2013
Skolebidrag og
usikkerhetsintervall
(skala 1-6)
3,7
4,1 (3,9-4,3)
Resultater
nasjonale prøver
5.trinn (skala 1-6)
2014+2015
Skolebidrag og
usikkerhetsintervall
(skala 1-6)
3,5
3,9 (3,7-4,1)
Ujustert resultat
Skolebidrag
Høyt
Lavt
Lavt
Mer av det
samme?
Gjør noe annet?
Høyt
Bra! Mer av det
samme?
Gjør noe annet?
[email protected]
Eksempel skolebidrag mellomtrinnet
Høyt
Skolebidrag
Lavt
Ujustert resultat
Lavt
Mer av det
samme?
Gjør noe annet?
Høyt
Bra! Mer av det
samme?
Gjør noe annet?
[email protected]
Eksempel kommunebidrag ungdomstrinnet
[email protected]
Takk for
oppmerksomheten
Spørsmål?
25