1. No category

Karakterundersøkelse for
masterutdanning i teknologi 2015
Ø. Gregersen, G.Ø. Kløkstad, S. Hervik, H.E. Plesser og I. Pettersen
Kunnskap for en bedre verden
Datamateriale og dimensjoner
• DATA
–
–
–
–
–
–
–
Kvalitative svar
Alle eksamensbesvarelser i perioden V2010-H2014 (FS011.004)
Emneopplysninger (FS010.002)
Inntakskarakterer 2008-2014 (levert av DBH)
Timebruk i 2014 (fra Studiebarometeret)
NTNU-data med person-id
(Frafall/gjennomstrømming)
• DIMENSJONER
–
–
–
–
Studentens studieprogramtilknytning i eksamenstidspunkt
Emnets studieprogramtilknytning
Emnets avdeling (institutt/fakultet)
Emnets studienivå
Kunnskap for en bedre verden
2
Institusjoner som har levert data
•
•
•
•
•
•
•
•
•
NMBU – 6 program
UiA – 4 program
UiT – 3 program
HiT – 3 program
HBV – 2 program
HiALS – 3 program
UiS – 6 program
HiG – 3 program
NTNU – 28 program
Kunnskap for en bedre verden
3
Databearbeiding
• Tilrettelegging og kobling av eksamen-emner
• Identifikasjon av masteroppgaveemner
• Identifikasjon av grunnleggende emner i matematikk,
fysikk og ikt
• Koble på inntakskarakterer og tidsbruk
Kunnskap for en bedre verden
4
Hovedproblemstillinger
• Sammenhengen mellom karakterer og inntakskarakterer
lavere grad
– Begrensning: kun 5-årige program. Studieprogramnivå
• Sammenhengen mellom tidsbruk og karakterer
– Begrensning: kun data fra 2014. Studieprogramnivå
• Sammenhengen mellom karakterer på masteroppgaven og
karakterer tidligere i studiet (derfor maset om studienivåkode)
– Begrensning: ikke personentydig informasjon. Studieprogramnivå.
Ulik tilnærming for M2 og M5
– Antagelser: M5: masteroppgavekarakter 2014 mot førsteårsemner
V2010
• Utvikling i karaktersetting på masteroppgaver
– Satt i sammenheng med kvalitative svar fra institusjonene
Kunnskap for en bedre verden
5
Hovedproblemstillinger forts.
• Karaktersetting ift sammensetning av kommisjon og bruk
av presentasjoner.
– Begrensning: ingen tidsvariasjon, varierer i stor grad mellom
institusjoner: vanskelig å identifisere effekter
• Sammenheng mellom størrelse og karaktersetting
• Sammenheng mellom bruk av ekstern sensor og
karaktersetting
Kunnskap for en bedre verden
6
Inntakskarakterer og starten av studiet
20
2011
2012
2013
14
20
2011
2012
2013
14
20
2011
2012
2013
14
20
2011
2012
2013
14
20
2011
2012
2013
14
20
2011
2012
2013
14
20
2011
2012
2013
14
20
2011
2012
2013
14
20
2011
2012
2013
14
20
2011
2012
2013
14
20
2011
2012
2013
14
20
2011
2012
2013
14
20
2011
2012
2013
14
20
2011
2012
2013
14
20
2011
2012
2013
14
20
2011
2012
2013
14
20
2011
2012
2013
14
0
1
2
3
4
Snittkarakter etter studenttilhørighet, etter studieprogram. Teknologiprogram. Matematikk 1, NTNU
MTEL
MTMT
MTBYGG
MTDT
MTTK
MTMART
MTPETR
MTFYMA MTNANO
MTKOM
MTING
MTKJ
MTTEKGEO MTPROD MTENERG MTDESIG
MTIØT
Kilde: FS. Karakterskala: A-F
Kunnskap for en bedre verden
7
Effekten av økt inntakskarakter på
karakter i starten av studiet
Alle
grunnemner
Alle
grunnemner
uten NTNU
1,6
1,6
Alle
Matematikk
grunnemner
1
korrigert for
faste effekter
Kunnskap for en bedre verden
1,4
1,7
Fysikk 1
IKT 1
1,7
1,4
8
Er karakterer i grunnleggende emner
viktige?
0
20
40
60
80
100
Karakterfordeling Matematikk 1, etter studentstatus og sensurår, NTNU
2011
AKTIV
Andel A
2012
2010
FULLFØRT
Andel B
2011
2010
2012
2010
2011
2012
2010
2011
2012
2010
2012
2011
SLUTTET
INNDRATT
OVERGANG
Andel C
Andel D
Andel E
Andel F
Kilde: FS. Karakterskala: A-F. Studentstatus per 4. nov 2015
Kunnskap for en bedre verden
9
Sammenheng i karakterbruk gjennom
studiet
10
200
500
500
1
10
200
500
500
1
10
200
500
500
1
10
200
500
500
1
10
200
500
500
1
10
200
500
500
1
10
200
500
500
1
10
200
500
500
1
10
200
500
500
1
10
200
500
500
1
10
200
500
500
1
10
200
500
0
50
1
10
200
500
500
1
10
200
500
500
1
10
200
500
500
1
10
200
500
500
1
10
200
500
500
1
0
1
2
3
4
5
Snittkarakter etter studenttilhørighet, etter studieprogram. Teknologiprogram. Grupper etter studienivå, NTNU
MTEL
MTMT
MTTEKGEO MTBYGG
MTTK
MTMART MTENERG MTFYMA
MTNANO
MTKOM
MTING
MTDT
MTKJ
MTPROD
MTPETR
MTDESIG
MTIØT
Kilde: FS. Karakterskala: A-F
Kunnskap for en bedre verden
10
Sammenheng i karakterbruk gjennom
studiet
M-VM
M-MPP
Kilde: FS. Karakterskala: A-F
Kunnskap for en bedre verden
M-KB
M-MF
M-BA
10
0
20
0
50
0
50
1
10
0
20
0
50
0
50
1
10
0
20
0
50
0
50
1
10
0
20
0
50
0
50
1
10
0
20
0
50
0
50
1
10
0
20
0
50
0
50
1
0
1
2
3
4
Snittkarakter etter studenttilhørighet, etter studieprogram. Teknologiprogram. Grupper etter studienivå, NMBU
M-IØ
11
Korrelasjon mellom karakterbruk på ulike
studienivå: Programvis regresjon
Masterop 500
pgave
emner
2014
2013
Masteroppgav
1
e 2014
500 emner
0.41*
1
2013
200 emner
0.15
0.42*
H2010/V2011
100 emner
0.01
-0.11
V2010
Kunnskap for en bedre verden
200 emner
100 emner
H2010/V201 V2010
1
1
0.58*
1
12
Korrelasjon mellom karakterbruk på ulike
studienivå: Studentvis regresjon (NTNU)
Masteroppgave
2014
500 emner 2013
Masteroppg 500
ave 2014
emner
2013
1
200 emner
H2010/V2011
0.48*
1
200 emner
H2010/V2011
0.31*
0.52*
1
100 emner
V2010
0.28*
0.45*
0.69*
Kunnskap for en bedre verden
100 emner
V2010
1
13
Utvikling i masterkarakterer
60
40
0
20
Andeler
80
100
Karakterfordeling etter studenttilhørighet, etter institusjon og år. Teknologiprogram. Masteroppgaver
2014
2013
2011
2014
2012
2010
2014
2012
2010
2013
2011
2013
2011
2014
2012
2010
2014
2012
2010
2013
2011
HBV
HiALS
HiG
HiN
HiT
Andel A
Andel B
Andel C
Andel D
Andel E
Andel F
Kilde: FS. Karakterskala: A-F
Kunnskap for en bedre verden
14
Utvikling i masterkarakterer, forts.
0
20
40
60
80
100
Karakterfordeling etter studenttilhørighet, etter institusjon og år. Teknologiprogram. Masteroppgaver
2010 2012 2014
2011 2013
2011 2013
2010 2012 2014
2010 2012 2014
2011 2013
2011 2013
2010 2012 2014
2010 2012 2014
2011 2013
NMBU
NTNU
UiA
UiS
UiT
Andel A
Andel B
Andel C
Andel D
Andel E
Andel F
Kilde: FS. Karakterskala: A-F
Kunnskap for en bedre verden
15
Endring av snittkarakter på master i 2014
Alle
V2014
-0.18
HiALS
HiG
HiN
HiT
NMBU NTNU
UiA
UiS
UiT
1.33 -1.36 0.045 -0.46 -0.56 -0.12 0.004 -0.36 -0.20
Kunnskap for en bedre verden
16
Naive programbidrag M5
MTTK
MTTEKGEO
MTPROD
MTPETR
MTNANO
MTMT
MTMART
MTKOM
MTKJ
MTIØT
MTING
MTFYMA
MTENERG
MTEL
MTDT
MTDESIG
MTBYGG
M-VM
M-MPP
M-MF
M-KB
M-IØ
M-BA
IMAT-INF
IMAT-EOM
Kunnskap for en bedre verden
-0,4
-0,3
-0,2
17
-0,1
0
0,1
0,2
0,3
0,4
0,5
Konklusjoner
• Karakterer i videregående skole påvirker prestasjonen ved
universitet og høyskoler kraftig (1,6 høyere karakter/karakter i VGS i
grunnemner og 1.0 høyere karakter/karakter i VGS på master).
• En implikasjon av dette er at for studieprogram med ulikt
opptaksgrunnlag, så må ulike andeler gode og dårlige karakterer
deles ut for at karakterene skal ha absolutt verdi.
• Karaktergivningen er konsistent på det at det er sterk korrelasjon
mellom karakterene til hver enkeltstudent i ulike emner.
• Innføringen av nye karakterbeskrivelser fra 2014 har gitt en
signifikant nedgang i snittkarakter på master ved de fleste universitet
og høgskoler. Endringen er imidlertid moderat (-0,18) og ujevnt
fordelt. => Må følges opp
• Det er til dels betydelige variasjoner mellom fagmiljø i karakterbruk
på masteroppgaver som ikke kan forklares ved at studentene har
ulikt opptaksgrunnlag. => Må følges opp
Kunnskap for en bedre verden
18
Kunnskap for en bedre verden
19