Brukerveiledning for sensorer

Brukerveiledning
for sensor
1
Innholdsfortegnelse
Innledning
Endre profil
Hjelp
Sensur
Arbeidsflyt for sensor
Invitasjon
Informasjon
Din vurdering
Felles vurdering
Startside for vurdering
Vurdér en prøve
Før eksamen- vurderingsinnstillinger
Enkel- eller Flersensur
Plagiatkontroll
Karakterskala
Terskelverdier
Sensorveileding
Navigasjon
Brødsmulesti
Navigering mellom oppgavebesvarelser
Navigasjonslinjen
Notater og annotering
Notater
Offline annotering
Plagiatkontroll
Hjemmeeksamen og filopplasting
Vurderingsprotokoll
Alle karakterer
Se tidligere vurderinger
Hovedansvarlig og tilgang til sensur
Velg eksamen
Informasjonsside
Kandidatliste - Din vurdering
Kandidatens besvarelse - Din vurdering
Sette hovedkarakter
Blank besvarelse
Vurdering av oppgaver - Din vurdering
Besvarelsen
Oppgaven
Annotering
Plagiatkontroll
2
Innledning
Sensorrollen i Inspera assessment har tilgang til sensurvektøyet “Vurdering” i Inspera Assessment.
For å kunne sensurere en prøve må du ha fått en brukerkonto og tildelt rolle som “Sensor”. For hver
eksamen du skal sensurere, vil Hovedansvarlig invitere deg inn som bidragsyter til prøven.
Denne veiledningen gir en gjennomgang fra sensor får brukerkonto til sensor har sensurert og lastet ned
protokoll.
Hjelp-funksjonen i Inspera Assessment kan benyttes for kontekstbasert hjelp når du sensurerer.
Endre profil
Du kan når som helst endre fornavn, etternavn, e-post og passord i brukerprofilen din. Det er imidlertid
IKKE mulig å endre brukernavnet.
For å endre brukerprofilen din, klikker du på
Klikk deretter på “Brukerprofil”.
- knappen til høyre for navnet ditt i oppgavelinjen.
3
Når du er ferdig med å gjøre endringer i brukerprofilen din, klikker du på “Lagre profil”-knappen for å
lagre endringene.
4
Hjelp
Du kan når som helst klikke på Hjelp-knappen øverst til høyre og få en beskrivelse av funksjonalitet
knyttet til der du står:
5
Sensur
Sensur foregår i modulen “Vurdering” som du har tilgang til med rollen som sensor.
Sensorene for en eksamen kan enten settes opp av de som setter opp prøven, direkte i Inspera Assessment,
eller de kan importeres fra FEIDE.
Dersom man setter opp sensorer direkte i Inspera Assessment, har man ikke mulighet til å sette opp
sensur-kommisjoner for prøven. Det vil si at ALLE sensorene som settes opp har tilgang til ALLE
besvarelsene på prøven.
Når man sensurerer, må ALLE sensorer på prøven sette den samme karakteren på alle kandidater for at
sensuren skal kunne ferdigstilles. Det vil si at i tilfeller hvor man har flere sensorer på en prøve, og disse
er satt opp i Inspera Assessment, slik at man ikke har sensurkommisjoner, må alle sensorene sette samme
karakter på alle kandidater.
I tilfeller hvor man importerer sensur-kommisjoner fra FEIDE, hvor man har delt besvarelsene på
forskjellige komisjoner, må alle sensorene sette samme karakter på alle kandidater i sin “bunke”.
Arbeidsflyt for sensor
Arbeidsflyten i sensureringen visualiseres i følgende modell:
Er det flere sensorer i en kommisjon, er det viktig å legge merke til at alle sensorer må fullføre “Din
vurdering” (ved å godkjenne sine karakterer) før de går videre til “Felles vurdering”, som er en felles
prosess der sensormøte er en naturlig del. Etter at alle sensorene i kommisjonen har blitt enige om endelig
karakter kan de godkjenne disse, karakterene blir da låst og vurderingsprotokoll blir tilgjengelig for
nedlasting.
Invitasjon
Hovedansvarlig for en eksamen inviterer sensorer til den enkelte eksamen, enten via Inspera Assessment
eller gjennom å opprette sensorkommisjon i FS.
6
Når sensor logger inn, vil alle eksamener som sensor er invitert til vises i en oversikt, og sensor velger
den aktuelle eksamenen.
Informasjon
Informasjonsside med detaljer for eksamenen er utgangspunktet for å gå videre i prossessen. Velg "vurder
kandidater" for å starte sensur.
Din vurdering
Sensor jobber i tre nivåer.
Oversikt: Gir en oversikt over alle kandidater og karakter når dette er satt.
Kandidat: En oversikt over hele besvarelsen til kandidaten, med mulighet for å navigere mellom oppgaver
og kandidater.
Oppgave: Visning av manuelt vurderte oppgaver.
● Navigering mellom nivåene gjøres i brødsmulestien øverst på siden eller ved å navigere i
nettleseren.
● Det er mulig å navigere mellom oppgaver og kandidater i menyen nederst på siden. Ulike filtre er
tilgjengelig for å strukturere gjennomgangen.
Når sensor har sensurert alle besvarelsene og anser seg ferdig, godkjenner sensor karakterene og "felles
vurdering" starter.
Felles vurdering
Sensorene jobber seg gjennom kandidatene på samme måte som i "Din vurdering". Når sensorene er
enige om karakterene, kan endelige karakterer godkjennes og vurderingsprotokoll skrives ut for signering.
7
Startside for vurdering
Begrepet Vurdering i Inspera Assessment omfatter både automatisk og manuell vurdering. I verktøyet
Vurdering kan manuell vurdering starte umiddelbart etter at en besvarelse har blitt levert, selv om prøven
fremdeles pågår.
Verktøyet Vurdering benyttes til:
● Manuell vurdering av skriftlige oppgaver (Langsvar, filopplasting og programmering)
● Fordeling av karakterer basert på en total poengsum per kandidat.
● Lagring av resultater
Tabellen viser prøver som er klare til å vurderes eller har blitt vurdert:
● Tittel - Hva heter prøven?
● Status - Har prøven startet? Er den avsluttet?
● Sist endret - Når ble prøven redigert sist?
● Av - Hvem redigerte prøven sist?
Like over tabellen finner man filtre for tabellens innhold:
● Forfatter - Hvem opprettet prøven?
8
●
Status - Er vurdering av prøven komplett?
Vurdér en prøve
Tabell viser kun prøver sensor har tilgang til. For å vurdere en prøve, velg en prøve i tabellen med status
Startet eller Avsluttet.
Før eksamen- vurderingsinnstillinger
Før eksamen blir avholdt er det en del innstillinger man må sette som har innvirkninger på
vurderingsprosessen. Alle disse innstillingene gjøres fra Prøver.
Enkel- eller Flersensur
For FS-prøver vil sensorer bli overført og lagt til automatisk. For andre prøver legger man til sensorer i
bidragsytermenyen øverst til høyre. Hvis man legger til to eller flere sensorer vil det automatisk bli
flersensur og alle sensorene må sensurere alle kandidatene (gjelder ikke FS-prøver).
Plagiatkontroll
Hvis man har lisens for plagiatkontroll har man mulighet til å forhåndsbestille rapporter for
plagiatkontroll på alle oppgaver som støtter dette.
9
Karakterskala
Før eksamen velger man ønsket karakterskala, f.eks. A-F eller Bestått/Ikke bestått. Synkroniseres prøven
fra FS, vil karakterskalaen bli overført automatisk.
Terskelverdier
Velger man å bruke poeng på oppgavene, må man definere terskelverdier som er poenggrensene for de
forskjellige karakterene. Disse kan også justeres etter at eksamen er avholdt.
10
11
Sensorveileding
Sensorveiledning kan lastes opp av hovedansvarlig i Vurderinsinnstillinger (Guide for graders i dette
skjermbildet som er på engelsk)
12
Navigasjon
Brødsmulesti
Øverst i vurdering vises det alltid en brødsmulesti som brukes for å navigere.
I eksempelet under vil man ved å klikke på de forskjellige tekstene navigere på følgende måte:
● EKSEMPELPRØVE - Navigerer til informasjonssiden for prøven.
● KANDIDATER - Navigerer til kandidatlisten.
● KANDIDAT2 - Navigerer til resultatsiden for kandidat 2.
● OPPGAVE 006 - Navigerer til besvarelse på oppgave 6 for kandidat 2.
● Ikonet øverst til venstre i skjermbildet - Avslutter vurdering av prøven og vender tilbake til listen
over alle prøver.
Navigering mellom oppgavebesvarelser
Det er ikke nødvendig å navigere tilbake til kandidatlisten for å åpne en ny besvarelse. Sensor kan
navigere direkte til neste kandidat eller neste oppgave. Sensor kan også velge å skjule alle kandidater eller
oppgaver som allerede er vurdert. Navigasjonen vil ta hensyn til at disse er skjult og hoppe over disse.
Dette betyr at sensor på en naturlig måte kan jobbe seg gjennom oppgaver og kandidater til listen over
gjenstående arbeid er tom.
13
Navigasjonslinjen
Navigasjonslinjen viser alle oppgavene i besvarelsen, eventuelt bare de som ikke er vurdert, hvis sensor
har valgt dette. De oppgavene som er markert med et lyn har blitt automatisk rettet. De oppgavene som er
markert med en sort prikk er oppgaver sensor må poeng- eller karaktersette.
Etter hvert som sensor jobber seg gjennom oppgavene som skal vurderes, blir de sorte prikkene for
gjenstående oppgaver til vurdering endret til grønne haker.
Kandidater som har fått besvarelsen sin vurdert markeres med en blå figur. Kandidater som ikke er ferdig
rettet vises som sorte. I menyen for å navigere mellom kandidater brukes samme markering. Menyen
åpnes ved å klikke på symbolet for kandidat. Da vil sensor få opp en liste over alle kandidatene på
prøven. Sensor kan da velge å navigere direkte til en kandidats besvarelse.
Notater og annotering
Notater
Sensor kan gjøre notater på hele besvarelsen eller på hver enkelt oppgave. Disse er private for sensor.
Notatfeltet er plassert til høyre i skjermbildet.
14
På kandidatens besvarelse vil det også være mulig å gjøre notater. I tillegg vil det vises en samlet oversikt
over sensors siste kommentarer på oppgavenivå.
15
Offline annotering
Hvis sensor ønsker å knytte kommentarer til avsnitt, setninger eller ord i kandidatens svar, kan det gjøres i
fanen Annotering. Filopplastings oppgaver kan f.eks. lastes ned som PDF eller Word (samme fil og
format som kandidaten leverte). Denne filen kan sensor så annotere lokalt på sin egen PC. Sensor vil da
bruker kommentarfunksjonalitet i Adobe Reader(PDF) eller Word. Sensor kan så laste den kommenterte
filen opp igjen. Den annoterte besvarelsen vil da eksistere parallellt med kandidatens besvarelse, som vil
være urørt.
Plagiatkontroll
Inspera Assessment er integrert med plagiatkontrolltjenestene Urkund og Ephorus (krever lisens). Når
hovedansvarlig setter opp en eksamen, kan han velge å få utført plagiatkontroll for hver oppgave som blir
manuelt vurdert. Sensor vil da få presentert resultatene fra plagiatkontrollen under fanen Plagiatkontroll i
Vurdering.
16
Dersom det på forhånd ikke er valgt å gjennomføre plagiatkontroll, har sensor mulighet for å bestille dette
i etterkant.
Resultatene fra plagiatkontroll presenteres som prosenter som angir hvor mye av kandidatens svar som
forekommer i andre kilder. Rapporten inneholder også lenker til de eksterne kildene. Tekst som finnes i
andre kilder vises i oransje.
(Ephorus rapport)
17
Hjemmeeksamen og filopplasting
Sensor kan velge å vurdere oppgavene med poeng og terskelverdier, men i noen tilfeller vil det ikke være
naturlig å bruke poeng for å vurdere oppgaver, bare karakter.
Det kan f.eks. være tilfellet for hjemmeeksamen hvor kandidatene kun skal laste opp én fil.
I oversikten over kandidatens oppgaver vil det da kun være én oppgave, og den viser da karakter, ikke
poeng. I de tilfellene hvor det bare er én oppgave vil hovedkarakteren automatisk oppdateres når den ene
oppgaven har fått karakter. Det gjøres for å effektivisere prosessen og minimere antall klikk sensor må
gjøre for å fullføre vurderingen.
Kandidatens besvarelse - Din vurdering vil da se slik ut
Har kandidaten lastet opp en PDF-fil støtter Inspera Assessment visning av denne i løsningen. Det er ikke
behov for å laste ned besvarelsen for å lese den. Sensor kan skrive private notater i notatfeltet til høyre for
besvarelsen.
18
Vurderingsprotokoll
Vurderingsprotokoll vil være tilgjengelig fra informasjonssiden når vurderingen er fullført. Er det sensur
med kommisjoner fra FS vil protokollen kun inneholde karakterene for kandidatene i kommisjonen.
19
Alle karakterer
Vurderingsprotokollen inneholder kun de karakterene som er i sensors kommisjon. Er det kun én
kommisjon (eller prøven ikke er en FS-prøve) vil vurderingsprotokollen inneholde samtlige karakterer.
For FS-prøver med flere kommisjoner kan alle karakterene for alle kommisjonene lastes ned av
hovedansvarlig fra Prøver som en csv-fil (Excel ikon opp til høyre).
20
Se tidligere vurderinger
Etter at sensorene har godkjent endelig vurdering er karakterene klare for overføring til FS (manuelt) og
karakterene blir derfor låst og kan ikke lenger endres. Har man som sensor behov for å se tidligere
vurderinger f.eks. for å kunne gi en begrunnelse kan man gjøre dette ved å gå inn på en prøve som har
status vurdert og klikke på Vis resultater.
Da vil man kunne se de endelig karakterene som nå er lyseblå for å indikere at de ikke lenger kan endres.
Man kan også se sine egne notater som kan være nyttig for f.eks. å kunne gi en begrunnelse for en
karakter. (Man vil snart kunne gi begrunnelse direkte fra Inspera Assessment, men det støttes ikke i
dagens versjon).
21
Hovedansvarlig og tilgang til sensur
Hovedansvarlig på en eksamen har tilgang til karakterene som er satt i endelig vurdering. Hovedansvarlig
kan gå inn på Informasjonssiden på en eksamen og klikke på vurderingsprotokoll, han får da en oversikt
over alle kandidatene i alle kommisjoner for den aktuelle eksamenen.
Ønsker hovedansvarlig en karakterliste for å legge inn karakterene i FS, kan han fra Prøver-verktøyet
åpne den aktuelle eksamenen og klikke på Last ned liste. Kandidatnummer og tilhørende karakterer kan
da lastes ned som en csv-fil som kan åpnes i Excel.
22
Velg eksamen
Klikk på eksamenen du skal sensurere i listen:
Skjermbilde: Eksempel.
Informasjonsside
23
Informasjonsside - Din vurdering
På prøvens informasjonsside får sensor presentert informasjon som er relevant for den valgte eksamenen
og hennes arbeidsoppgaver.
24
Er det en prøve som er definert i FS vil relevant informasjon bli overført til Inspera Assessment.
Siden er delt i tre:
● Under Status får sensor presentert relevante frister. Her kan sensor følge sin egen og
medsensorers progresjon og se om fellesvurdering har startet eller ikke.
● Under Informasjon kan sensor finne sensorveiledning, karakterskala og terskelverdier hvis det er
brukt.
● Under Bidragsytere vil sensor få oversikt over andre sensorer i kommisjonen med kontaktinfo og
lenke for å sende e-post. Her vises også kontaktinfo for hovedansvarlig for eksamenen.
●
Etter at eksamen er gjennomført og sensurperioden har startet, kan sensor begynne sin vurdering. Sensor
får da tilgang til de besvarelsene som skal vurderes.
Eksamenskommisjoner importeres fra FS.
Fra informasjonssiden kan sensor starte sitt vurderingsarbeid ved å klikke på “Vurder kandidater”. Har
sensor vært inne og vurdert tidligere er det enkelt å fortsette der hun slapp ved å klikke på “Fortsett fra
sist vurderte”.
Sensor kan klikke på Godkjenn karakterer når han er ferdig. I en flersensur vil karakterene da deles med
medsensor.
25
Kandidatliste - Din vurdering
Sensor får her presentert en liste over alle kandidatene og deres karakter, hvis den er satt. Kandidatene vil
vises med kandidatID . I eksempelet som er vist her er det foreløpig ikke satt karakterer.
Sensor klikker på en av knappene i venstre kolonne for å starte vurderingen.
26
Kandidatens besvarelse - Din vurdering
Kandidatens besvarelse blir presentert som en liste med alle spørsmål i prøven. Hvilke oppgaver som må
vurderes av sensor og hvilke som er rettet automatisk vises tydelig. For bedre oversikt kan sensor velge å
bare vise de oppgavene som skal karakter- eller poengsettes. Det gjøres ved å klikke på SKJUL
AUTOMATISK RETTEDE OPPGAVER.
I listen vil det markeres hvilke oppgaver i besvarelsen som ikke er vurdert (svart ring) slik at sensor har
en god oversikt over gjenstående arbeid på denne besvarelsen.
Hvis det brukes poeng for vurdering av oppgavene vil total poengsum oppdateres fortløpende og poeng
eller karakter som er gitt på de enkelte oppgavene vil vises under hverandre.
Automatisk rettede oppgaver vil, som navnet tilsier, alltid ha poeng ferdig beregnet.
For å starte vurdering av enkeltoppgaver kan sensor klikke på en av oppgavene i listen. Da får sensor
presentert kandidatens svar på den oppgaven.
27
Sette hovedkarakter
Når alle oppgaver er poeng- eller karaktersatt vil kandidatens karakter regnes ut. Sensor har mulighet for
å overstyre den foreslåtte karakteren. Dersom den utregnede karakteren overstyres av sensor, vil man se
dette i grensesnittet, som vist under.
28
Blank besvarelse
Hvis kandidaten har levert blankt vil det vises tydelig i tittelen på siden slik som vist under. Sensor er
fortsatt selv nødt til å gi karakter (den foreslåtte automatisk utregnede karakteren vil da alltid være den
dårligste karakteren for valgte karakterskala).
29
Vurdering av oppgaver - Din vurdering
Besvarelsen
Denne fanen viser kandidatens besvarelse for en av oppgavene. Til høyre på skjermen vises poeng- eller
karakterskalaen. Sensor vurderer oppgaven ved å klikke på poeng eller karakter.
Sensor kan legge inn notater på hver enkelt oppgave. Disse notatene er private og vil ikke vises for andre
brukere. Notatene vil ikke følge med ved en eventuell ny vurdering som følge av en klage.
Sensor kan her også kan se kandidatens svar på automatiske oppgaver, selv om sensor ikke skal vurdere
disse med poeng eller karakter. Det kan være nyttig for sensor å se kandidatens svar på automatiske
oppgaver, det kan f.eks. tydeliggjøre misforståelser eller manglende forståelse hos kandidaten.
Oppgaven
I denne fanen vises oppgaven slik den ble vist for kandidaten på prøven.
Annotering
Hvis sensor ønsker å knytte kommentarer til avsnitt, setninger eller ord i kandidatens svar, kan det gjøres i
fanen Annotering. Langsvars- og filopplastings oppgaver kan lastes ned som PDF. Denne PDF-en kan
sensor så annotere lokalt på sin egen PC, for så å laste den opp igjen. Den annoterte besvarelsen vil da
eksistere parallellt med kandidatens besvarelse, som vil være urørt.
Plagiatkontroll
Inspera Assessment er integrert med plagiatkontrolltjenestene Urkund og Ephorus (krever lisens). Når
man setter opp en eksamen, kan man velge å få utført plagiatkontroll for hver oppgave som blir manuelt
30
vurdert. Sensor vil da få presentert resultatene fra plagiatkontrollen under fanen Plagiatkontroll. Dersom
det på forhånd ikke er valgt å gjennomføre plagiatkontroll, har sensor mulighet for å bestille dette i
etterkant.
31