EVALUERING AV ETTERUTDANNINGSVIRKSOMHETEN 2014 Rapport med utgangspunkt i deltakernes evaluering System for sikring og utvikling av utdanningskvalitet Åse Karin Hjelen, etterutdanningskoordinator Tone Jordhus, kvalitetskoordinator Rapport: 01/2015 Evaluering av etterutdanningsvirksomheten 2014 System for sikring og utvikling av utdanningskvalitet Innhold EVALUERING AV ETTERUTDANNINGSVIRKSOMHETEN 2014 ................................................................. 1 Rapport med utgangspunkt i deltakernes evaluering ............................................................................. 1 1. Innledning ........................................................................................................................................................ 3 2. Etterutdanningstilbudet ved NMH ........................................................................................................... 3 3. Evalueringen .................................................................................................................................................... 3 4. 5. 6. 3.1. Generell beskrivelse ............................................................................................................................ 3 3.2. Evalueringsskjemaet ........................................................................................................................... 3 3.3. Svarprosent ............................................................................................................................................ 4 Evaluering av kurs arrangert i 2014 ........................................................................................................ 5 4.1. Klaverdagene 2014 .............................................................................................................................. 5 4.2. «On the Edge» - improvisasjonssymposium ................................................................................ 8 4.3. Gitarkonferansen 2014 .................................................................................................................... 10 4.4. Kulturskolenes lederkonferanse 2014 ....................................................................................... 13 4.5. Pedagogdagene 2014 ....................................................................................................................... 17 4.6. Oppstartsseminar Follopiloten ..................................................................................................... 24 4.7. Sangdagene 2014 .............................................................................................................................. 27 4.8. «Hymnologiseminar» - Seminar om Hallgrímur Pétursson, Islands nasjonalskald ..... 30 4.9. Kulturelt entreprenørskap ............................................................................................................. 32 4.10. Kompetanse for kvalitet: Musikk 1 (2013/14) ........................................................................ 33 4.11. Prestasjonsforberedelse ................................................................................................................. 34 Kurs avlyst i 2014 ....................................................................................................................................... 34 5.1. Faglig-pedagogisk dag ..................................................................................................................... 34 5.2. Liturgi i bevegelse ............................................................................................................................. 34 Oppsummering og konklusjon ................................................................................................................ 35 2 Evaluering av etterutdanningsvirksomheten 2014 System for sikring og utvikling av utdanningskvalitet 1. Innledning Evaluering av etterutdanningsvirksomheten inngår i System for sikring og utvikling av utdanningskvalitet ved Norges musikkhøgskole (punkt 2.7). Evalueringen skal gjøres på bakgrunn av etterutdanningskoordinators årsrapport. Årsrapporten omfatter blant annet oversikt over etterutdanningsvirksomheten foregående kalenderår, kursdeltakernes evalueringer, etterutdanningskoordinators evaluering av etterutdanningsvirksomheten og videre planer for virksomheten. Videreutdanningsstudier som faller utenfor våre ordinære studier uten deltakeravgift inngår også i rapporten. Kursholdernes vurderinger av kursdeltakernes evalueringer vurderes også være en relevant del av årsrapporten av etterutdanningsvirksomheten, men dette er ikke mulig å gjennomfø re på alle typer arrangementer. 2. Etterutdanningstilbudet ved NMH Norges musikkhøgskole (NMH) har ifølge Lov om universiteter og høgskoler, § 1-3 punkt i, ansvar for å gi eller organisere tilbud om etter- og videreutdanning på sine fagområder. NMH har i 2014 arrangert seks kurs av kortere varighet (1-2 dager). Tre av disse var kursdager spesielt tilrettelagt for spesifikke instrumentgrupper. I tillegg komme r to kompetansegivende videreutdanningsstudier og ett ikke-studiepoenggivende kurs av lengre varighet (samlingsbasert), to større konferanser samt ett skreddersydd kurs etter forespørsel for en oppdragsgiver (salg av tjenester, fem kurssteder). Målgruppene/kursdeltakere i 2014 var pedagoger og ledere i skoleslag fra primært videregående skole, kulturskole og folkehøgskole, instrumentalpedagoger, utøvere, kantorer og øvrige kulturarbeidere. Vi har stadig samarbeidsprosjekter med andre organisasjoner/institusjoner. I 2014 gjennomførte vi Kulturskolenes lederkonferanse og Pedagogdagene som er en del av samarbeidsavtalen med Norsk kulturskoleråd. Seminaret om Hallgrímur Pétursson kom i stand i samarbeid med kulturkomitéen for den islandske menigheten og den i slandske ambassade, og kursene i prestasjonsforberedelse ble bestilt og utviklet sammen med vårt fagpersonale av Norsk kulturskoleråd. De fleste kursene er imidlertid i hovedsak initiert av NMH og finansiert ved deltakeravgift. 3. Evalueringen 3.1. Generell beskrivelse Etterutdanningskontoret benytter SurveyXact til utsending av evalueringer til deltakere på etterutdanningskursene våre. Målsetningen er at deltakerne får tilsendt en lenke til evalueringen pr. e-post første virkedag etter at kurset er avsluttet, senest innen en uke. Man ser en tydelig tendens til at svarprosenten synker dersom man venter for lenge med å sende ut evalueringsmulighet. De som ikke har svart får i utgangspunktet to påminnelse etter første utsendelse. Studiet ”Kulturelt entreprenørskap” med Lisbeth Wathne Svinø er det eneste som ble evaluert via papirskjema i 2014. Dette ble gjort etter ønske fra kursholder. Vi så ingen grunn til å gjennomføre to evalueringer av kurset. 3.2. Evalueringsskjemaet Evalueringsskjemaet har graderte svaralternativer på spørsmål om forventninger, nytteverdi og inspirasjon. Det gis også mulighet for å svare med fritekstkommentarer dersom man vil 3 Evaluering av etterutdanningsvirksomheten 2014 System for sikring og utvikling av utdanningskvalitet utdype hvilke temaer som ikke var relevante for den enkelte eller hvilke temaer de opplevde som spesielt nyttige/inspirerende. I tillegg får deltakerne anledning til å gi tilbakemeldinger med tanke på eventuelle forbedringer, tips om temaer/foredragsholdere til årlige konferanser, type manglende informasjon, tips om bedre praktisk tilrettelegging samt generell ris og ros. Det spørres også etter hvor man har fått kjennskap til kurset, slik at vi kan ta hensyn til informasjonskanaler ved markedsføring av de ulikekursene. Skjemaet tar normalt ca. 5 -10 minutter å besvare. 3.3. Svarprosent 427 personer har svart på de skriftlige evalueringene. Dette utgjør en total svarprosent på 65 %. I tabellen nedenfor er prosenttallet avrundet til nærmeste hele tall. Tabell 1a. Innkomne svar fordelt på kurs Kurs Klaverdagene 2014 «On the Edge» improvisasjonssymposium Gitarkonferansen 2014 Kulturskolenes lederkonferanse 2014 Pedagogdagene 2014 Follo-piloten Sangdagene 2014 «Hymnologiseminar» Kulturelt entreprenørskap (15 sp) Kompetanse for kvalitet: musikk 1, modul 2 vår 2014 Sum kurs evaluert med evalueringsskjema 2014 Forberedelseskurs i gehørtrening og musikkteori Prestasjonsforberedelse 2 Kompetanse for kvalitet: musikk 1, modul 1 høst 2014 Sum deltakere 2014 Sum totalt antall deltakere 2013 Sum evaluerte kurs 2013 Antall eksterne deltagere 35 22 Innkomne svar 29 14 Svarprosent 32 125 286 70 42 16 24 5 23 85 160 40 39 10 22 5 72 % 68 % 56 % 60 % 93 % 63 % 92 % 100 % 657 427 65 % 11 1 167 6 83 % 64 % 3 838 469 270 173 64 % Tas med i rapport for 2015 Salg av undervisningstjenester til Norsk kulturskoleråd- antallet er fordelt på 5 kurs/steder. 3 Tas med i rapport for 2015 1 2 4 Evaluering av etterutdanningsvirksomheten 2014 System for sikring og utvikling av utdanningskvalitet 4. Evaluering av kurs arrangert i 2014 I denne delen presenteres hvert enkelt kurs samt deltakernes evaluering av dette. Rekkefølgen på spørsmålene samsvarer med evalueringsskjemaet og skjemaene blir tilpasset det enkelte kurset. Noen større arrangementer går for eksempel mindre i dybden på hvert enkelt tema enn spissede fagkurs. Evalueringen gjengis i så komprimert form som mulig i forhold til rapportene som spørresystemet produserer. Dette er gjort i form av mindre tabeller og sammenslåtte fritekstkommentarer der det har vært naturlig. Kommentarene er rettstilt når dette er gjort. De er satt i kursiv der de er gjengitt ordrett. Navn er enkelte steder utelatt og erstattet med […]. Tall i parenteser angir antall personer som mener/nevner det samme. Enkelte steder er fritekstkommentarene ikke tatt med da informasjonen som kommer frem av disse ikke a nses som relevant i denne rapportens form. Alle kommentarer tas til etterretning av etterutdanningskoordinator. 4.1. Klaverdagene 2014 Faglig ansvarlig Kursholdere Bakgrunn Innhold Målgruppe Kurssted Omfang Antall deltakere Antall som evaluerte Jorunn Marie Bratlie Følgende klaverlærere ved NMH bidro med faglige innlegg: Ellen Ugelvik, Joachim Kwetzinsky, David Arthur Skinner, Wolfgang Plagge og Einar Steen-Nøkleberg. I tillegg medvirket Erling Ragnar Eriksen. Flere interne og eksterne musikere bidro under konsertene. Et ledd i arbeidet med å få til jevnlige instrumentdager. Dette var andre gang det ble arrangert klaverdager, og denne gangen lå hovedfokuset på Einar Steen-Nøkleberg og hans forestående avgang. Konserter, foredrag, demonstrasjoner og mesterklasser. Primært klaverutøvere og klaverpedagoger ved kulturskoler, videregående skoler og folkehøgskoler. Levinsalen, Lindemansalen og 139, NMH. 2 dager i vårsemesteret 36 29 (83 %) Av de som evaluerte oppgir 19 personer at de deltok begge dager, åtte deltok bare mandag mens to deltok bare tirsdag. Oppsummering og vurdering Kurset treffer hovedsakelig lærere i videregående skole og kulturskoler, og en overvekt av deltakerne fikk kjennskap til dette kurset gjennom direkte e-post invitasjon fra NMH eller via arbeidsgiver. Tallene viser at utbyttet var svært godt for de aller fleste deltakerne, og at informasjon og praktisk tilrettelegging fungerte tilfredsstillende. Det er verdt å merke seg at respondentene oppgir faglig påfyll som musiker og pedagog som hovedårsaken til at de deltar på dette seminaret. Evalueringen Hvordan fikk du kjennskap til klaverdagene? Hovedvekten av respondentene svarer her at de fikk kjennskap via direkte e -postinvitasjon fra NMH (48 %) eller via arbeidsgiver (38 %). Andre kilder var NMHs nettsider (en person) eller via en kollega (tre personer). 5 Evaluering av etterutdanningsvirksomheten 2014 System for sikring og utvikling av utdanningskvalitet Hvor jobber du i hovedsak? Kryss av på en skala fra 1 til 6, der 1 er svært liten grad og 6 er svært stor grad. Hva var ditt utbytte av Klaverdagene som helhet? Var noen temaer overflødige eller mindre relevante for deg? Seks personer oppga overflødige eller mindre relevante temaer. Svarene er i all hovedsak av personlig karakter og viser ingen tendenser. Var det noe(n) tema(er) du hadde spesielt utbytte av? Følgende tendenser er funnet i kommentarene: Einar Steen-Nøkleberg: Mesterklasseundervisning (11) Steen-Nøkleberg: Lyriske stykker– (9) Skinner/Kwetzinsky: Møte mellom klassisk pianist og jazz-pianist (7) Wolfgang Plagge: «1814-1914» (6) Ellen Ugelvik: presentasjon av nye spilleteknikker og repertoar (6) Ellen Ugelvik: konsert med Crumbs Makrokosmos bind 1 og 2 (3) Erling Ragnar Eriksen: «Das Wohltemperierte Klavier» (3) - mange gode tips som kan brukes til elever. Er det noe du mener burde forbedres til neste gang vi skal arrangere Klaverdager? Åtte personer valgte å kommentere dette, men de etterspør ikke samme ting og svarene viser ingen tendenser. Det kan allikevel nevnes at en person sier: Jeg savnet et hovedtema i år, slik som det var i fjor. En annen foreslår samspill piano, besifringsspill og improvisasjon samt ragtime som nye tema. Alle innspill tas til etterretning av etterutdanningskoordinator. Er det andre typer kurs du ønsker Musikkhøgskolen kunne arrangere? Jazz-kurs for ikke-jazzmusikere Interpretasjonskurs Prestasjonsforberedelse med Philip Dammen Hammerklaver, cembalo 6 Evaluering av etterutdanningsvirksomheten 2014 System for sikring og utvikling av utdanningskvalitet Klaverpedagogikk, teknikk og musikkformidling/musisering. Ped. workshop Analyse av sentrale klaververker for eksempel Beethovens sonater Flere kurs beregnet på utøvere Fikk du nok informasjon i forkant av Klaverdagene? Samtlige hadde fått nok informasjon på forhånd. Hvordan fungerte den praktiske tilretteleggingen? Samtlige svarte at den praktiske tilretteleggingen var tilfredsstillende. Kryss av på en skala fra 1 til 6, der 1 er svært liten grad og 6 er svært stor grad. Hva er viktig for deg når du deltar på denne typen arrangement? Dersom du har andre tilbakemeldinger, kan du skrive dem her (ris og/eller ros): Her er det et overveldende flertall av positive tilbakemeldinger. Disse går på at de t er et veldig bra tiltak, bra kurs, inspirerende med faglig påfyll og ønske om gjentakelse av klaverdager. Av kommentarer som går på forbedringer kan følgende nevnes: Synd at man ikke får anledning til å diskutere mer med mesterne. […] Kursdeltagerne fikk for liten anledning til å komme fram med synspunkter. Redusert kursavgift for de med reduserte stillinger, pensjonister og de som ikke har mulighet til å få dekket vikarutgifter. […] 7 Evaluering av etterutdanningsvirksomheten 2014 System for sikring og utvikling av utdanningskvalitet 4.2. «On the Edge» - improvisasjonssymposium Faglig ansvarlige: Interne bidragsytere: Eksterne bidragsytere: Bakgrunn: Innhold: Målgruppe: Kurssted: Omfang: Antall deltakere: Antall som evaluerte Ivar Grydeland og Njål Ølnes Dans les arbres (m/Ivar Grydeland), Sidsel Endresen, Torgrim Sollid og Njål Ølnes. Jøkleba, The Necks, Streifenjunko, Sten Sandell, David Stackenäs, Albatrosh, Monkey Plot, duoen Vilde & Inga, og Michael F. Duch Symposiet ble arrangert i samarbeid mellom Arne Nordheimsenteret ved NMH, og stipendiatprosjektene til Ivar Grydeland og Njål Ølnes ved NMH. Symposiet hadde som ambisjon å belyse fra flere kanter de metoder, mål og mekanismer som ligger til grunn for improvisasjonsarbeidet i et band. Konserter, åpne øvinger, samtaler, lunsjforedrag, labforsøk og uformelle møter. Improvisasjonsutøvere og –pedagoger Levinsalen, rom 139/140, NMH og Victoria - Nasjonal Jazzscene 2 (3) dager i vårsemesteret. (Dag 1 var i hovedsak kun åpning av symposiet) 22 14 (64%) Alle deltakerne opplyste at de deltok alle dager Oppsummering og vurdering Kurset treffer hovedsakelig ansatte i høyere utdanning, og en overvekt av deltakerne oppgir at de fikk kjennskap til dette kurset gjennom direkte e-post invitasjon fra NMH eller via arbeidsgiver/ kollega. Informasjon og praktisk tilrettelegging fungerte tilfredsstillende. I forhold til utbytte viser tallene at deltakerne i stor grad fikk inspirasjon av samlingen og i noe mindre grad fikk knyttet faglige kontakter blant de som var tilstede. Respondentene oppgir stort sett at faglig påfyll er en stor motivasjon for å melde seg på kurset, og at det å treffe kjente/ kolleger er mindre viktig. Fritekstkommentarene er springende, og tar ikke opp samme tema. Evalueringen Hvordan fikk du kjennskap til symposiet? Hovedvekten av respondentene svarer at de fikk kjennskap via direkte e -postinvitasjon fra NMH (36 %) eller via arbeidsgiver/kollega (50 %). De resterende to svarte «annet». Hvor jobber du i hovedsak? 8 Evaluering av etterutdanningsvirksomheten 2014 System for sikring og utvikling av utdanningskvalitet Hva var ditt utbytte av symposiet som helhet? (Spm 1-4) Hvorfor meldte du deg på dette symposiet? (spm. 5-9) Kryss av på en skala fra 1 til 6, der 1 er svært liten grad og 6 er svært stor grad. Fikk du nok informasjon i forkant av symposiet? 1 person krysset nei. Vedkommende oppga ikke hvilken informasjon hun/han savnet. Hvordan fungerte den praktiske tilretteleggingen? Samtlige krysset av for at den praktiske tilretteleggingen var tilfredsstillende Dersom du har andre tilbakemeldinger, kan du skrive dem her (ris og/eller ros): Kommentarene er forkortet. Veldig bra tiltak med et spennende tema Jeg synes programeringen var litt for tungt vektet på den "frie" improvisasjonen. […] Ellers må jeg gi ros til de ansvarlige for å ta godt vare på aktører og deltagere. […] Synes moderatorene enten var for akademiske, eller for fåmælte, men det ble fine samtaler fordi ensemblene var spennende og selvgående. Symposium betyr "menn som samtaler og drikker vin" men at vi har valgt å invitere inn kvinner." sto det i teksten. […] I teksten godt ment, men når siste moderator poengterer: her sitter vi, menn, som drikker vin! så vet jeg at det var flere kvinner til stede, og det kom en klar kommentar på dette etterpå. Synes man skal være bevisst hvordan man signaliserer uteslutting/definisjonsrett/majoritet. Veldig sterkt musisk tråd gjennom det hele, god kuratering. Flott å ta hull på noe som kan være vrient å definere og vise forskjellige innfallsvinkler med hensyn til improvisasjon i gruppe. Symposiet manglede diskusjoner. Jeg synes at symposiummet aldri nådde "the edge", fordi jeg ikke følte at vi fikk diskutert noe som helst. Heller ikke at musikerne bevegde seg på kanten. Jeg følte ikke at det var noen som tok sjanser - det var alt for sikkert. Der oppstod en fornemmelse av at kritiske tilbakemeldinger (f.eks det kunstneriske innholdet, […]) var no-go, noe som legger en begrensing på det faglige nivået. 9 Evaluering av etterutdanningsvirksomheten 2014 System for sikring og utvikling av utdanningskvalitet 4.3. Gitarkonferansen 2014 Faglig ansvarlig: Foredragsholdere: Bakgrunn: Innhold: Målgruppe: Kurssted: Omfang: Antall deltakere Antall som evaluerte Erik Stenstadvold Søren Bøker Madsen, Damian Martín Gil, Østen Mikal Ore og Stein Medby. I tillegg spilte Gérard Abiton konsert første kveld. Gitarkonferansen er den instrumentkonferansen som har eksistert lengst. Ble arrangert for 13. gang i 2014. konserter, foredrag, samspill, utstilling, demonstrasjoner, masterclass, diskusjoner og sosialt samvær. Primært gitarlærere ved kulturskoler, videregående skoler og folkehøgskoler. Levinsalen, NMH. I tillegg ble det arrangert fellesmiddag på Cafe Mistral første kvelden 2 dager i vårsemesteret 32 23 (72 %) 21 av respondentene oppgir at de deltok begge dager. En oppgir kun første dag og en oppgir kun andre dag. Oppsummering og vurdering Gitarkonferansen rekrutterer hovedsakelig lærere fra kulturskoler (87 %). Respondentene oppgir at gitardagene i stor grad svarte til forventningene, ga inspirasjon samt n ytteverdi/ læringsutbytte. Noen kommentarer ang informasjon og praktisk tilrettelegging tas til etterretning av etterutdanningskoordinator som jobber for en bedring av dette. Det å få faglig påfyll som pedagoger oppgis av respondentene som viktigere enn å få faglig påfyll som musikere. Samtidig oppgis det å diskutere faglige spørsmål og treffe kjente/ kolleger også som svært viktige grunner for å delta på konferansen. Evalueringen Hvordan fikk du kjennskap til Gitarkonferansen? Hovedvekten av respondentene svarer at de fikk kjennskap via direkte e-postinvitasjon fra NMH (52 %) eller via arbeidsgiver/kollega (34 %). En svarte via NMHs nettsider mens de resterende to svarte «annet». Hvor jobber du i hovedsak? 10 Evaluering av etterutdanningsvirksomheten 2014 System for sikring og utvikling av utdanningskvalitet Hva var ditt utbytte av Gitarkonferansen som helhet? Kryss av på en skala fra 1 til 6, der 1 er svært liten grad og 6 er svært stor grad. Var noen temaer overflødige eller mindre relevante for deg? Seks deltakere (26 %) krysset ja. Var det noe(n) tema(er) du hadde spesielt utbytte av? 16 deltakere (70 %) svarte ja på dette spørsmålet. Flere tema/ innslag nevnes både her og i det forrige spørsmålet – noe som tyder på at deltakerne hadde ulik kompetanse, forventninger og behov. Tilbakemeldingene tas til etterretning av koordinator. Er det noe du mener burde forbedres til neste gang vi skal arrangere Gitarkonferanse? Sju deltakere (30 %) krysset ja. Noen av disse benytter ikke feltet til å svare på spørsmålet, men til å vurdere de ulike kursene utfra personlige perspektiv. Konkrete forslag til forbedringer som kom fram av spørsmålet var av praktisk karakter og tas med i videre arbeid. Er det andre typer kurs du ønsker Musikkhøgskolen kunne arrangere? Fem deltakere (22 %) krysset ja og oppga følgende forslag til kurs: Masterclass, improvisasjon, ombygnning network i Norge Forskning innen note-innlæring,-forståelse. Læringsteknikk og notelesning. Hvordan gi kunnskapen videre til elevene. Innlegg /foredrag fra gitarbyggere Setter alltid pris på Stenstadvold og Danielsens presentasjoner av div temaer, epoker etc Utvid m en dag og ha masterclass som en del av kurset. Læringsstrategier, øvingslære, autogen trening Møte, innlegg fra komponist Øving. Fikk du nok informasjon i forkant av Gitarkonferansen? Seks deltakere (26 %) krysset nei på dette spørsmålet. Tilbakemeldingene tas med i planleggingen av neste gitarkonferanse. Hvordan fungerte den praktiske tilretteleggingen? En deltaker (5 %) krysset av for at den praktiske tilretteleggingen burde vært bedre, og oppga følgende som burde vært bedre tilrettelagt: […] masterclass, gitarbyggere og rom/tid til prøving av gitarer. 11 Evaluering av etterutdanningsvirksomheten 2014 System for sikring og utvikling av utdanningskvalitet Hva er viktig for deg når du deltar på denne typen arrangement? Kryss av på en skala fra 1 til 6, der 1 er svært liten grad og 6 er svært stor grad. Dersom du har andre tilbakemeldinger, kan du skrive dem her (ris og/eller ros): Ris: For lite tid til stiftelsen av gitarforeningen. Foredraget om Fokal Dystoni informerte om et viktig tema. Det som var trist var at det hele var svært stigmatiserende. […] Det er overhode ikke riktig at det er svært få som overvinner problemet. [….] et veldig bra program på årets konferanse, men ble ikke helt revet med. konferansen burde legges på ukedager og ikke opp mot/i en helg. De som er lærere bør få fri til å være med på dette. Ros: Positive tilbakemeldinger om kurset (x5) Mulig mine ideer til program er FOR festival-lignende, men mener det er viktig for dette kurset å sette en standard for hvordan det KAN gjøres i klassik gitar miljøet som er utrolig lite og skjørt om dagen. Starten av norsk forening for klassisk gitar er et positivt eksempel på hva som kan komme ut av kurset deres 12 Evaluering av etterutdanningsvirksomheten 2014 System for sikring og utvikling av utdanningskvalitet 4.4. Kulturskolenes lederkonferanse 2014 Interne innledere/ foredragsholdere: Eksterne innledere/ foredragsholdere: Referenter: Bakgrunn: Innhold: Målgruppe: Kurssted: Omfang: Antall deltakere Antall som evaluerte Peter Tornquist, Eirik Birkeland og Inger Anne Westby Torbjørn Røe Isaksen (Kunnskapsminister), Nils R. Sandal (Norsk kulturskoleråd), Gunnar Skaar (Utdanningsdirektør i Vest-Agder/Norsk kulturskoleråd), Morten Christiansen (Norsk kulturskoleråd), Eivind Nåvik (Lillehammer kulturskole), Lars Ådne Bevanger (BBC), Geir Ulseth (NMF) og Hans Renman Merete Wilhelmsen og Knut Øverland (Norsk kulturskoleråd), Karsten Selseth Landrø (NMF), og Tone Jordhus (NMH) Konferansen er et resultat av samarbeidsavtalen med Norsk kulturskoleråd av høsten 2008 der bl.a. gjennomføring av en lederkonferanse for ledere av kulturskolene var et av målene. Dette var den femte konferansen som avholdes årlig torsdag og fredag i uken etter påske. Fellesforedrag og parallellsesjoner med innledninger og debatter, foredrag og kunstneriske innslag. Tema for 2014: ”Rammer, roller og ressurser ” med hovedfokus på arbeidet med ny rammeplan. Kulturskolerektorer, inspektører, kultursjefer, kommunale kulturkonsulenter og ledere av kulturorganisasjoner Lindemansalen, Auditoriet, U1010, U1018, U1020 og U1021 (alle NMH) 2 dager i vårsemesteret. 125 85 (68 %) 88 % av respondentene oppgir at de deltok begge dager mens 12 % kun deltok torsdag. Oppsummering og vurdering Deltakernes utbytte av konferansen var godt, den ga inspirasjon, læringsutbytte og svarte til forventningene. En del respondenter har kommentert informasjonssvikt i forhold til pressekonferansen noe som skyldes kommunikasjonssvikt mellom departementet og arrangørene. Det var også noe logistikkutfordringer i forhold til bespisning første dag. Dette tas til etterretning av etterutdanningskoordinator. Vi ser at også på denne konferansen oppgis faglig påfyll som en hovedgrunn for deltakelse. Det å få diskutere faglige spørsmål med andre oppgis også som viktig, mens flere oppgir at det sosiale/ nettverksbyggingen er mindre viktig. Evalueringen Hvordan fikk du kjennskap til konferansen? Respondentene oppgir e-postinvitasjon (39 %), Norsk kulturskoleråds nettside (34 %) samt via arbeidsgiver/ kollega (25 %) som kilder til informasjon om konferansen. 13 Evaluering av etterutdanningsvirksomheten 2014 System for sikring og utvikling av utdanningskvalitet Hvor jobber du i hovedsak? Hva var årsaken til at du ikke deltok den andre dagen? Kommentarene er av personlig karakter. Hva var ditt utbytte av konferansen som helhet? Kryss av på en skala fra 1 til 6, der 1 er svært liten grad og 6 er svært stor grad. Var noen temaer overflødige eller mindre relevante for deg? 39 deltakere (44 %) svarte ja på spørsmålet. Svarene oppsummeres slik: BBC sin satsing på talentprogrammer. (14) - Dette var OK informasjon men opplevdes lite relevant (7) Kulturskolen som lokalt ressurssenter ifht det frivillige musikkliv (NMF) (18) - for lite orientert mot hvordan løse reelle forhold til fordel for ønsket om å dekke si ne behov. (Hva er bidraget?) - For ensidig om korps (2) - Elementært og lite visjonært/nyskapende (2) - Hørt det før (2) - Demotiverende - Viktig at NMF ser på sine kollegaer i kulturskolene som medspillere ikke motspillere som trenger voksenopplæring. Skoleeier som kvalitetsutvikler Fremtiden är redan her v/ Hans Renman (4) - Ikke noe nytt - Foredragsholderen virket litt "vel" proffesjonell. 14 Evaluering av etterutdanningsvirksomheten 2014 System for sikring og utvikling av utdanningskvalitet Var det noe(n) tema(er) du hadde spesielt utbytte av? 69 deltakere (79 %) svarte ja på spørsmålet. Svarene oppsummeres slik: Orientering om rammeplan (28) - kjempenyttig!! Diskusjonen rundt rammeplan (10) - her kunne vi hatt mer tid. (2) Kunnskapsministeren (3) Gunnar Skaar (Skoleeier som kvalitetsutvikler) (34) - Fantastisk/ inspirerende/ kjempenyttig (3) - meget godt foredrag; fikk meg til å tenke kommunen som mer helhet. - Ga inspirasjon til hvordan man må prøve å jobbe hjemme Diskusjonen etter Gunnar Skaars innlegg (2) Ekspertutvalget (Det muliges kunst) (18) - veldig interessant. Dette kunne jo vært en hel konferanse i seg selv. Kulturskolen som lokalt ressursenter (2) Hans Renman (9) - veldig bra og relevant - strålende Har du noen forslag til spesifikke navn/ tema til neste års konferanse? 13 deltakere (15 %) svarte ja, og oppga følgende forslag til navn/tema: Vi må ivertfall følge opp arbeidet med rammeplan, og da kanskje først og fremst lokalt læreplanarbeid. Kunne også vært viktig å innlemme de andre kunstartene enn musikk og gi de mer fokus og plass på konferansen - Fagplanar i kulturskulen - Arbeidsplan kulturskule - Inspirasjon til leiing Kunstpedagogikk og profesjonsforståelse gruppeundervisning!!!for stryker og blåser instrumenter i grupper av 10 - 15 elever. Ledelse i kulturskolen Vurdering for læring Hvordan evaluere kulturskolevirksomhet? Et nærmere blikk på talentbegrepet ( hvordan oppdager vi talent - nytenkning) og talentutvikling (hvordan utvikler vi talent - nytenkning) Gjerne gruppearbeid i mindre grupper innen aktuelle tema. Blir ofte de samme stemmene som taler i store forsamlinger. Det sitter mange svært kompetente fol k på disse konferansene. Flere bør kunne snakke sammen i bedre dialog. Neste år er vel rammeplanens fagdel i utarbeiding. Jeg ønsker at representanter for administrativt nasjonalt nivå, fra både kunnskap og kultur, bidrar faglig til konferansen. Tema: mulighetstenking vedr oppfølging av ekspertgruppas 10 råd. Mer om kvalitet og innhold i kulturskoletilbud. Noe om eleventrepenørskap Noe om formidlingsarbeid i kulturskolene. Mener det er viktig å gå videre på tema, som ble tatt opp i år: Hva skjer videre med rapporten fra ekspertgruppen, fagdelen av rammeplanen, aktivt eierskap - for eksempel brukergrupper og medvirkning, kommunalt planarbeid, inkluderende lederskap 15 Evaluering av etterutdanningsvirksomheten 2014 System for sikring og utvikling av utdanningskvalitet Utdanningsdirektøren bør på banen sammen med ks som en oppfølging av årets konferanse. Norsk kulturråd-hva gjør de på kulturskolefeltet? Arne Krokan Sigrid Røyseng Ellen Horn Troed Troedsen, en av Sveriges fremste framtidsvitere og foredragsholdere. Hvorfor meldte du deg på denne nettverkskonferansen? Kryss av på en skala fra 1 til 6, der 1 er svært liten grad og 6 er svært stor grad. Fikk du nok informasjon i forkant av konferansen? Fire personer (5 %) svarte nei. Disse savnet følgende informasjon: info angående pressekonferanse var ikke god nok Hotellavtaler Hvordan fungerte den praktiske tilretteleggingen? 17 deltakere (20 %) mente den praktiske tilretteleggingen kunne vært bedre. Mange av tilbakemeldingene går på logistikkproblemer med bespisningen dag 1. Tilbakemeldingene tas med i videre arbeid. Dersom du har andre tilbakemeldinger, kan du skrive dem her (ris og/eller ros): Kun trender refereres. Tilbakemeldinger som nevnes av kun en person er ikke inkludert. Alle tilbakemeldinger tas med i videreutvikling av etterutdanningstilbudet ved NMH. Ris: Kritikk mot NMF’s innlegg. - Skulle tro foredragsholder ikke hadde kjennskap til verken egen organisasjon og dens brukere, eller målgruppen for konferanse. - Uviss om Korpsforbundets rolle i samarbeidet om å arrangere. Musikkhøyskolen setter mer fokus på kulturskolenes viktige rolle - heve kulturskolene på rangstigen, det pedagogiske i lag med det kunstneriske - […] En musikksjef for en av de største musikkinteresseorganisasjonene kan ikke framvise mistillit mot kulturskolen og så stor mangel på holdning og kunnskap om arbeidsliv generelt og kulturskolearbeid spesielt. […] - Beklagelig at foredragsholder stiller med stedfortreder (NMF) Ga nå lite utbytte Rufsete/uproff start: Støy ved rydding av utstyr, støy på mic som ikke ble korrigert (3) Ros: Årlig inspirasjonsforum (2) 16 Evaluering av etterutdanningsvirksomheten 2014 System for sikring og utvikling av utdanningskvalitet - prøver å evaluere egen drift ved å sammenligne med andre, både metoder, holdninger, definisjon av samfunnsoppdrag osv. Ser frem til neste år (2). Satte pris på muligheten til å gi tilbakemelding direkte til gruppen gjennom innspillsgrupper til rammeplanen (2) Den beste Lederskonferansen som har vært arrangert på NMH (2) En god konferanse (2) jeg hadde stort utbytte av. Synes at det tross alt er liten påmelding i forhold til potensialet. 4.5. Pedagogdagene 2014 Interne innledere/ foredragsholdere: Eksterne innledere/ foredragsholdere: Bakgrunn: Innhold: Målgruppe: Kurssted: Omfang: Antall deltakere Antall som evaluerte Fellesforedrag: Brit Ågot Brøske Danielsen Musikk: Brit Ågot Brøske Danielsen, Vegar Storsve, Bjørg J. Bjøntegaard, og Guro Gravem Johansen Formidling: Philip Dammen Fellesforedrag: Svein Sjøberg, Gunilla Öman, Wenche Waagen, PUST (konsert) Musikk: Merete Markussen, Lars Andreas haug, Vidar Sæther, Anita Wegger, Liv Aukner, Elisabeth Olhans, Marianne Thomasgaard, Jan Utbult Teater: Kjersti Haugen Visuell kunst: Gunilla Öman, Linn Knudsen Dans: Veslemøy Ellefsen, Heidi haraldsen. Merete Lingjærde, Cecilie Lindeman Steen Formidling: Endre Volden Kulturskolebanken: Torkel Øen, Frøydis Rui-Rahman Et resultat av samarbeidsavtalen med Norsk kulturskoleråd av høsten 2008, som blant annet inneholder en plan om å arrangere Pedagogdager annethvert år. Pedagogdagene alternerer med Kulturskolerådets egne Kulturskoledager slik at Pedagogdagene avholdes annethvert år i Oslo og Kulturskoledagene annethvert år regionalt. Pedagogdagene 2014 var tredje gangs gjennomføring. Kulturskolerådets Region Øst var samarbeidspartner i tillegg til Kulturskolerådet sentralt. Fellesforedrag, forelesninger, workshops, konserter og sosialt samvær. Nytt av året var at første dag var kun fellesprogram, andre dag kun kurs/workshops. Alle som driver pedagogisk arbeid i estetiske fag i primært kulturskolen, men også grunnskolen, videregående skole og høgskole. Levinsalen, Lindemansalen, 025, 01015, U1010, U1018, U1020, U1021, 04019, 04020. Alle kurs/workshops i dans og teater foregikk på KHiO. 2 dager i høstsemesteret 286 158 (55 %) 37 % av respondentene oppga at de deltok begge dager, 20 % deltok kun på torsdag mens 42 % av respondentene kun deltok på fredag. Oppsummering og vurdering Informasjon om pedagogdagene oppgis i all hovedsak å komme fra arbeidsgiver eller direkte e postinvitasjon fra NMH, og 84 % oppgir at de jobber i kulturskole. Sesjonene får variert, men stor sett tilfredsstillende tilbakemeldinger. Enkelte sesjoner får lavere skår enn det som er ønskelig, noe som tas med i arbeidet videre. Flere oppgir at de gjerne skulle hatt mer 17 Evaluering av etterutdanningsvirksomheten 2014 System for sikring og utvikling av utdanningskvalitet informasjon om innholdet i sesjonene. Vi ser at pedagogdagene i stor grad svarte til forventningene hos deltakerne, at de ga inspirasjon og læringsutbytte. Respon dentene oppgir at de i mindre grad knyttet faglige kontakter i løpet av konferansen. Evalueringen Hvordan fikk du kjennskap til Pedagogdagene? Hvor jobber du i hovedsak? Hva var årsaken til at du ikke deltok den andre dagen? Totalt 87 kommentarer, de fleste av personlig karakter. Faglige grunner gjengis her: Ingen/ liten relevans andre dagen (17) Torsdag var det kun fellesforedrag. Var det noen av temaene som var overflødige eller mindre relevante for deg denne dagen? 29 deltakere (32%) svarte ja, og temaer som nevnes av flere enn en person oppsummeres nedenfor: "Eleven i sentrum - Å motivere og tilrettelegge til beste for elevens utvikling" (20) - Elementært/ Selvfølgeligheter, men ikke nødvendigvis overflødig - for enkelt - For detaljert - Lite oppdatert - Lite relevant - Uinspirerende 18 Evaluering av etterutdanningsvirksomheten 2014 System for sikring og utvikling av utdanningskvalitet Læringsutbytte i kulturskolen – forventning eller fyord?» (10) - Vanskelig å implementere direkte i undervisningen - Overfladisk - Lite relevant for dansepedagoger - Vanskelig språk/ for filosofisk, men relevant - Uspennende vinkling Var det noe(n) tema(er) du hadde spesielt utbytte av denne dagen? 82 deltakere (91%) svarte ja. og temaer som nevnes av flere enn en person oppsummeres nedenfor: Pisa –foredraget (65) - En vekker - Det var derfor jeg kom - Spekket med kunnskap og fakta - Opplysende og interessant - Flink foredragsholder Gunilla Öberg: Det kompetente barnet (44) - Eksempler fra praksis - Er veldig levende tilstede/ formidlingsevne - Inspirerende/ motiverende/ brenner for budskapet - Nysgjerrigheten ble stilt - Interessant/opplysende og relevant - God oppfriskning Wenche Waagen (4) - turte å si at vi må stille krav til elever i kulturskolen På fredag var det kun parallellsesjoner. Hvilke kurs deltok du på? Svarene ble brukt til å sende respondentene videre til relevante spørsmål. Kryss av på en skala fra 1 til 6, der 1 er svært liten grad og 6 er svært stor grad. Alle grafer for evaluering av sesjonene oppgis i gjennomsnitt. Hva var ditt utbytte av MU1: Praktisk musisering og komponering i store grupper? 19 Evaluering av etterutdanningsvirksomheten 2014 System for sikring og utvikling av utdanningskvalitet Hva var ditt utbytte av MU3: Kreativt samspill Hva var ditt utbytte av MU5: Gehørarbeiderne? Hva var ditt utbytte av MU6: Pianoorkester Hva var ditt utbytte av VK1: Lära sig att se och teckna det jag ser, inte det jag tror att jag ser. Hva var ditt utbytte av FO1: Prestasjonsforberedelser? 20 Evaluering av etterutdanningsvirksomheten 2014 System for sikring og utvikling av utdanningskvalitet Hva var ditt utbytte av KB1: Om kulturskolebanken + Kulturskolebanken - fra undervisningsrom til scenerom Hva var ditt utbytte av TE1 (på KHiO): Improvisasjon og lek som metode i pro sessen mot ferdig forestilling. Hva var ditt utbytte av DA1 (på KHiO): Dans i møte med barn Hva var ditt utbytte av MU2: Stemmelek og stemmebruk i barnekor? 21 Evaluering av etterutdanningsvirksomheten 2014 System for sikring og utvikling av utdanningskvalitet Hva var ditt utbytte av MU4: Folkemusikk eller klassisk musikk i undervisningen? Ja takk, begge deler! Hva var ditt utbytte av MU5: Gehørarbeiderne (kun nye deltakere) Kun 1 respondent – svarene refereres ikke. Hva var ditt utbytte av MU7: Motiverende samspill for elever på nybegynn er/aspirant og juniorkorpsnivå? Hva var ditt utbytte av VK2: Ocean Hope? Hva var ditt utbytte av FO2: Eleven som ressurs. Her er det gjort en feil i beregningsgrunnlaget og data er ikke tilgjengelig. Hva var ditt utbytte av DA2: Jazzdans - teknikk og metode? 22 Evaluering av etterutdanningsvirksomheten 2014 System for sikring og utvikling av utdanningskvalitet Hva var ditt utbytte av DA3: Samtidsdans - teknikk og metode? Hva var ditt utbytte av Pedagogdagene som helhet? Kryss av på en skala fra 1 til 6, der 1 er svært liten grad og 6 er svært stor grad . Fikk du nok informasjon i forkant av konferansen? 14 deltakere krysset nei på dette. Tilbakemeldingene går hovedsakelig på ønske om mer informasjon om innholdet i sesjonene. Hvordan fungerte den praktiske tilretteleggingen? 18 personer mente den praktiske tilretteleggingen kunne vært bedre. Tilbakemeldingene tas med i planleggingen av neste pedagogdager. Dersom du har andre tilbakemeldinger, kan du skrive dem her (ris og/eller ros) Totalt 60 kommentarer, kun trender oppgis i det følgende. Ris: Kursinnhold: - mer praktisk for danselærere (3) (Teori i første økt) - Dans for mye rettet mot høyere utdanning. (4) Sosialt: - Ønsker felles sosial arena etter konserten på torsdag. (2) Ros: Kursinnhold: - Fint musiserende innslag/ flotte innslag (2) o Åpningsnummer (2) o konserten med Pust! (4) 23 Evaluering av etterutdanningsvirksomheten 2014 System for sikring og utvikling av utdanningskvalitet Generelle superlativer som: - Fine og inspirerende dager (7) - Meget bra jobba/ tilrettelagt/ regissert (6) - Flott og viktig opplegg/konferanse/ tiltak (6) Endringsforslag: Tilbakemeldingene tas med i planleggingen av neste pedagogdager. 4.6. Oppstartsseminar Follopiloten Faglig ansvarlige: Interne bidragsytere: Eksterne bidragsytere: Bakgrunn: Innhold: Målgruppe: Kurssted: Omfang: Antall deltakere Antall som evaluerte Bjørg J. Bjøntegaard Wolfgang Plagge, Harald Jørgensen, Morten Carlsen og Guro Gravem Johansen, Elisabeth Olhans Alexander Krogh Plur Fellesdag for lærere i kulturskoler tilknyttet Follo-piloten Ulike innfallsvinkler til temaet øving Lærere i kulturskoler tilknyttet Follo-piloten. Levinsalen, NMH 4,5 timer i høstsemesteret 70 40 (60 %) Oppsummering og vurdering Tilbakemeldingene fra dette seminaret preges av delte meninger om innholdet i de ulike innslagene og ellers tilbakemeldinger av personlig og individuell karakter. Med dette menes tilbakemeldinger som ikke nevnes av flere enn en person og som ofte bærer preg av personlige behov og preferanser. Respondentene oppgir det å få faglig påfyll som pedagog som den viktigste årsaken til å delta på denne typen arrangement. 80 % svarer at det i middels til stor grad gav inspirasjon og 74 % svarer middels til godt læringsutbytte/ nytteverdi. Evalueringen Hva var ditt utbytte av seminaret som helhet? Kryss av på en skala fra 1 til 6, der 1 er svært liten grad og 6 er svært stor grad. Var noen temaer eller innslag overflødige eller mindre relevante for deg? 12 deltakere (29 %) svarte ja. Det registreres ingen trender i svarene da disse stort sett er av personlig/ individuell karakter. Tilbakemeldingene tas til etterretning av koordinator. 24 Evaluering av etterutdanningsvirksomheten 2014 System for sikring og utvikling av utdanningskvalitet Var det noe(n) tema(er) eller innslag du hadde spesielt utbytte av? 27 deltakere (68 %) svarte ja. De fleste tema/ innslag nevnes både her og i det forrige spørsmålet – noe som tyder på at deltakerne hadde ulike kompetanse, forventninger og behov. Tilbakemeldingene tas til etterretning av koordinator. Er det noe du mener burde forbedres til neste seminar i regi av Follopiloten? 18 deltakere (45 %) svarte ja. Det registreres ingen trender i svarene. Tilbakemeldingene tas til etterretning av koordinator. Er det andre typer kurs eller seminarer du ønsker Musikkhøgskolen kunne arrangere? 22 deltakere (55 %) svarte ja, og oppga følgende ønsker om kurs eller seminarer: oppdatering av praktisk instrumentalpedagogikk/metodikk (repertoar, teknikk osv. ) (3) Har allerede lagt inn ønske om kurs i forhold til pianoundervisning og vinkling av pedagogisk innhold som ikke nødvendigvis er klassisk. Jeg synes at klaverfaglige og klaverpedagogiske kurs der lærere og elever deltar o g der de beste forskningsresultater innen pedagogikk ble fokusert. - Musikkteknologi i praksis - Barns psykiske og motoriske utvikling sett i forhold til metodikk vi velger. - Alternative undervisningsformer - Møte med lærere som lykkes med elever. Hva er hemmeligheten ;) - Hvordan involvere foresatte? - Hvordan finne frem til barnets motivasjon. - Hvordan bruker vi kunstig motivasjon på en positiv måte? - Positive samarbeidsformer på tvers av instrumentale sperrelinjer. Hvordan lære eleven å øve Ipad kurs Mesterklasser for kulturskolelever (2) - […] hvor kulturskolelærere kunne ta med sine elever. Måtte nok foregå etter skoletid Motivasjon Forum for erfaringsutveksling. Styrke hverandre med egne erfaringer! Metodikk for viderekomne elever. Om belastningsskader. Hva kan vi gjøre for å forebygge dette? Kurs med Hege Jahren Planking av låter. Temaforedrag om undervisningsstykker (F.eks nyere nordiske stykker) Kurs som meldes inn via Follo-piloten Ensembleledelse. Kurs som handler om sceneopptreden og formidling. Prestasjon og mental forberedelse. (2) Musikkpsykologi; musikerens og musikklærerens mental helse og motivasjon. Hvordan på tilegne seg og forstå musikk som noe vi former og komme nærmere musikk som kunst i kulturskolen. […] Det bør være forskjell på Pedagogdagene og Follopiloten. […] Jeg ønsker meg mer spesifikke temaer knyttet direkte til undervisningsitusjoner. Dele deltagere i grupper etter instrumenter og ha interpretasjonkurs i forskjellige stilarter, eller i konkrete stykker. Ønsker kurs for pianister, bl.a. gjentagelse av et strålende innslag av Einar Steen Nøkleberg i fjor (klaverdagene 2014) F eks nybegynneropplæring/ Suzuki seminar med Wolfgang Plagge. Hvordan undervise kulturskoleelever i musikkteori som en del av den vanligvis 25 minutter lange spilletimen. 25 Evaluering av etterutdanningsvirksomheten 2014 System for sikring og utvikling av utdanningskvalitet Fikk du nok informasjon i forkant av seminaret? 1 person (3%) svarte nei. Hvordan fungerte den praktiske tilretteleggingen? 6 deltakere (15%) mente den praktiske tilretteleggingen kunne vært bedre. Samtlige mente at teknikken (lyd og prosjektor) ikke fungerte som det skulle. Hva er viktig for deg når du deltar på denne typen arrangement? Kryss av på en skala fra 1 til 6, der 1 er svært liten grad og 6 er svært stor grad. Dersom du har andre tilbakemeldinger, kan du skrive dem her (ris og/eller ros): Her kom det fram både ris og ros. Det registreres ingen trender i svarene, og tilbakemeldingene tas til etterretning av koordinator. 26 Evaluering av etterutdanningsvirksomheten 2014 System for sikring og utvikling av utdanningskvalitet 4.7. Sangdagene 2014 Faglig ansvarlige: Interne bidragsytere: Akkompagnatører: Eksterne forelesere: Bakgrunn: Innhold: Målgruppe: Kurssted: Omfang: Antall deltakere Antall som evaluerte Barbro Marklund-Pétersone Kirsten Taranger, Kristin Kjølberg, Svein Bjørkøy, Randi Stene, Folke Bengtsson, Mona Julsrud, Frank Havrøy og Guro Gravem Johansen Sigstein Folgerø, Matti Hirvonen og Torgeir Koppang Per Åke Lindestad og Åshild Kyvik Bauge Et ledd i arbeidet med å få til jevnlige instrumentdager. Dette er andre gange sangdagene arrangeres. Første gang var i 2011 under navnet «Singers Studio». Forelesninger, workshops, mesterklasser og sosialt samvær. Sangere og sanglærere i kulturskoler, videregående skole og folkehøgskoler Levinsalen, NMH 2 dager i høstsemesteret 42 39 (92 %) 82 % av respondentene oppgir at de deltok begge dager mens 18 % deltok kun fredag. Oppsummering og vurdering Deltakerne på dette seminaret er rekruttert primært fra ansatte i videregående skole og kulturskoler. Respondentene oppgir at seminaret svarte til forventningene, gav inspirasjon samt nytteverdi og læringsutbytte. Det å få faglig påfyll som pedagog oppgis som viktigere enn faglig påfyll som musiker selv om begge disse elementene skårer svært høyt. Å treffe kjente/ kolleger vurderes som mindre viktig enn muligheten for nettverksbygging. Evalueringen Hvordan fikk du kjennskap til Sangdagene? 27 Evaluering av etterutdanningsvirksomheten 2014 System for sikring og utvikling av utdanningskvalitet Hvor jobber du i hovedsak? Hva var ditt utbytte av Sangdagene som helhet? Kryss av på en skala fra 1 til 6, der 1 er svært liten grad og 6 er svært stor grad. Var noen temaer overflødige eller mindre relevante for deg? 11 deltakere (28 %) svarte ja. Det registreres ingen trender i svarene da disse stort sett er av personlig karakter. Tilbakemeldingene tas til etterretning av koordinator. Var det noe(n) tema(er) du hadde spesielt utbytte av? Samtlige 38 deltakere (100 %) svarte ja. Nedenfor oppgis trendene: Per Åke Lindestad. «Så fungerer stemmen" 1 og 2 (fonetiker) (28) Kristin Kjølberg og Åshild Kyvik Bauge: «Stemmens signatur» (3) Svein Bjørkøy: «På jakt etter den romantiske sangstil» (3) Barbro Marklund-Pétersone og Sigstein Folgerø: «170 arier for unge stemmer» (10) Randi Stene og Matti Hirvonen: «Klassisk masterclass» (19) Folke Bengtsson: «Fra fotsåler til isse» - oppvarming (5) Mona Julsrud: improvokasjon» - improvisasjon for klassiske sangere (6) Guro Gravem Johansen og Torgeir Koppang: «jazz masterclass» (12) Er det noe du mener burde forbedres til neste gang vi skal arrangere Sangdager? 17 deltakere (45%) svarte ja. Det registreres ingen trender i svarene. Tilbakemeldingene tas til etterretning av koordinator. Er det andre typer kurs du ønsker Musikkhøgskolen kunne arrangere? 23 deltakere (61%) svarte ja, og oppga følgende ønsker om kurs fra Musikkhøgskolen: Konkrete forslag: mer innen rytmisk sang (3) , 28 Evaluering av etterutdanningsvirksomheten 2014 System for sikring og utvikling av utdanningskvalitet - innføring i cvt eller Estill - Popsang og mikrofonteknikk. - flere ulike sjangre (pop,rock,viser osv..). Kor, Vokalensemble og kammermusikk (4) - der dirigenter, som meg, kan teste innøving og fremføring av nye sanger, - og få tilbakemelding med gode råd. - direksjon/ensembleleiing, der vi songrar/songlærarar kan vera kor for kvarandre , under kyndig leiing. Kurs i Både vokalensembe/mindre grupper/duettar og større grupper/kor hørelære Improvisasjon for klassiske utøvere ved Mona Julsrud (4) Bransjekunnskap. Jeg vet dere har et mer omfattende kurs i dette, men et helgeseminar med oppdatering/oppfriskning hadde vært fint. Gjerne enda mer dyptgående anatomi, siden det som ble presentert på sangdagene er godt kjent for oss som er utdannet på Complete Vocal Institute. Musikkhøgskolen bør også arrangere kurs i Complete Vocal Technique, da det te kan gi nyttige redskap spesielt for dem som jobber med elever som ønsker å synge rytmiske stilarter. Flere masterclass Generelle forslag: Workshops for sangpedagoger. gjerne kurs hvor man får fordypning over et tema hele kurset igjennom både i aktiv deltakelse og forelsning. Flott med sangdager, 1) kanskje lagt inn mulighet til mer drøfting av konkrete problemstillinger vi møter i hverdagen - evt delt i grupper kulturskole/videregående skole/kor/grunnskole etc. 2) hva gjør vi med slitne/skadde stemmer? Hvordan diagnostisere. 3) Gutter i stemmeskifte. Sangundervisning for barn/ungdom Gjerne praktiske kurs med lærerne deres Kurs med foredragsholdere som er aktive utøvere på høyt nivå innen sang/ vokalensemble/barne og ungdomskor - med inspirerende innhold - som også er direkte matnyttig(forslag til konkret repertaor, øvelser osv.) Mer og oftere av det samme! (2) Flere kurs for (bare) lærere i videregående skole (2) - Vi må forholde oss relativt strengt til fagplaner og måloppnåelse. Også det at vi må forholde oss til mange sjangre. Noe forelesninger og workshop med utveksling av erfaringer hadde vært supert! Fikk du nok informasjon i forkant av Sangdagene? Tre deltakere svarte nei. Svarene tas til etterretning. Hvordan fungerte den praktiske tilretteleggingen? En deltaker svarte at den praktiske tilretteleggingen kunne vært bedre, men oppga ikke hva som burde vært bedre tilrettelagt Hva er viktig for deg når du deltar på denne typen arrangement? Kryss av på en skala fra 1 til 6, der 1 er svært liten grad og 6 er svært stor grad. - 29 Evaluering av etterutdanningsvirksomheten 2014 System for sikring og utvikling av utdanningskvalitet Dersom du har andre tilbakemeldinger, kan du skrive dem her (ris og/eller ros): Her kom det fram både ris og ros, men med en overvekt av ros. Det registreres ingen trender i svarene, og tilbakemeldingene tas til etterretning av koordinator. 4.8. «Hymnologiseminar» - Seminar om Hallgrímur Pétursson, Islands nasjonalskald Faglig ansvarlige: Interne forelesere: Eksterne forelesere: Bakgrunn: Innhold: Målgruppe: Kurssted: Omfang: Antall deltakere Antall som evaluerte Thröstur Eiríksson Thröstur Eiríksson Vigdis Berland Øystese, Steinunn Johannisdóttir, Margret Eggertsdottír, Arve Brunvoll Seminar i anledning 400-års jubileet for dikterens fødsel. Foredrag og konsert om dikterens og bruk av hans diktning i salme- og musikktradisjonen. Mottakelse i etterkant av konserten Kirkemusikere og andre interesserte Auditoriet og Sandvoldsalen, NMH 1 dag i høstsemesteret 16 10 (63 %) Oppsummering og vurdering Respondentene oppgir at seminaret i stor grad svarte til forventningene og at det ga inspirasjon og nytteverdi/ læringsutbytte. De øvrige tilbakemeldingene vitner ellers om godt utbytte og relevant innhold. Evalueringen Hvordan fikk du kjennskap til seminaret? Respondentene oppgir via kollega/bekjent (60 %) og direkte e-postinvitasjon fra NMH (30 %) som de viktigste informasjonskildene. 30 Evaluering av etterutdanningsvirksomheten 2014 System for sikring og utvikling av utdanningskvalitet Hvor jobber du i hovedsak? Hva var ditt utbytte av seminaret som helhet? Kryss av på en skala fra 1 til 6, der 1 er svært liten grad og 6 er svært stor grad. - Var noen innslag overflødige eller mindre relevante for deg? Ingen deltakere svare ja på spørsmålet. Var det noe(n) innslag du hadde spesielt utbytte av? Seks deltakere (60 %) svarte ja, og oppga følgende innslag de hadde spesielt utbytte av: Hallgrimurs og konens livshistorie (2), hvor jeg fikk korrigert viktige misforståelser fra litteratur jeg før har lest om begge og fikk et nokså annerledes bilde enn før av begge to. Salmeinnslag fra Throstur Eiriksson (2) Konserten (2) De som var historisk rettet Foredragene ved inviterte foredragshol dere fra Island. Generelt gode forelesninger om emner som interesserte. Ingen overlapping. […] forelesningene var utbytterike. Opplegget var konsentrert fint lagt opp. Thröstur er et funn. Er det noe du mener burde forbedres til neste gang vi arrangerer l ignende seminarer? 3 deltakere (30%) svarte ja. Alle kommentarene gikk på bedre merking av rom/ vanskelig å finne fram. Er det andre typer kurs/ konferanser/ seminarer du ønsker Musikkhøgskolen kunne arrangere? Seks deltakere (60%) svarte ja og oppga følgende ønskede kurs/ konferanser/ seminarer: 31 Evaluering av etterutdanningsvirksomheten 2014 System for sikring og utvikling av utdanningskvalitet Om forholdet mellom ny naturvitenskap, teologi, salmedikting og musikk på 1600 -tallet (bl.a. Johannes Kepler, Paulus Gerhardt med "Die güldne Sonne" og Petter Dass med "Herre Gud, ditt dyre navn og ære") - Folketonar til salmeskatten - Folkemusikk og folkedans i gudstenester - Folkemusikk og jazz Salmeseminarer (2) - diskuterer og synger hvordan salmer kan brukes i den virkeligheten vi lever i idag. Den nye salmeboka representerer kultur fra 300-tallet og fram til idag. Kurs i kordireksjon [..] seminarer i tilknytning til biografier og musikkfaglige bøker som det er utkommet flere av, ikke minst det siste året. Men også eldre verk kan danne utgangspunkt for seminarer. […] kombinasjonen forelesninger og levende musikk er bra. Om andre hymnologiske emner, ikke minst nå når vi har begynt å bruke en ny salmebok. Fikk du nok informasjon i forkant av seminaret? Samtlige deltakere oppga at de hadde fått nok informasjon i forkant av seminaret. Hvordan fungerte den praktiske tilretteleggingen? To deltakere mente den praktiske tilretteleggingen kunne vært bedre. Begge oppga problemer med å finne frem som grunn. Dersom du har andre tilbakemeldinger, kan du skrive dem her (ris og/eller ros): Svært interessant også å få høre om hvordan Hallgrimur kombinert sin samtids teologi og litterære retoriske idealer og praksis med den særegne islandske litterære tradisjonen og sagatidens litterære virkemidler. Flotte lokaler All ære av seminaret. Seminaret var svært interessant. Meget gode fordrag. Meget godt gjennomført, også hyggelig og vel gjennomtenkt når det gjelder det praktiske. All ære til Thröstur Eirikson, som hadde ideen og sto for stødig gjennomføring av seminar og konsert! 4.9. Kulturelt entreprenørskap Studiet hadde 24 deltakere studieåret 2013/2014. 22 deltakere (92 %) evaluerte. Kursansvarlig gjennomførte en papirbasert evaluering siste kursdag som bør sees på som en emneevaluering gjennomført av faglærer. Spørsmålene besto nesten utelukkende av spørsmål med fritekstsvar som vil være nyttig for faglærer i videre utvikling av kurset, og svarene gjengis ikke i denne rapporten. Følgende spørsmål ble stilt: Hva har fungert godt? Hva har du hatt mest utbytte av? Hva har vært nyttig/verdifullt for deg? Hva kunne ha vært annerledes? Andre kommentarer Hvor fornøyd er du med hele videreutdanningskurset? På en skala fra 1 til 10, der 1 er veldig lite fornøyd og 10 er veldig godt fornøyd. 32 Evaluering av etterutdanningsvirksomheten 2014 System for sikring og utvikling av utdanningskvalitet Poeng 1 2 Antall 0 0 Gjennomsnitt: 9,2 3 0 4 0 5 0 6 0 7 2 8 3 9 7 10 10 Oppsummering og vurdering Tilbakemeldingene tyder på at kurset har vært vellykket og at de fleste deltakerne var svært fornøyd. Spesielt nevnes god planlegging av både innhold og progresjon, samt å få kunnskap om prosjektverktøy og kommunikasjonsverktøy. Konkrete tilbakemeldinger på innhold og organisering tas til etterretning av kursholder og koordinator. 4.10. Kompetanse for kvalitet: Musikk 1 (2013/14) Forelesere: Bakgrunn: Innhold: Målgruppe: Kurssted: Omfang: Kompetanse: NMH: Brit Ågot Brøske Danielsen (faglig koordinator) og Vegar Storsve. HiHm: Odd Skårberg, Bjørn Sverre Kristiansen, Kristin Rygg, Ingeborg Vestad Utdanningsinstitusjoner som til byr lærerutdanning og som deltar i Kompetanse for kvalitet, Strategi for videreutdanning for lærere, ble invitert av Kunnskapsdepartementet til å delta i et regionalt samarbeid om etterog videreutdanning høsten 2010. Kompetanse for kvalitet er en omfattende nasjonal satsning på etter- og videreutdanning for lærere og skoleeiere der staten bidrar med midler. NMH ble invitert inn i dette regionale samarbeidet høsten 2011 i forbindelse med ny utlysningsrunde av studietilbud for Kompetanse for kvalitet siden vi tilbyr lærerutdanning innenfor et av satsningsområdene. Vi fikk forhandlet oss frem til en felles søknad med Høgskolen i Hedmark, Hamar (som har hatt musikktilbudet perioden før), og fikk tilslag på søknaden for perioden 2012-15. Kurset er delt inn i to avsluttende moduler, der modul 1 går i høstsemesteret og modul 2 i vårsemesteret. Søknadene til kurset går til utsiling hos skoleeier og Utdanningsdirektoratet før vi eventuelt kan gjøre opptak hos oss. Begge modulene har fokus på musikkfaglige og fagdidaktiske aspekter ved lytting, musisering og komponering, og vektlegger musikalsk egenutvikling i aktuelle instrumenter til bruk i klasserommet. I tillegg inneholder modul 1 et spesielt fokus på sang/stemmebruk, og modul 2 på dans og drama. Grunnskolelærere som underviser eller ønsker å undervise i musikk. NMH (2 samlinger pr semester) og HiHm, Hamar (1 samling pr semester). I tillegg er det satt av en periode pr semester til nettbasert undervisning. Modul 2 for andre kull i vårsemesteret, Modul 1 for tredje kull i høstsemesteret. Det er 3 samlinger pr semester á 3 dager. 15 studiepoeng pr. modul. NTNU var ansvarlig for en nasjonal evaluering i satsningen «Kompetanse for kvalitet». Spørreskjemaet besto av 35 spørsmål og resultatene fra evalueringen av Musikk 1 ble distribuert i et Excel-skjema til etterutdanningskoordinator. Etterutdanningskoordinator tar alle svarene til etterretning for videre arbeid med kurset, mens resultatene her oppsummeres i et sammendrag Oppsummering og vurdering Studentenes samlede inntrykk av institusjonenes tilrettelegging og organisering av studiet var at dette var godt. Det faglige innholdet vurderes som godt og alle respondentene svarer at de har dratt nytte av studiet i egen undervisning/ skolehverdag. Kurset svarer til deltakernes forventninger og de oppgir at målene for videreutdanningen er nådd. Respondentenes hovedinntrykk av kvaliteten på studiet er godt. 33 Evaluering av etterutdanningsvirksomheten 2014 System for sikring og utvikling av utdanningskvalitet Studentene fikk spørsmål om å vurdere kvaliteten på den samlingsbaserte og den nettbaserte delen av studiet på en skala fra 1 -5, der 1 er svært dårlig og 5 er svært god. Alle studentene har gitt den samlingsbaserte delen karakteren 4 eller 5, mens den nettbaserte delen får mer variert skår. Der fordeler svarene seg på hele skalaen, men med en overvekt av svar på karakter 4 eller 5 (3 studenter). Utdanningsdirektoratet har satt i gang ulike tiltak for å bedre denne delen av kursene da det var en tendens i hele sektoren at den nettbasert delen av kursene fikk generelt lavere skår enn den samlingsbaserte. 4.11. Prestasjonsforberedelse Faglig ansvarlig: Kursholdere NMH: Bakgrunn: Innhold: Målgruppe: Kurssted: Omfang: Torkel Øien, Norsk kulturskoleråd Philip Dammen og Johannes Lunde Hatfield Norsk Kulturskoleråd har et samarbeid med Nordea om kompetanseutviklingsprogrammet KUL-TUR som fokuserer på kulturskolenes formidling og framføring av kunst og kultur i lokalsamfunnet. I den forbindelse ønsket Kulturskolerådet undervisningskompetanse fra NMH innenfor temaet prestasjonsforberedelse. Det ble gjennomført 5 kurs for kulturskoler i hhv Harstad, Trondheim, Bergen, Stavanger og Oslo høsten 2014. Forelesning og øvelser Ansatte i kulturskoler i Harstad, Trondheim, Bergen, Stavanger og Oslo Kulturskolene i Harstad, Trondheim, Bergen, Stavanger og Oslo 1 kursdag á 6 timer pr sted. Det har vært totalt 167 deltakere på dette kurset høsten 2014 fordelt på Harstad (12), Bergen (30), Trondheim (50), Stavanger (25) og Oslo (50). Kurset ble arrangert av Norsk kulturskoleråd der vi solgte inn undervisningstjenestene. Det ble ikke gjennomført skriftlig evaluering, men de hadde refleksjonssamtaler - først med alle deltakerne, så med ledelsen. 5. Kurs avlyst i 2014 5.1. Faglig-pedagogisk dag Er opprinnelig et årlig arrangement initiert av UiO. Dagen er nå lagt til datoen for Operasjon dagsverk, da alle lærere i videregående har undervisningsfri denne dagen pga at elever jobber for et veldedig formål istedenfor skole. Faglig-pedagogisk dag skal være et gratistilbud til primært lærere i videregående skole. Etterutdanningskontoret hadde i 2014 en idé om å bygge et faglig program rundt temaet «musikalsk kommunikasjon». Da vi ikke fikk napp hos de vi ville ha av de faglige samtidi g som Levinsalen var sterkt ønsket av andre den dagen vi hadde reservert den til vårt formål, valgte vi å utsette dette til 2015. 5.2. Liturgi i bevegelse Dette studiet var opprinnelig tenkt som et oppfølgingskurs av prosessen med den nye liturgireformen i Den norske kirke. I samarbeid med Menighetsfakultetet og Presteforeningen ble det derfor våren 2013 planlagt og utlyst en prostibasert videreutdanning med søknadsfrist 1. september under tittelen «Liturgi i bevegelse». Tenkt oppstart var våren 2014. Det var noe 34 Evaluering av etterutdanningsvirksomheten 2014 System for sikring og utvikling av utdanningskvalitet lav, men tilfredsstillende søkning til kurset, men pga for lite økonomisk støtte fra de ulike bispedømmene, ble kurset skrinlagt. Dette studiet er senere blitt utviklet videre til «mellom alter og orgel» - campus Majorstua (10 sp) som har oppstart i mars 2015. 6. Oppsummering og konklusjon Målet med evalueringene er i første rekke å gi fagmiljøene som arrangerer kursene en tilbakemelding med hensyn til faglig innhold og relevans, samt å gi informasjon til studieadministrasjonen om hvordan Musikkhøgskolen lykkes med informasjon og tilrettelegging av kursaktivitetene. Dette mener vi evalueringsskjemaene deltakerne besvarer gir god informasjon om. De fleste kursene ble evaluert elektronisk i 2014, med unntak av «kulturelt entreprenørskap». Målet har vært å sende ut evalueringsinvitasjon første virkedag etter avsluttet kurs, og dette har vi stort sett greid å overholde. Purringer har vist seg nødvendig for å få en tilfredsstillende svarprosent. Tilbakemeldingene fra deltakerne om høgskolens etterutdanningstilbud er i overveiende grad positive, både når det gjelder det faglige og den praktiske tilretteleggingen. Den eneste gjennomgående kritikken går på logistikken ved matservering under større arrangementer. Til tross for forsøk på endringer tar dette fortsatt for lang tid i forhold til de budsjetter vi har å rutte med. I tillegg er det enkelthendelser av teknisk art som det ikke alltid er lett å forutse. Utover dette viser ikke årets rapport til større problemer som vi føler behov for å forsvare, og deltakerne er i overveiende grad godt fornøyd med det faglige utbyttet. Deltakerstatistikken 2010-2014 ser ut som følger: 2010 2011 2012 2013 2014 Antall arrangement/kurs 14 11 13 16 13 Antall deltakere 824 482 825 439 838 *Ett kurs hadde 5 samlinger med nye deltakere. Det er likevel regnet som ett kurs her. Pedagogdagene er det arrangementet som trekker opp annethvert år, og dette ble arrangert i 2014. Sammenlignet med 2012 (som det da blir naturlig å sammenligne seg med) ligger både antall deltakere og antall kurs forholdsvis stabilt, til trodd for at vi har merket noe nedgang i deltakerantall i både Kulturskolenes lederkonferanse og Pedagogdagene. Årsaken til nedgangen på disse arrangementene antas å skyldes økonomi generelt samt annen konkurranse. Da Pedagogdagene er et forholdsvis massivt arrangement, tar dette mye tid og krefter i forhold til å ta initiativ til og håndtere flere kurs disse årene. Det merkes en noe stigning (om enn sakte) i interessen for instrumentdagene våre, og håper at dette tar seg ytterligere opp i årene fremover. Målsetningen er at slike «dager» skal bli en merkevare for NMH. Klaverdagene og gitarkonferansen har festet seg som årlige arrangementer som gjennomføres på samme tid hvert år, noe som merkes positivt på etterspørselen. Vi har også hatt årlige fagdager for kantorer hver høst, og seminaret om Hallgrímur Pétursson fungerte som en erstatter for dette i 2014 etter Harald Herresthals pensjonering. Det er tanken å utfordre kirkemusikkmiljøet på å opprettholde de nne fagdagen. Målsetningen er at også Sangdagene (2011 og 2014) og Messingdagene (2013) skal arrangeres hyppigere og finne «sin» tid i kalenderen. I tillegg ønsker vi å få flere instrumentgrupper på banen. Bl.a. burde det være rom for i hvert fall treblåsdager, strykerdager og kanskje også slagverksdager, jazz-/improdager, musikk & helse-dager, musikkteknologidager, gehørdager, 35 Evaluering av etterutdanningsvirksomheten 2014 System for sikring og utvikling av utdanningskvalitet direksjonsdager osv. Intensjonen er å jobbe videre med dette gjennom henvendelser til - og møter med fagmiljøene. Det tekniske apparatet rundt arrangementer begynner å fungere bra. Det er utarbeidet sjekkliste for kurs og konferanser der ansvarfordeling mellom studieadministrasjonen, formidlingsseksjonen og arrangementsverter fremgår, og tidsfrister i forhold til teknikk og bestillinger er avklart. Ordningen med arrangementsverter er blitt kraftig forbedret siden oppstarten. Vertene er blitt profesjonalisert og bidrar med uvurderlig hjelp ved gjennomføringen av de ulike arrangementene. Fra våren 2015 har også etterutdanningskontoret fått tilgang til planleggingssystemet Webbusiness (WB) som produsentene bruker ifht de prosjekter og konserter de er produsenter på. På den måten kan vi samle all nødvendig informasjon for gjennomføringen på ett sted. Det området hvor forbedringspotensialet er størst er markedsføring av kurs og konferanser. Til nå har dette vært forholdsvis «privatisert» med opparbeiding av egne e -postlister over ulike skoleslag, organisasjoner og privatpersoner (som tidligere kursdeltakere). Dette har i stor grad fungert greit, men det er ønskelig å kunne bruke kommunikasjonsseksjonens ekspertise der dette er hensiktsmessig, særlig med tanke på spesialiserte nyhetsbrev for kursvirksomheten. Vi har hatt noen samtaler mht hvorvidt det er hensiktsmessig å bruke system som håndt erer epostlister på en mer profesjonell måte, men har fortsatt et stykke å gå. Denne biten må uansett profesjonaliseres mer enn den er i dag. Det er dessuten ønskelig å få gjort samme type avklaring med kommunikasjonsseksjonen som med formidlingsseksjonen mht hva de eventuelt kan bidra med og frister for dette. Bespisning på større arrangementer er en annen utfordring som oppstår med jevne mellomrom. Dette gjelder spesielt arrangementer med 80 deltakere eller mer. Det danner seg fort køer pga redusert adkomst og lite plass til mange stasjoner der deltakerne skal servere seg selv. Ferdig oppdekkede kuverter er det som fungerer best når det er mange, men dette er betydelig dyrere, noe det som regel ikke er budsjett til. Etterutdanningskontoret består av to personer, hvorav en av oss også har ansvar for kammerkor og ECMA i tillegg til etterutdanning. I realiteten har vi derfor etterutdanningskapasitet på ca 1,5 stilling. I tillegg til planlegging, gjennomføring og etterarbeid av de forannevnte studiene, kursene og konferansene, har også etterutdanningskontoret i 2014 bidratt med praktisk bistand til andre arrangementer som Kulturskolerelatert forskningskonferanse, åpningsseminaret til CEMPE og CERM -konferanse. Vi har også sammenfattet to søknader til Norgesuniversitetet (hvorav en innbrakte 600.000,- i entreprenørskapsmidler). I forbindelse med EVU-virksomheten (etter- og videreutdanning) fungerer etterutdanningskontoret også som kontaktperson for Region Oslo Nord (samarbeid om videreutdanning for lærere), Norsk kulturskoleråd, Menighetsfakultetet og Norgesuniversitetet. Det er imidlertid fortsatt en målsetning å etablere gode relasjoner med andre/flere eksterne aktører/interesseorganisasjoner slik at vi kan arrangere kurs som vi vet vil være attraktive for spesifikke målgrupper. Da vil vi også kunne oppnå bedre markedsføring gjennom deres medlemssider/nyhetsbrev. Mars 2015 Åse Karin Hjelen Ellen Haldar Kontor for etterutdanning 36
© Copyright 2024