effekt - Direktoratet for økonomistyring
Nettverk for tilskudd 5. mars 2015 Effekter av tilskuddsordninger: Betydningen av gode målformuleringer og kriterier for måloppnåelse ved evaluering av effekter Program 08.30 – 09.00 09.00 – 09.15 09.15 – 09.30 09.30 – 10.10 10.10 – 10.25 10.25 – 11.00 11.00 – 11.30 Frokost Velkommen og kort info fra arbeidsgruppen v/Anne Sofie Teveldal Kort om økonomiregelverkets intensjon og krav Hva er gode mål og relevante kriterier for måloppnåelse v/Anette Simonsen, DFØ Pause Forts. Refleksjoner i grupper og plenum 09.03.2015 2 Mål for møtet Økt kunnskap om hva som er gode målformuleringer og hva som kan være relevante kriterier for måloppnåelse Bevisstgjøring, refleksjon og diskusjon 09.03.2015 3 Åpen post • Et levende nettverk med gode faglige diskusjoner • «Åpen post» - ca. 15 min på hvert nettverk • Erfaringsoverføring • Ting du er opptatt i tilskuddsforvaltningen (smått eller stort) • Lavterskel • Sende inn spørsmål/tema du ønsker å ta opp i forkant til [email protected] eller til noe andre i arbeidsgruppen 09.03.2015 4 Effekter av tilskuddsordninger Kort om økonomiregelverkets intensjon og krav Aktører og faser i tilskuddsarbeidet Behandling i Stortinget Behandling i Stortinget Utforming av tilskuddsordning Fastsetting av regelverk Etablering av forvaltningsorganisasjon Bevilgningsforslag Rapportering Tildelings-/oppdragsbrev Kunngjøring og søknadsbehandling Tilskuddsbrev Registrering og utbetaling Oppfølging og kontroll Mottaker Rapport om måloppnåelse Oppfølging og kontroll Evaluering Forvaltning Etablering Felles regelverk Tilskudd skal gi en effekt! …..Og effekten er forbundet med usikkerhet Eksterne faktorer / Risiko innsatsfaktorer aktiviteter Innenfor virksomheten produkter/ tjenester I grenseland brukereffekter samfunnseffekter Utenfor virksomheten Effekt er en endret tilstand hos brukerne eller samfunnet som kan tilskrives tilskuddsordningen En godt utformet tilskuddsordning krever god problemforståelse Hva er problemet ? Hvordan kan problemet løses? Hva er årsakssammenhengene? Ønsket tilstand hos målgruppen Tilstand Dagens tilstand hos målgruppen Fremtidig tilstand uten tiltak Tid Hvordan kan vi utforme tilskuddsordningen best mulig for å sannsynliggjøre at vi oppnår de effekter vi ønsker? 8 Utforming av hovedelementer skal skje etter en konkret vurdering for den enkelte ordning a) Mål og målgruppe for ordningen b) Kriterier for måloppnåelse c) Tildelingskriterier, herunder beregningsregler d) Oppfølging og kontroll e) Evaluering Hovedelementene skal vurderes i nøye sammenheng. Legger grunnlaget for å kunne følge opp og belyse effekter og nedfelles i regelverk for tilskuddsordningen. 09.03.2015 9 Mål for ordningen og målgruppe (B 6.2.1.1 a) Målet skal tydeliggjøre hva staten ønsker å OPPNÅ med tilskuddsordningen (målet) • Ønsket tilstand Det må fremgå hvilken målgruppe tilskuddsordningen tar sikte på • Hvem ordningen skal gi virkning for © Direktoratet for økonomistyring Side 10 Side Kriterier for måloppnåelse (B 6.2.1.1 b) Hvilke opplysninger skal innhentes fra tilskuddsmottaker eller eventuelt andre kilder for å belyse måloppnåelsen? © Direktoratet for økonomistyring © Direktoratet for økonomistyring Side 11 Side Tildelingskriterier B 6.2.1.1 c) jf. FIN pkt. 2.5) Rammer inn hvordan tilskuddet skal brukes for å understøtte målet: • Hvilke tilskuddsmottakere? • Hvor mye? • Til hva? Kan være mer eller mindre avgrensende – dette avhenger blant annet av: • Grad av klarhet når det gjelder årsakssammenhenger (problemanalysen) Side 12 Løpende oppfølging skal understøtte effektvurderinger Oppfølging av at tilskuddsmottaker oppfyller vilkår og bruker midlene som avtalt. Oppfølging av om tilskuddsmottakers tiltak har gitt ønsket effekt (har bidratt til målet for ordningen). Oppfølging av om tilskuddsmottakernes bidrag samlet sett gir måloppnåelse for ordningen. At tilskuddsmottaker gjennomfører det som er avtalt. Oppfølging må ses i sammenheng med og gi informasjonsgrunnlag for evaluering av effekter Side Hva er gode mål og relevante kriterier for måloppnåelse? Anette P. Simonsen, DFØ Side 14 Tilskuddsordningen skal gi effekter Eksterne faktorer / Risiko innsatsfaktorer aktiviteter Innenfor virksomheten produkter/ tjenester I grenseland brukereffekter samfunnseffekter Utenfor virksomheten Resultatkjeden for en tilskuddsordning kan også se slik ut aktivitet innsats faktorer aktivitet produkt / tjeneste aktivitet aktivitet innsats faktorer aktivitet produkt / tjeneste aktivitet brukereffekt aktivitet innsats faktorer aktivitet produkt / tjeneste aktivitet aktivitet innsats faktorer aktivitet aktivitet produkt / tjeneste samfunns -effekt Mål for en ordning inngår i et målstruktur Samfunnsmål Ønsket samfunns -effekt Brukereffektmål Ønsket brukereffekt produkt / tjeneste produkt / tjeneste aktivitet aktivitet innsats faktorer produkt / tjeneste aktivitet aktivitet aktivitet aktivitet innsats faktorer aktivitet aktivitet aktivitet aktivitet aktivitet aktivitet innsats faktorer produkt / tjeneste innsats faktorer -------------------- Mål og målgrupper ------------------- Eks. tilskuddsordning – Endre domfeltes handlingsmønster 1. Mål Mål for ordningen er å 1. støtte opp om frivillig virksomhet på kriminalomsorgens virkeområde, det vil si å bistå domfelte under straffegjennomføring, 2. og å legge til rette for at lovbrytere skal kunne gjøre en innsats for å endre sitt kriminelle handlingsmønster. 3. Det er en målsetning å tilbakeføre innsatte og domfelte til samfunnsdeltakelse og økt livsmestring, samt å hindre §12 Kriterier for måloppnåelse tilbakefall til kriminalitet. Målgrupper for ordningen er domfelte under straffegjennomføring og nylig løslatte/prøveløslatte. Målstruktur – definisjoner Samfunnsmål / Ønskede samfunnseffekter: Uttrykker en ønsket fremtidig tilstand for samfunnet. Brukereffektmål / Ønsket brukereffekt: Uttrykker en ønsket fremtidig tilstand for målgruppen(e) (Brukereffektene er forventet, men normalt utenfor tilskuddsmottakers kontroll) Produkter & tjenester / «Leveranser» / Interne mål: Beskriver de produkter og eller tjenester som skal være levert i perioden. (Produkter / tjenester er normalt innenfor tilskuddsmottakers kontroll). Aktiviteter: Innsatsfaktorer: penger, menneskelige ressurser, utstyr, institusjonell viten osv.. Eks. Tilskudd til fysisk aktivitet i et folkehelseperspektiv 1. Mål for ordningen Målet er å fremme fysisk aktivitet blant fysisk inaktive. Utjevning av sosiale forskjeller i aktivitetsvaner og helse skal være sentralt. Ordningen skal støtte opp om nasjonal politikk på området og stimulere tilrettelegging av lokalbasert fysisk aktivitet. Det er også et mål med ordningen at den skal bidra til kontinuitet og langsiktighet, hvor frivillig sektor utøver sin rolle i samarbeid med kommunen. Det oppfordres til at arbeidet sees i sammenheng med og eventuelt innarbeides i kommunale plan- og styringsdokumenter. Eks. Tilskudd til fysisk aktivitet i et folkehelseperspektiv 1. Mål for ordningen Målet er å fremme fysisk aktivitet blant fysisk inaktive. Utjevning av sosiale forskjeller i aktivitetsvaner og helse skal være sentralt. Tildelingskriterier: • Tiltak skal støtte opp om nasjonal politikk på området og stimulere tilrettelegging av lokalbasert fysisk aktivitet. • Det er også et mål med ordningen at den skal bidra til kontinuitet og langsiktighet, hvor frivillig sektor utøver sin rolle i samarbeid med kommunen. • Det oppfordres til at arbeidet sees i sammenheng med og eventuelt innarbeides i kommunale plan- og styringsdokumenter. Eks. Eksempel fra fiskerisektoren Mål: Formålet med tilskuddsordningen er å bidra til lavere kursavgift for fiskere som tar grunnleggende sikkerhetskurs for fiskere. Målgruppe: Fiskere som har /skal få arbeid på et norsk fiskefartøy Tildelingskriterier: Tilskudd til grunnleggende sikkerhetsopplæring for fiskere er en rettighetsbasert hvor tildelingen etter forvaltningsloven ikke er å regne som enkeltvedtak. • Kurset må gjennomføres på et kurssenter godkjent av sjøfartsdirektoratet §12 Kriterier for måloppnåelse • Følge gjeldende fagplan fra sjøfartsdirektoratet Kursdeltakeren må: • Være registrert i fiskermanntallet, være søker eller ha kontrakt om arbeid på et norsk fiskerfartøy • Delta og bestå kurset Noen kontroll spørsmål om målet: • Ordningen gjelder sikkerhetskurs– ja, -og skal gis til fiskere ja – men dette får vi også vite i tildelingskriteriene. • Men hva er bakgrunnen for ordningen? • Hvilket problem er det ordningen forsøker å bidra til løsningen av? • Hva ønsker staten å oppnå med tilskuddsordningen (effekt)? • Noen forslag? Eks. Eksempel fra fiskerisektoren Mål (konstruert): Fiskere på norsk fiskerfartøyene følger de sikkerhetsforskrifter som gjelder for fiskerfartøy som trygg arbeidsplass Målgruppe: Fiskere som har eller skal få arbeid på et norsk fiskefartøy Tildelingskriterier: Tilskudd til grunnleggende sikkerhetsopplæring for fiskere er en rettighetsbasert hvor tildelingen etter forvaltningsloven ikke er å regne som enkeltvedtak. §12 Kriterier for måloppnåelsepå et kurssenter godkjent av • Kurset må gjennomføres sjøfartsdirektoratet • Følge gjeldende fagplan fra sjøfartsdirektoratet Kursdeltakeren må: Være registrert i fiskermanntallet, være søker eller ha kontrakt om arbeid på et norsk fiskerfartøy Eks. Eksempel fra fiskerisektoren Mål (konstruert): Fiskere på norsk fiskerfartøyene følger de sikkerhetsforskrifter som gjelder for fiskerfartøy som arbeidsplass Målgruppe: Fiskere som har eller skal få arbeid på et norsk fiskefartøy Kriterier for måloppnåelse (KfM): (konstruert eks) 1. Antall fiskere rapportert skadet under arbeid på norsk fiskerfartøy der ikke sikkerhetsforskrifter er fulgt 2. §12 Antall brudd på sikkerhetsforskrifter rapportert eller Kriterier for måloppnåelse avdekket ved kontroll Observasjoner om tilskuddsordninger Tilskuddsordninger har i praksis mål på forskjellige nivå i resultatkjeden; – Noen har mål på brukereffekter der målgruppen står i fokus – Men noen har veldig åpne og visjonære (uklare) mål. – Men mange er detaljert ned til mål på produkt / tjeneste eller noen ganger helt ned på beskrivelse av en aktivitet. Sjekkpunkter for god utforming av tilskuddsordning hvor effekter skal belyses • Mål i tilskuddsregelverk bør settes på bakgrunn av en problemanalyse (ref utredningsinstruksen) men er ofte lite synlig. • Målformuleringen bør tydeliggjøre ønsket effekt for bruker eller samfunn så langt det er mulig. • Spesifikasjoner av hvilke type produkt/tjenester og evt aktiviteter tilskuddet skal gå til, hvilke mottakere osv skal ikke detaljeres i målet, men passer inn i tildelingskriteriene. Eksempel på mål og målgrupper Mål Målet for ordningen er å styrke ernæringskompetansen i pleie og omsorgstjenesten som kan bidra til en bedre ivaretakelse av brukernes ernæringssituasjon. Målgruppe: Primærmålgruppe: Ansatte i pleie og omsorgstjenesten med behov for kompetanse innfor ernæring Sekundærmålgruppe: Brukere av pleie og omsorgstjenester §12 Kriterier for måloppnåelse Hvem er målgruppen her? Hvilket nivå er målet på? Eks målgrupper Departement -> Direktorat -> Kommuner Målet for ordningen er å styrke ernærings-kompetansen i pleie og omsorgstjenesten som kan bidra til en bedre ivaretakelse av brukernes ernæringssituasjon. Målgruppene: Primær: Ansatte i pleie og omsorgstjenesten Sekundær: Brukere på senterne Ansatte i Pleie & omsorg tjenesten Ansatte i Pleie & omsorg tjenesten Ansatte i Pleie & omsorg tjenesten Ansatte i Pleie & omsorg tjenesten Eks: Tilskudd til pensjonistenes organisasjoner § 1 Formål: Tilskuddsordningen skal gi økonomiske bidrag til pensjonistorganisasjoners drift og eldrepolitiske arbeid. Målet er økt engasjement og aktivitet på området §12 Kriterier for måloppnåelse 1. Avholdte medlemsmøter, sentralt og lokalt • Hvilket nivå 2. Konkrete tiltak for å spre kunnskap om forhold av er målet sentral betydning for pensjonister og styrke på? pensjonistenes stilling i samfunnet, (herunder etablering • Hva er og vedlikehold av nettsteder, avholdelse av kurs for egentlig eldre, andre tiltak for å fremme pensjonistenes sosiale, økonomiske, helsemessige og kulturelle interesser) målet? 3. Deltakelse i debatter og avgivelse av uttalelser ved høring av lovforslag og andre forslag av eldrepolitisk betydning Noen kontroll spørsmål om målet: • Ordningen gjelder «økonomisk bidrag til pensjonistorganisasjoner» ja – men dette får vi også trolig vite i tildelingskriteriene. • Men hva er bakgrunnen for ordningen? • Hvilket problem er det ordningen forsøker å bidra til løsningen av? • Hva ønsker staten å oppnå med tilskuddsordningen (effekt)? • Noen forslag? Eks: Tilskudd til pensjonistenes organisasjoner § 1 Formål: Målet er å styrke pensjonistorganisasjonene i sitt eldrepolitiske arbeid i å fremme sosiale, økonomiske, helsemessige og kulturelle interesser Målgruppe: • Hvem er målgruppen her? Eks målgrupper Departement -> Direktorat -> Pensj.org’er Pensjonist Pensjonist Målet er å styrke pensjonistOrg Org organisasjonene i sitt eldrepolitiske arbeid i å fremm sosiale, økonomiske, Pensjonist helsemessige og kulturelle interesser Pensjonist Pensjonist Org Målgruppen: Org Org Primær: Pensjonistorganisasjonene Sekundær: pensjonistene generelt Mer inn på --------------- Kriterier for Måloppnåelse --------------- Innsamling av effektinformasjon • Hvem er målgruppen her? Svømmetest på 200 meter Kommunene har ansvaret for å gi norske elever svømmeopplæring. Men regjeringen, sammen med KrF og Venstre, mener det er et sterkt behov for å øke svømmenivået hos barna. Derfor vil de gi kommunene en svømmepakke med: • Svømmeopplæring i barnehagen • Penger til svømmetrening for minoritetsspråklige • Krav om å gjennomføre svømmeprøver i grunnskolen – Også skal vi innføre en fast metergrense for å kunne svømme. Det holder ikke bare å svømme 10 meter, sier Røe Isaksen. Svømmekravet, som nå er ute på høring, er foreslått å ligge på 200 meter. Eksempel på Kriterier for…. Mål Målet for ordningen er å styrke ernæringskompetansen i pleie og omsorgstjenesten som kan bidra til en bedre ivaretakelse av brukernes ernæringssituasjon. • Er dette KfM’er? Kriterier for måloppnåelse: « Innholdskrav til rapporteringen: 1. Beskrivelse av i hvilken grad målene for tiltaket er nådd og nytteverdien for brukerene, og hvordan dette evt har bidratt til måloppnåelse for tilskuddsordningen. 2. §12 Beskrivelse gjennomført tiltak - herunder målgruppe/r, Kriterier forav måloppnåelse kompetanse, samarbeid/samarbeidspartnere og organisering. 3. Beskrivelse av kommunens erfaringer, effekt av tiltak og anbefalinger. 4. Beskrivelse av hvordan tiltak implementeres som en del av kommunens samlede» Eksempel / forslag på kriterier for Måloppnåelse Mål Målet for ordningen er å styrke ernæringskompetansen i pleie og omsorgstjenesten som kan bidra til en bedre ivaretakelse av brukernes ernæringssituasjon. Kriterier for måloppnåelse (konstruert) • Antall ansatte som har mottatt kompetansetilbud innenfor ernæring fordelt på type tilbud, kjønn, antall institusjoner osv • Undersøkelse av målgruppens egenvurdering av i hvilken grad tiltaket har hatt betydning for egen kompetanse om ernæring • Undersøkelse av hvordan tiltaket har bidratt til endret ernæringsituasjon for brukerne. Hvilket nivå er KfM’ene på Hva er kildene? Kilder til Kriterier for Måloppnåelse • OBS nytt lysark erstatter utdelt lysark nr 38 Kilder til Kriterier for Måloppnåelse Det er to typer kilder til innhenting av informasjon på kriterier for måloppnåelse. • Fra tilskuddsmottaker • Fra andre kilder (for eksempel evaluering av brukere eller tiltak) Tilskuddsforvalter bruker informasjonen i sin rapportering på ordningen til departementet (Storting) Eksempel på Kriterier for måloppnåelse Kriterier for måloppnåelse • «Kriterier for måloppnåelse knyttes opp mot ordningens mål. Det vil kunne variere hvilke kriterier for måloppnåelse tilskuddsmottaker kan rapportere på avhengig av den enkelte søkers mål, målgruppe(r) og innretning av tiltaket». • Tilskuddordningen har så en liste med ulike Kriterier for Måloppnåelse • A) • B) Hva er kilden? • Osv… Målstruktur i Tilskuddsforvaltning Målet for ordningen: Uttrykker en ønsket fremtidig tilstand for målgruppen(e) Målgruppen: er spesifisert Målstruktur i Tilskuddsforvaltning Målet for ordningen: Uttrykker en ønsket fremtidig tilstand for målgruppen(e) Målgruppen: er spesifisert Rapportering på ordningen - to nivå Målet for ordningen: Uttrykker en ønsket fremtidig tilstand for målgruppen(e) Målgruppen: er spesifisert Sjekk av KfMer KfM’er skal hjelpe tilskuddsforvalter i å belyse måloppnåelse • Hvor spesifikke kan/ bør KfM’ene være? • Hva skal de brukes til? • Hva er kildene? • Finnes det ressurser til analyse evt aggregering? Sjekkpunkter for Kriterier for måloppnåelse (KfM) • Kriterier for måloppnåelse (KfM) er ikke det samme som innholdskrav til rapporteringen • Hovedelementet om KfM er ment å bidra til å underbygge vurdering av måloppnåelse med objektive indikatorer (kvantitative og kvalitative). • Problemanalysen er et viktig grunnlag for identifisering av relevant KfM’er • KfM’er kan ha to typer kilder; tilskuddsmottaker og andre kilder • Relevante KfM’er på brukereffektnivå vil adresser effekter for målgruppen. Løpende oppfølging skal understøtte effektvurderinger Oppfølging av at tilskuddsmottaker oppfyller vilkår og bruker midlene som avtalt. Oppfølging av om tilskuddsmottakers tiltak har gitt ønsket effekt (har bidratt til målet for ordningen). Oppfølging av om tilskuddsmottakernes bidrag samlet sett gir måloppnåelse for ordningen. At tilskuddsmottaker gjennomfører det som er avtalt. Oppfølging må ses i sammenheng med og gi informasjonsgrunnlag for evaluering av effekter Side Oppsummering • Tilpass Hovedelementene i ordningen: dvs – Baser utformingen av hovedelementene på problemforståelsen – Hovedelementene skal sees i sammenheng (utfylle hverandre) – Ikke gjenta samme innhold i flere elementer – Rett oppmerksomheten mot effekter Oppsummering • Tilpass Hovedelementene i ordningen: dvs – Baser utformingen av hovedelementene på problemforståelsen – Hovedelementene skal sees i sammenheng (utfylle hverandre) – Ikke gjenta samme innhold i flere elementer – Rett oppmerksomheten mot effekter Takk for oppmerksomheten Refleksjoner i grupper og plenum Refleksjon og diskusjon 1. I hvilken grad blir informasjon om effekter av tilskuddsordninger innhentet, vurdert og brukt i rapportering til departement og Storting ? – Hva er hindringene? – Hva er de gode tipsene for å komme forbi hindringene? 2. Har dere forslag til eksempler som kan legges frem på neste nettverksmøte, gjerne med forslag til innledere – Gode og mindre gode erfaringer og læringspunkter for seg selv og andre 52 09.03.20 15 Neste møte 3. juni Vel møtt!
© Copyright 2024