1. No category

Infodag om NBS og Elhub
Elhub - Den norske datahuben
21. april 2015
Informasjonsmøte om NBS og Elhub
Agenda – del 2
12.30 - 13.00
Endringer i avregningsforskriften
v/Kalle Ellingard
13.00 - 13.20
Hvorfor en Elhub?
v/Tor Heiberg
13.20 - 13.40
Funksjonalitet i Elhub
v/Jan Magne Strand
13.40 - 13.50
Pause
13.50 - 14.00
Overordnet om test og migrering
v/Eigil Gjelsvik
14.00 - 14.10
Krav til test og sertifisering
v/Are Berg
14.10 - 14.40
Krav til datavask og migrering
v/Hans Stubberud
14.40 - 15.00
Milepæler for aktørene
v/Eigil Gjelsvik
Agenda
12.30-13.00 Endringer i forskrift 301 - Karl Magnus Ellinggard, NVE
13.00-13.20 Bakgrunn og formål med Elhub – Tor Heiberg, Elhub
13.20-13.40 Funksjonalitet i Elhub – Jan Magne Strand, Elhub
13.40-13.50 Pause
13.50-14.00 Overordnet om test og migrering – Eigil Gjelsvik, Elhub
14.00-14.10 Krav til test og sertifisering – Eigil Gjelsvik, Elhub
14.10-14.40 Krav til datavask og migrering – Hans Stubberud, Elhub
14.40-15.00 Milepæler for aktørene – Eigil Gjelsvik, Elhub
Status
■ Valg av leverandør
■ Høring av forskriftsendringer
■
■
■
Høringsfrist 1. oktober
Oppsummering av høringen pågår
Vedtak i mai
■ Oppstart for Elhub 20. februar 2017
■
■
Prosjektplan oppdatert
Behov for mer tid til tilpasning av
aktørenes løsninger mht. Elhub
Norges vassdrags- og energidirektorat
Sentrale tema i høringen
■ Viktige temaer i høringen mht. Elhub
■ Personvern – lagringstid for
■
■
■
■
timeverdier
Fødselsnummer
Tidspunkt for innføring av NBS
Nøytralitetskrav
Asymmetrisk avviksoppgjør
Norges vassdrags- og energidirektorat
Krav til avregningsansvarlig/Elhub
■ Leverandørskifter
■ Anleggsovertagelser
■ Stipulering av timesvis uttak
■ Nettap
■ Avregningsdata til
■
■
■
■
regulerkraftavregning
Måleverdier mm. tilgjengelig kl. 0900
Lagring av måleverdier i 3 år
Avviksoppgjør for profilavregnede
mp.
Sikkerhetskrav
Norges vassdrags- og energidirektorat
Krav til nettselskap
■ Overføring av timeverdier innen kl.
■
■
■
■
07.00
Lagring av måleverdier i
målepunktet
Standard for behandling av
timeverdier (VEE)
Skal innhente fødselsnummer ved
datamigrering
Nøytralitetskrav
Norges vassdrags- og energidirektorat
Krav til kraftleverandører
■ Ansvar for oppdatering av
kundeinformasjon
■ Skal innhente fødselsnummer eller
organisasjonsnummer ved
kontraktsinngåelse
■ Kraftleverandør skal presentere
forbruksdata
Norges vassdrags- og energidirektorat
Krav til elhubbrukere
■ Elhubbrukere = Nettselskap
+ kraftleverandører + tredjeparter
■ Skriftlig avtale med
avregningsansvarlig
■ Avtale med sluttbruker for
universell tilgang
■ Webløsning for personvern
Norges vassdrags- og energidirektorat
Migreringsprosjekt
■ Kritisk med en effektiv migrering
for gjennomføring av Elhubprosjektet
■ Både nettselskap og
kraftleverandører må sette i
gang kvalitetssikring av egen
database
■ NVEs oppfølging
■
■
Vedtak om kvalitetssikring og
testing av datakvalitet
Aktørene skal følge milepælene i
migreringsprosjektet
Norges vassdrags- og energidirektorat
Takk for oppmerksomheten
[email protected]
Agenda
12.30-13.00 Endringer i forskrift 301 - Karl Magnus Ellinggard, NVE
13.00-13.20 Bakgrunn og formål med Elhub – Tor Heiberg, Elhub
13.20-13.40 Funksjonalitet i Elhub – Jan Magne Strand, Elhub
13.40-13.50 Pause
13.50-14.00 Overordnet om test og migrering – Eigil Gjelsvik, Elhub
14.00-14.10 Krav til test og sertifisering – Eigil Gjelsvik, Elhub
14.10-14.40 Krav til datavask og migrering – Hans Stubberud, Elhub
14.40-15.00 Milepæler for aktørene – Eigil Gjelsvik, Elhub
Det formelle grunnlaget
Statnett sin konsesjon som
Avregningsansvarlig (f.o.m.
30.01.2012)
"Avregningsansvarlig skal utrede
og ha et overordnet ansvar for å
utvikle felles IKT-løsninger for
kraftmarkedet, som legger til rette
for effektiv informasjonsutveksling
og gjennomføring av
støttefunksjoner for
forretningsprosesser innen
måling, avregning, fakturering og
samordnet opptreden i
kraftmarkedet"
Utviklingen av datahub for
kraftmarkedet (brev fra NVE
28.05.2013)
• NVE ber om at Statnett nå setter
i gang arbeidet med utvikling av
en datahub for kraftmarkedet i
tråd med avregningskonsesjonen
punkt 12…
• …etableres et bransjeråd og en
ekspertgruppe som konsulteres
når det skal fattes beslutninger
om vilkår for aktørene og
funksjonalitet i datahuben.
Endring fra dagens infrastruktur
"i dag, snakker alle med alle"
"alle snakker med en datahub"
Nettselskap
Kraftleverandør
1
A
1
A
B
2
B
2
Måleverdier
Grunndata
Sluttbruker info.
3
4
…
C
Bytte
Flytte
Avregningsdata
Kraftleverandør
Nettselskap
til
3
elhub
C
D
4
D
…
…
…
2.8 mill. målepunkter
Ca. 1 mill. bytte og flytte per år.
Prosjektstatus - Fremdrift
År
Aktivitet
Måned
2013
2014
2015
2016
2017
2018
9 101112 1 2 3 4 5 6 7 8 9 101112 1 2 3 4 5 6 7 8 9 101112 1 2 3 4 5 6 7 8 9 101112 1 21 3 4 5 6 7 8 9 101112 1 12 3 4 5 6 7 8 9 101112
Beslutningsport 1
Kravspesifikasjon
Beslutningsport 2
Valg av leverandør
Beslutningsport 3
Systemimplementasjon og test
Datamigrering og markedstest
Elhub i drift
Beslutningsport 4 og 5
Planlagte bransjerådsmøter
NVE Forskriftsarbeid
(Elhub/NBS)
NVE Forskriftsarbeid
(Leverandørsentrisk/En-regning)
AMS implementering
Elhub versjon 2
21.04.2015
Overordnet status
Q1/15
Anskaffelsesprosess
02/15
Implementeringsplan
Test & Migrering
Operativ drift
20.02.2017
Sikker, effektiv og attraktiv
Gebyrstruktur –
kostnadsfordeling Elhub i operativ drift
Elhub inntekter = Investering + Driftskostnader
Per Målepunkt
Basis årsgebyr
+
Årsgebyr for
-Nettselskap
Gebyr: 30.000,-Kraftlev.
Gebyr: 30.000,-
Tilgang til Elhub
etter
sertifisering
Kraftleverandører
Kostnadsandel 1/5
-3part. ?
Gebyr: 30.000,-
-Systemlev.
Gebyr: 15.000,-
Nett
Kostnadsandel 4/5
Tilgang til Elhub
for systemsertifisering
Helpdesk og
support
3.part
Kostnadsandel 1/15
(Dette er en "usikker post"
og vil bli vurdert fremover)





Leverandørbytte
Inn- og utflytting
Tilgang til kundedata
Uttrekk av måleverdier
Web-API løsning
 Web-API løsning
 Uttrekke av måleverdier på godkjente
tilganger på MPID
Konsekvenser for markedsaktørene
 Endring i roller og markedsfunksjoner

NBS og nettavregningsområder

Omlegging av MAFI
forretningsprosesser (de fleste)

AMS – datavolum og
oppdateringsfrekvens

VEE – Validering og estimering av
måleverdier

Elhub overtar mange av
nettselskapets oppgaver

Leverandørsentrisk og "èn regning"
(potensielt)
 Migrering av data til Elhub
 Testing mot Elhub
 Økte krav til automatisering
 Økte krav til kvalitet
 Drift i henhold til ny markedsmodell
 Delte databaser
Ny strategi for IT og drift
 AMS utrulling
 Funksjoner
 Datakvalitet
 Systemer
 Overganger og utfasing
 Driftsrutiner
 Oursourcing
Konsekvenser for markedsaktørene (ii)
Må ta stilling til roller, rolleinnhold og Systemarkitektur
Nettselskap
Innsamlingssystem
MV validering og
"benchmarking"
MV kvalitetssikring;
Validering, editering,
estimering
Målepunkt-id
+ måleverdier
(ikke real-tid,
hvert døgn)
HAN
*Måleverdier
*Tilgangsstyring
Målepunkt-id
+ måleverdier
(ikke real-tid,
hvert døgn)
Kunde
Måledata
og kunde
Målepunkt-id
+ måleverdier
Måleverdibase
Real-tid
Datahub
Kraftleverandør
3p. leverandør
Målepunkt-id
og måleverdier
NIS
Scada
Nettinformasjons- Nettdrift system
system
Kontrakt
Kontrakt
Agenda
12.30-13.00 Endringer i forskrift 301 - Karl Magnus Ellinggard, NVE
13.00-13.20 Bakgrunn og formål med Elhub – Tor Heiberg, Elhub
13.20-13.40 Funksjonalitet i Elhub – Jan Magne Strand, Elhub
13.40-13.50 Pause
13.50-14.00 Overordnet om test og migrering – Eigil Gjelsvik, Elhub
14.00-14.10 Krav til test og sertifisering – Eigil Gjelsvik, Elhub
14.10-14.40 Krav til datavask og migrering – Hans Stubberud, Elhub
14.40-15.00 Milepæler for aktørene – Eigil Gjelsvik, Elhub
Endringer, de viktigste
• Forskriftsendringer
– Avregningsforskriften – 301, inkludert NBS og Elhub
– Gjennomfakturering
– Plusskunde
• NBS
– Nettavregningsområder - strukturdata
• Elhub
– Flytting av oppgaver – og ansvar
– Utvidet sett av markedsprosesser og endring av tidsfrister
– Økte krav til automatisering og standardisering
– Rapportering NVE - SSB
Elhub versjon 1.0 innhold
Kraftleverandør
Nettselskaper
EDI/XML
• Kundeinformasjon
• Markeds
prosesser
• Måleverdiforespørsel
• Avregningsunderlag
database
Kundeavtale
Sluttbruker
Administrering
• Markedsprosesser
• Målepunkt-DB
• Måleverdi-DB (in/ut)
Oppgaver
• Beregning av
MGA-tap og JIP
• Rapportering til
NBS & NECS
• Avviksunderlag
• Markedsaktører
• Strukturdata
• Sluttbrukers
kontraktrelasjoner
EDI/XML
• Målepunktinformasjon
• Måleverdier
• Markedsprosesser
• Nett-tariff
informasjon
(opsjon)
Måleverdier
Målepunkt
database
Relasjoner til andre systemer
eSett
Underlag til regulerkraftbalansen
Markedsaktørene
Markedsmeldinger
Måleverdier
Underlag til avregning
Avviksunderlag
eSett
Markedsaktørrelasjoner
(ev. Strukturdata - produksjonsanlegg )
NOA
MGA
MBA
Nettselskap
NECS
Underlag til
elsertifikater og opprinnelsesgarantier
Markedsaktører og roller
Sertifisering
Oversikt over en typisk daglig prosess i elhub
relatert til måleverdier og rapportering
Måleverdier
Timemålte
Måleverdier
Profilavregnet
Måleverdiansvarlig
Purringer
VEE
(Nettselskap)
RapporterKvalitet - KPI
Elhub Portal
Sjekk og
lagring
Elhub
Rapportermåleverdier
Rapportertotalvolum
Kalkuleringer, JIP, profilering og
tapsberegninger
Aggregert
volum
Timeverdier
tilgjengelig
B2B Meldinger/
Abonnement
Underlag
NBS
Agg. volum
MGA/aktør
D+2-12
D+13
Nettselskap
Kraftleverandør
3.Part
Balanseansvarlig
Produsenter
NBS
Tidsfrister kl.
07:00
09:00
10:00
12:00
NBS
Balanseansvarlig
Kraftleverandør
3.part
NECS
Beregning
avregningsgrunnlag
Avviksoppgjør
timeavregnede
ATAM
Avviksoppgjør
profilavregnede
APAM
Grunnlag
fakturering
sluttbruker
Grunnlag
elsertifikater
& Elsertifikatmengde
Mottak og
verifisering
Prosessering
Måleverdier, beregnede og aggregerte timeserier
Mottak & profilering av
data fra måleverdiansv.
Tilbakemelding JIP
og statistikk
Målerstand og volumer
Tilbakemelding fra Elhub
Måleverdiansvarlig - Nettselskap
Forbruk, Produksjon og Utveksling
APAM Avviksoppgjør for profilavregnede målepunkter (tidligere saldooppgjør)
ATAM Avviksoppgjør for timeavregnede målepunkter (tidligere korreksjonsoppgjør)
Elhub
Aggregering
Distribusjon
Rolle/Funksjon
Beregningsfunksjoner og rapportering i Elhub
Elhub markedsprosesser, prosesskomponenter og
meldinger
• VEE standard for timemålte
– Standard for Validering, Estimering og Endring.
• Markedsprosesser - BRS
– 55 prosesser med tidsfrister, informasjonskrav og sekvensflyt
• Eksempel: BRS-NO-101 Oppstart kraftleveranse - leverandørskifte
• Prosesskomponenter
– 48 forretningsfunksjoner (logiske meldinger) fra/til EN aktør
• Meldinger
– 37 fysiske meldinger. 8 inn, 3 inn/ut, 25 ut og kvitteringsmelding
Oppdatering av dokumentene er nødvendig.
Planlegges oppdatert i løpet av mai/juni (avhengig av forskriftsarbeidet)
Hvor ligger dokumentene
Eksisterende
prosesser
Endring i oppgaver
Elhub
Mer automatisering
Nye prosesser
Elhub Prosjektet
Støtte - Avklaring
Nytt meldingsformat og protokoll
Endringer i aktørenes systemer og prosesser
Aktørenes
KIS
systemer
Nye og endrede
prosesser og
oppgaver
Endringer
Nye
funksjoner
Systemleverandører
vil medføre
endringer i
aktørenes
arbeidsprosesser
og deres
støttesystemer
Endringer - nettselskap
• Måleverdiinnsamling og VEE
• Tidsfrister
• Informasjonsmodell - ansvar
• Oppgaveoverføring til elhub
– MGA tap og JIP
– Beregning av MGA balanse
– Avviksunderlag (saldo og korrigering)
– Rapportering til NBS og NECS
• Arbeidsprosess-støtte
– Endringer i egen org. & systemer
– Aktørportal støtte
– KPI rapporter
• Nøytralitet
Nettselskaper
EDI/XML
• Målepunktinformasjon
• Måleverdier
• Markedsprosesser
• Nett-tariff
informasjon
(opsjon)
Måleverdier
Målepunkt
database
Endringer – kraftleverandør og 3. part
• Elhub som part
Kraftleverandør
EDI/XML
• Kundeinformasjon
• Markeds
prosesser
• Måleverdiforespørsel
• Avregningsunderlag
database
Kundeavtale
Sluttbruker
– Markedsprosesser
– Måleverdier
– Avregningsunderlag
• Tidsfrister
• Informasjonsmodell
• Sluttbrukers tilgang
– Web Plug-in
• 3. parts tjenester
– Tilganger
– måleverdier
• Nøytralitet
Markedsaktørenes WEB Portal
Eksempel på forskjellige grafiske fremstillinger
KPI og status, visualisert per nettavregningsområde
D = 01.10.2016
D = 01.10.2016
Eksempel
Elhub operatør oversikt
Balanseunderlagsberegning
Ikke Startet
Startet
> 50%
Ferdig 100%
Måleverdikvalitet (07:00)
Ikke mottatt
> 50%
> 90%
100%
(Brukt kommunekart)
Spørsmål og svar…
Agenda
12.30-13.00 Endringer i forskrift 301 - Karl Magnus Ellinggard, NVE
13.00-13.20 Bakgrunn og formål med Elhub – Tor Heiberg, Elhub
13.20-13.40 Funksjonalitet i Elhub – Jan Magne Strand, Elhub
13.40-13.50 Pause
13.50-14.00 Overordnet om test og migrering – Eigil Gjelsvik, Elhub
14.00-14.10 Krav til test og sertifisering – Eigil Gjelsvik, Elhub
14.10-14.40 Krav til datavask og migrering – Hans Stubberud, Elhub
14.40-15.00 Milepæler for aktørene – Eigil Gjelsvik, Elhub
Overordnet om test og migrering
Markedsaktørenes ansvar før Go-Live 20.02.2017
Aktør testet og godkjent i
Elhub
Data migrert til Elhub
• Aktør har migrert definert
dataportefølje til Elhub
• Datakvalitet på migrerte data må
være i henhold til Elhubs krav
• Data i Elhub er konsistent med
aktørenes data
• Aktørs system oppgradert
• Aktør sertifisert i Ediel-portalen og
godkjent i Elhub
• Aktør har innført nye
forretningsprosesser og
gjennomført intern opplæring
SYSTEMTILPASNING/
TEST
Aktør
klar for
Elhub
MIGRERING
Ekspertgruppe for test og migrering
• Oppstart høst 2014
• Utpekt av bransjeorganisasjonene
• Representativt utvalg av kraft og nett-selskaper og de viktigste
systemleverandørene
• Skal bidra i å utarbeide strategier og prosesser samt spesifisere tekniske
løsninger for aktørtesting og datamigrering
• Skal bidra til å etablere og teste ut løsning og metodikk i praksis (via
pilotaktører)
• Status:
– Filformat og datakvalitetskrav for migrering er utarbeidet og publisert (v0.9)
– Overordnet prosess for aktørtesting og migrering utarbeidet. Detaljering av
prosesser pågår
– Uttrekk av migreringsdata fra pilotaktører i gang, analyser pågår
– Undergruppe arbeider med prosess for datavask
Systemtilpasning og test
Hovedaktiviteter aktørtesting
• Aktørsertifisering i Edielportalen
– Elhub vil videreføre oppsettet med test og sertifisering i Edielportalen
– Denne testen vil verifisere at aktøren kan utveksle meldinger med Elhub på
korrekt format i henhold til aktuell rolle
– Vi vil kreve at både Systemsertifisering og Aktørsertifisering i Edielportalen er
gjennomført før en markedsaktør kan godkjennes i Elhub
• Godkjenning i Elhub
– Denne prosessen omfatter Systemtest og Aktørtest.
– Systemtest er en full funksjonell ende-til-ende test av et IT-system mot Elhub
– Aktørtesten er mindre omfattende og skal verifisere at aktører kan gjennomføre
et utvalg av ende-til-ende prosesser med Elhub via et sertifisert IT-system
– Godkjenning i Elhub forutsette at markedsaktører har tilpasset sine interne
arbeidsprosesser i forhold til Elhub
Ansvarsfordeling – aktørtesting
Elhub-prosjektet er ansvarlig for å
Markedsaktørene er ansvarlig for å
Etablere overordnede planer for Elhub
aktørtesting
Etablere planer for egen utvikling og
enhetstesting
Tilpasse egne systemer for Elhub
Endre egne forretningsprosesser og
gjennomføre intern opplæring
Tilpasse Edielportalen for sertifisering mot Gjennomføre test og sertifisering i
Elhub
Edielportalen
Planlegge aktørtest i Elhub og foreta
godkjenning av aktører
Gjennomføre test og godkjenning mot
Elhub
Sertifisering pr. rolle
Oppdatering
grunndata
kunde
Markedsprosesser
(opphør/
oppstart)
Oppdatering
grunndata
målepunkt
Måleverdiinnsamling
Andre roller som må sertifiseres
Balanseansvarlige
Produsenter
NBS
Spørringer og
rapporter
NECS
3.parter
BRS/Prosesser pr. rolle
Obligatorisk
• Oppstart
• Leverandørskifte
• Innflytting
• Kansellering
• Opphør
• Oppsigelse
• Utflytting
• Kansellering
• NUBIX
• Oppdatering grunndata kunde
• Målerstand/årsforbruk
Valgfritt
• Spørring
• Måleverdier
• Porteføljeoversikt
• Avregningsgrunnlag
• Masterdata
• Forespørsel til nettselskap
• Forespørsel til Elhub
Obligatorisk
• Mottak av Oppstart kraftleveranse
lev. plikt
• Kansellering
• Mottak av Opphør kraftleveranse
lev. plikt
• Kansellering
• Mottak masterdata kunde
• Mottak måleverdier
Obligatorisk
• Oppstart i målepunkt
• Innflytting
• Kansellering
• Opphør i målepunkt
• Oppsigelse
• Kansellering
• Oppdatering av grunndata MP
• Svar fra nettselskap
Valgfritt
• Spørring
• Måleverdier
• Porteføljeoversikt
• Avregningsgrunnlag
• Masterdata
• Forespørsel til Elhub
Obligatorisk
• Måleverdier
Valgfritt
• Spørring
• Måleverdier
• Forespørsel til Elhub
Sjekklister for markedsaktører
Sjekkpunkt
Aktør har definert omfang på egne aktiviteter
Aktør har definert Elhub innføringsprosjekt med ansvarlige for hhv
datakvalitet/datamigrering og systemtilpasning/test
Krav til endringer i IT-systemer er identifisert
Krav til endringer i arbeidsprosesser og organisasjon er identifisert
Aktør har valgt leverandør(er) av system(er) som skal ha grensesnitt mot
Elhub
Aktør har lagt en overordnet plan for systemtilpasning og test
Aktør har lagt en overordnet plan for datavask og datamigrering
M1 Aktør har kartlagt egne data og utarbeidet plan for innføring
av Elhub
Aktør har inngått avtale om utvikling og test med systemleverandør
Aktørs system er tilpasset for Elhub og er klar for sertifisering
M2 Støtte for innhenting av fødselsnr er implementert
Systemsertifisering i Edielportalen er gjennomført
Plan for gjennomføring av Leverandørtest/Vendor trial er utarbeidet
M3 Aktørs system skal være sertifisert i Edielportalen og klar for
systemgodkjenning i Elhub
Aktørs system er klargjort for Leverandørtest i Elhub
Leverandørtest i Elhub er gjennomført
M4 Aktørs system er godkjent i Elhub (Vendor trial er
gjennomført)
Godkjent system er installert hos markedsaktør
Intern opplæring i Elhub-funksjonalitet er gjennomført
Kraftleverandør har implementert prosess for kvalitetssikring og
vedlikehold av fødselsnr
Aktørsertifisering i Edielportalen er gjennomført
Aktør har inngått brukeravtale med Elhub
Plan for gjennomføring av Aktørgodkjenning/Market trial er utarbeidet
M5 Aktør er sertifisert i Edielportalen og er klar for godkjenning i
Elhub
Aktør har tilpasset interne arbeidsprosesser til Elhub
Aktørgodkjenning i Elhub (Market trial) er gjennomført
Ny VEE prosess er implementert
Dato
Kommentar
Basert på Elhub-spesifikasjoner (BRS, BIM og VEE).
Markedsaktør
Markedsaktør
Markedsaktør
Endringer i interne arbeidsprosesser som følge av Elhub
Markedsaktør
Markedsaktør
Både interne og eksterne aktiviteter og avhengigheter mellom disse.
Både interne og eksterne aktiviteter og avhengigheter mellom disse.
01.06.2015
Markedsaktør
Systemleverandør
01.11.2015
Systemleverandør
Elhub
01.03.2016
Systemleverandør
Systemleverandør
Test av systemer mot Elhub
01.07.2016
Markedsaktør
Markedsaktør
Kraftleverandør
For aktørsertifisering
Markedsaktør
Markedsaktør
Elhub
Kjøre definerte testcase
01.10.2016
Markedsaktør
Markedsaktør
Markedsaktør
Rutiner for forløpende datavask i drift er implementert
M6 Aktør er godkjent i Elhub (Market Trial er gjennomført)
Ansvarlig
Markedsaktør
Markedsaktør
Markedsaktør
15.01.2017
Skal skje senest ved produksjonssetting av Elhub-løsningen, men kan
også skje før
Etter overgang til Elhub skal aktør tilfredsstille Elhubs krav til
datakvalitet
Datamigrering
Introduksjon til migrering
• For at Elhub skal fungere som forventet, må relevante data være
migrert inn i løsningen fra markedet ved go-live
• Ved oppstart må data i Elhub være konsistent med aktørenes data
• Elhub migreringsprosjektet er etablert for å gjennomføre og sikre
denne datainnsamlingen
• Migreringsprosjektet har definert mottak av 5 filtyper med data fra
markedsaktører
• Markedsaktørene har ansvar for datakvalitet og eierskap til
informasjon
– Migreringsprosjektet påpeker identifiserte feil i data, kraftleverandører og
nettselskaper må korrigere disse
– En filtype for tilbakemelding er definert for hver av filtypene for innsending
Ansvarsfordeling – migrering
Elhub-prosjektet
Markedsaktørene
Etablere og administrere overordnede
planer og prosesser for migrering
Etablere planer for egen datavask og
migrering
Definere krav til datainnhold,
datakvalitet og filformat for migrering
Gjennomføre datavask på egne data i
henhold til Statnetts krav
Etablere og drifte sentral
migreringsplattform (DAM)
Migrere egne data til DAM i henhold til
Statnetts planer
Prinsipiell teknisk infrastruktur for migrering
Front
end
DAM
Kraftleverandør Periodisk kjøring
Validation
Nettselskap
Migr.
DB
Elhub
migr.
Elhub
DB
Migrering av data fra kraft og nett
Elhub
Kraftleverandør
• Kunde
• Relasjon til
målepunkt
• Lagring
• Syntakskontroll
• Integritetskontroll
• Konsistenskontroll
•
•
•
•
Målepunkt
Måleverdier
Kunde
Relasjoner
Nettselskaper
database
database
Sluttbruker
Målepunkt
Filformater for migrering
Kontrakt
Kunde
Målepunkt
Kunde
Kontrakt
Måleverdier
Kraftleverandør
Nettselskap
5 filtyper:
• Metering Point
• Customer
• Metering value
• Contracts
• Formula
Overordnet innsendingsprosess
• Aktørene starter å migrere inn data så tidlig som mulig (så fort DAM er tilgjengelig, tentativt fra
høst 2015) og fortsetter å sende inn kompletterende data i månedlige iterasjoner frem til GoLive
• Aktørene kan for hver iterasjon starte med å sende inn en delmengde av data som
kompletteres etter hvert, inntil de har sendt inn hele porteføljen
• Mellomstore og store aktører (over 5000 målepunkter) skal kun sende inn nye eller endrede
data siden forrige iterasjon
• Små aktører (mindre enn 5000 målepunkter) tillates å sende inn fullt datasett for grunndata og
strukturdata i hver iterasjon
• For måleverdier skal kun nye eller endrede data siden forrige iterasjon sendes inn
Datakvalitet og datakonsistens sikres kontinuerlig fra et tidlig tidspunkt
Risiko reduseres og frysperiode minimeres ved at det ikke er behov for store
dataoverføringer rett før Go-Live
Demo av migreringsverktøy (DAM)
Initielt skjermbilde
Filopplasting
Fil lastet opp
Fil validert på korrekt format
Rapport på filvalidering
Rapport på filvalidering – delvis underkjent fil
Mer informasjon om feil i fil
Detaljert feilrapport
Krav til datakvalitet og datavask
Datakvalitetsutfordring: Innstramming i ny forskrift
og innføring av Elhub
• Én og samme sluttbruker
for nett og kraft på ett og
samme målepunkt
• Sluttbrukeren skal være en
person eller juridisk person
• Sluttbrukeren skal være
identifisert enten ved
fødselsnummer (Dnummer) eller
organisasjonsnummer
Overordnede datakvalitetskrav
QA-kategori
Beskrivelse
FEILNIVÅ
TYPISK INFORMASJON
MÅ
Data som er nødvendige
for at Elhub skal virke.
MÅ kvalitetssikes.
KRITISK
•
•
•
•
•
BØR
Data som skal sendes til
ALVORLIG
Elhub som ikke er
driftskritiske, men er viktige
for markedet.
BØR kvalitetssikres.
• Målepunktadresse
KAN
Data som skal sendes til
Elhub som ikke er
driftskritiske, men vil bli
viktige for markedet.
KAN kvalitetssikres
• Kundeadresse
• Kontaktinfo
MINDRE
VIKTIG
Målepunktinformasjon
Måleverdier
Kundeidentifikasjon
Avgiftsinformasjon
Relasjoner
Kvalitetssikringskrav pr felt
Anbefalt kvalitetssikring som aktørene skal
gjennomføre
QA-kategori
INFORMASJON
ANBEFALT KVALTETSSIKRING
MÅ
Målepunktinformasjon
Sjekk at målepunkt-ID har gyldig GSRN-nr
Fjern duplikater
Måleverdier
Sjekk at parameter "antatt årsforbruk" er
rimelig
Kundeidentifikasjon person
Sjekk navn og fødselsnr mot Folkeregisteret
Splitt navn til fornavn/etternavn
Kundeidentifikasjon bedrift
Sjekk navn og organisasjonsnr mot
Brønnøysund
Avgiftsinformasjon
Sjekk om satser er riktige i forhold til type
forbruk på målepunkt
Relasjoner
Sjekk av kunderelasjon på målepunkt mellom
kraftleverandør og nettselskap
BØR
Målepunktadresse
Sjekk mot Matrikkelen
KAN
Kundeadresse
Sjekk mot kunden
Kontaktinfo
Sjekk mot kunden
Vasking av data mot Folkeregisteret
• Gjennom avtale med Skattedirektoratet (Skd) er EVRY
enedistributør av DSF. Se www.infotorg.no
• Det kreves tillatelse for å få tilgang til DSF, for eksempel i
forbindelse med vask og vedlikehold. Tillatelse må innhentes
hos registereier (Skattedirektoratet) før det kan etableres
tilgang til en tjeneste hos DSF
• Elhub-prosjektet vil følge opp at tilstrekkelige hjemler gis til
aktørene gjennom forskrifter og vil være en fasilitator i
prosessen for å sikre tillatelse fra Skattedirektoratet
• Elhub-prosjektet vil ikke være involvert i aktørenes tekniske
integrasjon mot DSF
Inkonsistens i kundedata fra nett og kraft
Kontrakt
Kunde
Målepunkt
Kunde
Kontrakt
Måleverdier
•
•
Kraftleverandør
•
Nettselskap
•
Inkonsistens mellom kraft og nett må
rettes før Go-Live
Dersom fortsatt inkonsistens ved GoLive vil Elhub velge data fra Nett
Inkonsistens defineres som feil for
kraftleverandør
Prosess for retting av inkonsistens er
Definisjon av feil i migrerte data
• Feil i migrerte data aggregeres og rapporteres på
målepunktnivå – et målepunkt er enten korrekt eller feil
• Et målepunkt defineres som feil dersom
– Målepunktet mangler (dvs at målepunktet eksisterer i virkeligheten men
data om målepunktet er ikke migrert til Elhub)
ELLER
– Et obligatorisk felt tilknyttet målepunktet mangler
ELLER
– Et tilknyttet felt har en KRITISK feil (dvs QA-krav = MÅ)
Historikk på migrerte data
• Elhub skal ha historikk fra 1. januar 2016 på spesifiserte felter,
herunder:
– Knytning mellom målepunkt og aktører, dvs. kraftleverandør,
balanseansvarlig, nettselskap og sluttbruker
– Målepunktinformasjon som avregningsmetode, avlesningsmetode,
status
– Måleverdiinformasjon som kvantitet, kvalitet, valideringskode,
estimeringskode, registreringsdato, startdato, tildato, kategori
Kvalitetskrav per felt
Migreringsfiler og felter
Informasjon om Målepunkt fra Nettselskap
Påkrevde felter nettselskap
Påkrevd
QA-krav
Historikk
Tilbakemelding til…
Må
i/r
Nettselskap
Obligatorisk
Avhengig
Må
Må
i/r
i/r
Nettselskap
Nettselskap
SettlementMethodType
Avhengig
Må
Ja
Nettselskap
MeteringReadingCharacteristics
MeasurementProfile
Priority
MeteringPointLoadLimit
MeteringPointInstalledEffect
ReportingFrequency
ReportingFrequencyStart
MeteringPointSubTypeProduction
MeteringPointSubTypeConsumption
SettlementConstant
MeterDigits
MeteringGridAreaUsed
OutAreaUsed
MeteringPointType
MeteringPointStatus
MeterIdentification
MeteringPointAccountable
GardsNr
BruksNr
SeksjonsNr
FesteNr
Location
RoomIdentification
FloorIdentification
BuildingNumber
BuildingLetter
StreetName
StreetCode
CitySubDivisionName
PostCode
MunicipalityCode
Obligatorisk
Obligatorisk
Avhengig
Avhengig
Avhengig
Avhengig
Avhengig
Avhengig
Avhengig
Avhengig
Avhengig
Obligatorisk
Avhengig
Obligatorisk
Obligatorisk
Avhengig
Obligatorisk
Avhengig
Avhengig
Avhengig
Avhengig
Valgfri
Valgfri
Valgfri
Avhengig
Valgfri
Valgfri
Valgfri
Valgfri
Obligatorisk
Avhengig
Må
Må
Må
Bør
Må
Kan
Må
Må
Må
Kan
Kan
Må
Må
Må
Må
Kan
i/r
Bør
Bør
Bør
Bør
Bør
Bør
Bør
Bør
Bør
Bør
Bør
Bør
Bør
Bør
Ja
Ja
Ja
Nei
Nei
Nei
Nei
Nei
Nei
Nei
Nei
Nei
Nei
Nei
Ja
Nei
Nei
Nei
Nei
Nei
Nei
Nei
Nei
Nei
Nei
Nei
Nei
Nei
Nei
Nei
Nei
Nettselskap
Nettselskap
Nettselskap
Nettselskap
Nettselskap
Nettselskap
Nettselskap
Nettselskap
Nettselskap
Nettselskap
Nettselskap
Nettselskap
Nettselskap
Nettselskap
Nettselskap
Nettselskap
Nettselskap
Nettselskap
Nettselskap
Nettselskap
Nettselskap
Ingen konsistenskontroller
Ingen konsistenskontroller
Ingen konsistenskontroller
Nettselskap
Ingen konsistenskontroller
Ingen konsistenskontroller
Ingen konsistenskontroller
Ingen konsistenskontroller
Nettselskap
Nettselskap
Fil
Felt
Metering Point
MeteringPointID
Obligatorisk
ValidFrom
ValidTo
Mulig feil, grunn og aksjon
Ikke unik verdi på tvers av ulike GAP (samme GAP
antas å være histoikk).
Feil med overlapp eller gap i historikk.
Feil med overlapp eller gap i historikk.
Kan være relatert til både
MeteringReadingCharacteristics og MeteringPointType.
Utenfor lovlig intervall fra en verdi til en annen.
Før NBS: Ingen. Etter NBS: Gyldig MGA.
Før NBS: Ingen. Etter NBS: Gyldig MGA.
Evt. sjekkes mot postnummertabell
Migreringsfiler og felter
Informasjon om Måleverdier fra Nettselskap
Fil
Metering Value
Påkrevde felter nettselskap
Felt
Påkrevd
QA-krav
MeteringPointUsed
Obligatorisk
Må
TimeSeriesType
Obligatorisk
Må
ProductType
Obligatorisk
Må
UnitType
Obligatorisk
Må
RegistrationVersionNumber Valgfri
Må
StartDate
Obligatorisk
Må
EndDate
Obligatorisk
Må
QuantityQuality
Obligatorisk
Må
RegistrationDateTime
Obligatorisk
Må
Quantity
Obligatorisk
Må
ValidationCode
Avhengig
Må
EstimationCode
Avhengig
Må
VolumeCategoryCode
Obligatorisk
Må
ExpectedAnnualConsumption Avhengig
Må
MeterReadingOriginType
Obligatorisk
Må
Historikk
i/r
Ja
Ja
Ja
Ja
i/r
i/r
Ja
Ja
Ja
Ja
Ja
Ja
Nei
Ja
Tilbakemelding til… Mulig feil, grunn og aksjon
Nettselskap
Nettselskap
Nettselskap
Nettselskap
Nettselskap
Nettselskap
Nettselskap
Nettselskap
Nettselskap
Nettselskap
Nettselskap
Nettselskap
Nettselskap
Nettselskap
Nettselskap
Migreringsfiler og felter
Informasjon om Formler fra Nettselskap (ikke i bruk enda)
Fil
Formula
Felt
ResultMeteringPoint
ValidFrom
ValidTo
FormulaItemNumber
FormulaNumberOfItems
FormulaVersionNumber
FormulaItemIdentification
MeteringPointReferenced
ArithmeticOperation
Påkrevde felter nettselskap
Påkrevd
QA-krav
Obligatorisk
Kan
Obligatorisk
Kan
Avhengig
Kan
Obligatorisk
Kan
Obligatorisk
Kan
Valgfri
Kan
Obligatorisk
Kan
Obligatorisk
Kan
Obligatorisk
Kan
Historikk
i/r
i/r
i/r
i/r
i/r
Nei
Nei
Nei
Nei
Tilbakemelding til…
Nettselskap
Nettselskap
Nettselskap
Nettselskap
Nettselskap
Ingen konsistenskontroller
Nettselskap
Nettselskap
Nettselskap
Mulig feil, grunn og aksjon
Migreringsfiler og felter
Informasjon om Kontrakt fra Nettselskap
Fil
Contract
Felt
MeteringPointUsed
Påkrevde felter nettselskap
Påkrevd
QA-krav Historikk Tilbakemelding til…
Obligatorisk Må
i/r
Nettselskap
ValidFrom
Obligatorisk
Må
i/r
Nettselskap
ValidTo
Avhengig
Må
i/r
Nettselskap
ContractCode
CustomerReferenceEndUser
CustomerReferenceInvoice
GridAccessProvider
BalanceSupplierUsed
BalanceResponsibleParty
NACE_Code
ConsumptionCode
ElCertificateShare
EnovaFeeShare
EnovaFeeType
ElFeeShare
ValueAddedTaxShare
EndReason
Channel1
Description1
Value1
Channel2
Description2
Value2
Channel3
Description3
Value3
Channel4
Description4
Value4
Obligatorisk
Obligatorisk
Valgfri
Valgfri
Obligatorisk
Obligatorisk
Obligatorisk
Avhengig
Obligatorisk
Obligatorisk
Obligatorisk
Obligatorisk
Obligatorisk
Avhengig
Valgfri
Valgfri
Valgfri
Valgfri
Valgfri
Valgfri
Valgfri
Valgfri
Valgfri
Valgfri
Valgfri
Valgfri
Må
Må
Kan
i/r
Må
Må
Må
Må
Må
Må
Må
Må
Må
Må
Kan
Kan
Kan
Kan
Kan
Kan
Kan
Kan
Kan
Kan
Kan
Kan
i/r
i/r
Nei
i/r
i/r
Ja
Ja
Ja
Ja
Nei
Nei
Nei
Nei
Nei
Nei
Nei
Nei
Nei
Nei
Nei
Nei
Nei
Nei
Nei
Nei
Nei
Nettselskap
Nettselskap
Ingen konsistenskontroller
Ingen konsistenskontroller
Nettselskap
Nettselskap
Kraftleverandør
Kraftleverandør
Kraftleverandør
Kraftleverandør
Kraftleverandør
Kraftleverandør
Kraftleverandør
Kraftleverandør
Ingen konsistenskontroller
Ingen konsistenskontroller
Ingen konsistenskontroller
Ingen konsistenskontroller
Ingen konsistenskontroller
Ingen konsistenskontroller
Ingen konsistenskontroller
Ingen konsistenskontroller
Ingen konsistenskontroller
Ingen konsistenskontroller
Ingen konsistenskontroller
Ingen konsistenskontroller
Mulig feil, grunn og aksjon
MP mangler fra GAP(MP). Feil i MP-fil.
Feil med overlapp eller gap i tidsperiode mellom
eierskap/historikk. Tbm. avhengig av felt - hvis endret
BS, tbm. til alle (tre parter)
Feil med overlapp eller gap i tidsperiode mellom
eierskap/historikk. Tbm. avhengig av felt - hvis endret
BS, tbm. til alle (tre parter)
Kunde mangler i kundefil. Tbm. samme.
Kunde mangler i kundefil. Tbm. samme.
Inkonsistent GAP og GAP fra filnavn/innsender.
MP ikke i BS(kontrakt), dvs. feil BS. Tbm. GAP.
Ikke gyldig BRP
Avvikende NACE mellom BS og GAP.
Avvikende verdi mellom BS og GAP.
Avvikende MVA mellom BS og GAP.
Migreringsfiler og felter
Informasjon om Kunde fra Nettselskap
Påkrevde felter nettselskap
Påkrevd
QA-krav Historikk
Obligatorisk Må
i/r
Obligatorisk Må
i/r
Obligatorisk Må
i/r
Avhengig
Må
i/r
Tilbakemelding til…
Nettselskap
Nettselskap
Nettselskap
Nettselskap
Obligatorisk Må
Nei
Kraftleverandør
CustomerIdentityType Obligatorisk Må
Nei
Kraftleverandør
Nationality
Obligatorisk Må
Nei
Kraftleverandør
FirstName
Avhengig
Må
Nei
Kraftleverandør
LastName
Avhengig
Må
Nei
Kraftleverandør
CompanyName
Avhengig
Må
Nei
Kraftleverandør
PostOfficeBox
CareOf
Attention
RoomIdentification
FloorIdentification
BuildingNumber
BuildingLetter
StreetName
StreetCode
CitySubDivisionName
PostCode
CountryCode
Valgfri
Valgfri
Valgfri
Valgfri
Valgfri
Avhengig
Valgfri
Avhengig
Valgfri
Valgfri
Obligatorisk
Obligatorisk
Kan
Kan
Kan
Kan
Kan
Kan
Kan
Kan
Kan
Kan
Kan
Kan
Nei
Nei
Nei
Nei
Nei
Nei
Nei
Nei
Nei
Nei
Nei
Nei
Ingen konsistenskontroller
Ingen konsistenskontroller
Ingen konsistenskontroller
Ingen konsistenskontroller
Ingen konsistenskontroller
Nettselskap
Ingen konsistenskontroller
Nettselskap
Ingen konsistenskontroller
Ingen konsistenskontroller
Nettselskap
Evt. sjekkes mot postnummertabell
Nettselskap
Fil
Felt
Customer CustomerReference
AddressType
ValidFrom
ValidTo
CustomerIdentity
Mulig feil, grunn og aksjon
Maks 2 innslag med forskjellig AddressType per aktør.
Maks 2 innslag med forskjellig AddressType per aktør.
Feil med overlapp eller gap i historikk.
Feil med overlapp eller gap i historikk.
Sammenfallende med navn på tvers av aktører. Tbm. til
alle berørte aktører.
Sammenfallende med navn på tvers av aktører. Tbm. til
alle berørte aktører.
Sammenfallende med navn på tvers av aktører. Tbm. til
alle berørte aktører.
Sammenfallende med navn på tvers av aktører. Tbm. til
alle berørte aktører.
Sammenfallende med navn på tvers av aktører. Tbm. til
alle berørte aktører.
Sammenfallende med navn på tvers av aktører. Tbm. til
alle berørte aktører.
Migreringsfiler og felter
Informasjon om Kontrakt fra Kraftleverandør
Påkrevde felter kraftleverandører
Påkrevd
QA-krav Historikk Tilbakemelding til…
Fil
Felt
Mulig feil, grunn og aksjon
MP mangler fra GAP. Enten feil i MP eller feil fra GAP. Tbm.
til begge.
Feil med overlapp eller gap i tidsperiode mellom
eierskap/historikk. Tbm. til BS, evt. begge BS hvis lev.skifte.
Feil med overlapp eller gap i tidsperiode mellom
eierskap/historikk. Tbm. til BS, evt. begge BS hvis lev.skifte.
Contract
MeteringPointUsed
Obligatorisk
Må
i/r
Begge aktører
ValidFrom
Obligatorisk
Må
i/r
Kraftleverandør
ValidTo
Avhengig
Må
i/r
Kraftleverandør
ContractCode
CustomerReferenceEndUser
CustomerReferenceInvoice
GridAccessProvider
Obligatorisk
Obligatorisk
Valgfri
Obligatorisk
i/r
Må
Kan
Må
i/r
i/r
Nei
i/r
BalanceSupplierUsed
Valgfri
i/r
i/r
BalanceResponsibleParty
NACE_Code
ConsumptionCode
ElCertificateShare
EnovaFeeShare
EnovaFeeType
ElFeeShare
ValueAddedTaxShare
EndReason
Channel1
Description1
Value1
Channel2
Description2
Value2
Channel3
Description3
Value3
Channel4
Description4
Value4
Obligatorisk
Obligatorisk
Valgfri
Valgfri
Valgfri
Valgfri
Valgfri
Obligatorisk
Avhengig
Valgfri
Valgfri
Valgfri
Valgfri
Valgfri
Valgfri
Valgfri
Valgfri
Valgfri
Valgfri
Valgfri
Valgfri
Må
Må
Kan
Må
Må
Må
Må
Må
Må
Kan
Kan
Kan
Kan
Kan
Kan
Kan
Kan
Kan
Kan
Kan
Kan
Ja
Ja
Ja
Ja
Nei
Nei
Nei
Nei
Nei
Nei
Nei
Nei
Nei
Nei
Nei
Nei
Nei
Nei
Nei
Nei
Nei
Kraftleverandør
Kraftleverandør
Kunde mangler i kundefil. Tbm. samme.
Ingen konsistenskontroller Kunde mangler i kundefil. Tbm. samme.
Kraftleverandør
MP ikke hos GAP, dvs. feil GAP(MP).
Inkonsistent BS og BS fra filnavn/innsender. Tbm. BS
Ingen konsistenskontroller
(valgfri)
Kraftleverandør
Ikke gyldig BRP
Kraftleverandør
Avvikende NACE mellom BS og GAP.
Kraftleverandør
Avvikende verdi mellom BS og GAP.
Kraftleverandør
Kraftleverandør
Kraftleverandør
Kraftleverandør
Kraftleverandør
Avvikende MVA mellom BS og GAP.
Kraftleverandør
Ingen konsistenskontroller
Ingen konsistenskontroller
Ingen konsistenskontroller
Ingen konsistenskontroller
Ingen konsistenskontroller
Ingen konsistenskontroller
Ingen konsistenskontroller
Ingen konsistenskontroller
Ingen konsistenskontroller
Ingen konsistenskontroller
Ingen konsistenskontroller
Ingen konsistenskontroller
Migreringsfiler og felter
Informasjon om Kunde fra Kraftleverandør
Fil
Felt
Customer CustomerReference
AddressType
ValidFrom
ValidTo
Påkrevde felter kraftleverandører
Påkrevd
QA-krav Historikk
Obligatorisk Må
i/r
Obligatorisk Må
i/r
Obligatorisk Må
i/r
Avhengig
Må
i/r
CustomerIdentity
Tilbakemelding til…
Kraftleverandør
Kraftleverandør
Kraftleverandør
Kraftleverandør
Mulig feil, grunn og aksjon
Maks 2 innslag med forskjellig AddressType per aktør.
Maks 2 innslag med forskjellig AddressType per aktør.
Feil med overlapp eller gap i historikk.
Feil med overlapp eller gap i historikk.
Sammenfallende med navn på tvers av aktører. Tbm. til
alle berørte aktører.
Sammenfallende med navn på tvers av aktører. Tbm. til
alle berørte aktører.
Sammenfallende med navn på tvers av aktører. Tbm. til
alle berørte aktører.
Sammenfallende med navn på tvers av aktører. Tbm. til
alle berørte aktører.
Sammenfallende med navn på tvers av aktører. Tbm. til
alle berørte aktører.
Sammenfallende med navn på tvers av aktører. Tbm. til
alle berørte aktører.
Obligatorisk Må
Nei
Kraftleverandør
CustomerIdentityType Obligatorisk Må
Nei
Kraftleverandør
Nationality
Obligatorisk Må
Nei
Kraftleverandør
FirstName
Avhengig
Må
Nei
Kraftleverandør
LastName
Avhengig
Må
Nei
Kraftleverandør
CompanyName
Avhengig
Må
Nei
Kraftleverandør
PostOfficeBox
CareOf
Attention
RoomIdentification
FloorIdentification
BuildingNumber
BuildingLetter
StreetName
StreetCode
CitySubDivisionName
PostCode
CountryCode
Valgfri
Valgfri
Valgfri
Valgfri
Valgfri
Avhengig
Valgfri
Avhengig
Valgfri
Valgfri
Obligatorisk
Obligatorisk
Kan
Kan
Kan
Kan
Kan
Kan
Kan
Kan
Kan
Kan
Kan
Kan
Nei
Nei
Nei
Nei
Nei
Nei
Nei
Nei
Nei
Nei
Nei
Nei
Ingen konsistenskontroller
Ingen konsistenskontroller
Ingen konsistenskontroller
Ingen konsistenskontroller
Ingen konsistenskontroller
Kraftleverandør
Ingen konsistenskontroller
Kraftleverandør
Ingen konsistenskontroller
Ingen konsistenskontroller
Kraftleverandør
Evt. sjekkes mot postnummertabell
Kraftleverandør
Migreringspilot – foreløpige funn
Datagrunnlag fra pilotaktørene
• 3 forskjellige systemer
• 10 pilotaktører
– 6 Nettselskap
– 4 Kraftleverandører
• 251.000 kundeforhold
• 219.000 kundeforhold - privat
• 32.000 kundeforhold - bedrift
• 249.000 målepunkt
• 494.000 kontrakter
• 253.000 nett-kontrakter
• 241.000 kraft-kontrakter
Foreløpige funn - internt hos aktører
Form for avvik
Hyppighet
Kunder helt uten identifikasjon
0,004%
Privatkunder uten fødselsdato
0,12% (0,12% av
privatkunder)
Bedriftskunder uten org.nummer
0,16% (3,84% av
bedriftskunder)
Privatkunder med næringskode
0,78% (0,81% av
privatkunder)
Kunder uten kontaktinfo
0,25%
Bedriftskunder med feil navn
Bedriftskunder med feil næringskode
Foreløpige funn – inkonsistens mellom nett og kraft i
kundeidentifikasjon
Form for avvik
Hyppighet
En eller annen form for avvik i
kundeidentifikasjon
29,14%
Av dette:
Feil som antatt blir borte etter
grunnleggende datavask
25,73%
Herr/fru
1,08% (1,25% av
privatkunder)
Privat/bedrift
0,60%
Inkonsistent kunde uten relasjon seg i
mellom
1,73%
Mangler kontrakt for enten kraft eller
nett (inkluderer åpne prosesser)
1,18%
Inkonsistens mellom nett og kraft
- Avvik i ikke-identifiserende elementer
Form for avvik
Hyppighet
Forskjellig næringskode på bedrift
1,64% (13,05% av
bedriftskunder)
Forskjellige «næringskode» privat
(XX, XY etc.)
3,08% (3,55% av
privatkunder)
Tidsplan og milepæler for aktørene
Overordnet tidsplan systemtilpasning, aktørtest og
migrering
2015
Q1
Q2
2016
Q3
Q4
Q1
Q2
Q3
Q4
Q1
2017
Q2
MIGRERING
Kontinuerlig datavask og datavedlikehold
Grunnleggende datavask
Uttrekk
grunndata
Pilot migrering
Inkrementell migrering
SYSTEMTILPASNING / TEST
Systemgodkj.
Elhub
Systemtilpasning
Systemsertifisering
Edielportal
Aktørsert.
Edielportal
Aktørgodkjenning
Elhub
Elhub GO-LIVE
20.02.2017
Overordnet tidsplan systemtilpasning, aktørtest og
migrering
2015
Q1
Q2
2016
Q3
Q4
Q1
Q2
Q3
Q4
Q1
2017
Q2
MIGRERING
Kontinuerlig datavask og datavedlikehold
Grunnleggende datavask
Uttrekk
grunndata
Pilot migrering
Inkrementell migrering
Elhub GO-LIVE
20.02.2017
SYSTEMTILPASNING / TEST
Systemgodkj.
Elhub
Systemtilpasning
Systemsertifisering
Edielportal
Aktørsert.
Edielportal
Aktørgodkjenning
Elhub
Intern vask av grunndata. Identifisér alle målepunkter med gyldig GSRN, fjern
duplikater. Sjekk navn, organisasjonsnr, adresser, næringskode,
avgiftsinformasjon, kontaktinformasjon osv. Start innhenting av fødselsnr.
Overordnet tidsplan systemtilpasning, aktørtest og
migrering
2015
Q1
Q2
2016
Q3
Q4
Q1
Q2
Q3
Q4
Q1
2017
Q2
MIGRERING
Kontinuerlig datavask og datavedlikehold
Grunnleggende datavask
Uttrekk
grunndata
Pilot migrering
Inkrementell migrering
Elhub GO-LIVE
20.02.2017
SYSTEMTILPASNING / TEST
Systemgodkj.
Elhub
Systemtilpasning
Systemsertifisering
Edielportal
Aktørsert.
Edielportal
Aktørgodkjenning
Elhub
Uttrekk av grunndata på migreringsfilformat og innsending til DAM. Gir Statnett
grunnlag for å kartlegge omfang av inkonsistens mellom nett og kraft og gir
aktørene mulig til å starte å korrigere slik inkonsistens
Overordnet tidsplan systemtilpasning, aktørtest og
migrering
2015
Q1
Q2
2016
Q3
Q4
Q1
Q2
Q3
Q4
Q1
2017
Q2
MIGRERING
Kontinuerlig datavask og datavedlikehold
Grunnleggende datavask
Uttrekk
grunndata
Pilot migrering
Inkrementell migrering
SYSTEMTILPASNING / TEST
Systemgodkj.
Elhub
Systemtilpasning
Systemsertifisering
Edielportal
Aktørsert.
Edielportal
Aktørgodkjenning
Elhub
Kontinuerlig fortsettelse av datavask. Fortsett innhenting av fødselsnr.
Korrigering av inkonsistens mellom nett og kraft
Elhub GO-LIVE
20.02.2017
Overordnet tidsplan systemtilpasning, aktørtest og
migrering
2015
Q1
Q2
2016
Q3
Q4
Q1
Q2
Q3
Q4
Q1
2017
Q2
MIGRERING
Kontinuerlig datavask og datavedlikehold
Grunnleggende datavask
Uttrekk
grunndata
Pilot migrering
Inkrementell migrering
SYSTEMTILPASNING / TEST
Systemgodkj.
Elhub
Systemtilpasning
Systemsertifisering
Edielportal
Aktørsert.
Edielportal
Aktørgodkjenning
Elhub
Utvalge pilotaktører går foran og tester ut filformater, infrastruktur,
migreringsprosess osv i praksis. Viktig for å tidlig identifisere viktige
datakvalitetsutfordringer
Elhub GO-LIVE
20.02.2017
Overordnet tidsplan systemtilpasning, aktørtest og
migrering
2015
Q1
Q2
2016
Q3
Q4
Q1
Q2
Q3
Q4
Q1
2017
Q2
MIGRERING
Kontinuerlig datavask og datavedlikehold
Grunnleggende datavask
Uttrekk
grunndata
Pilot migrering
Inkrementell migrering
SYSTEMTILPASNING / TEST
Systemgodkj.
Elhub
Systemtilpasning
Systemsertifisering
Edielportal
Aktørsert.
Edielportal
Aktørgodkjenning
Elhub
Opplasting av data til DAM i periodiske iterasjoner
Elhub GO-LIVE
20.02.2017
Overordnet tidsplan systemtilpasning, aktørtest og
migrering
2015
Q1
Q2
2016
Q3
Q4
Q1
Q2
Q3
Q4
Q1
2017
Q2
MIGRERING
Kontinuerlig datavask og datavedlikehold
Grunnleggende datavask
Uttrekk
grunndata
Pilot migrering
Inkrementell migrering
Elhub GO-LIVE
20.02.2017
SYSTEMTILPASNING / TEST
Systemgodkj.
Elhub
Systemtilpasning
Systemsertifisering
Edielportal
Aktørsert.
Edielportal
Aktørgodkjenning
Elhub
Markedsaktørens systemleverandør sin tilpasning av systemet i henhold til
gjeldende markedsprosesser og meldingsformater for Elhub. Kan skje i flere
releaser (f.eks. NBS/fødselsnr/database/meldinger/GUI)
Overordnet tidsplan systemtilpasning, aktørtest og
migrering
2015
Q1
Q2
2016
Q3
Q4
Q1
Q2
Q3
Q4
Q1
2017
Q2
MIGRERING
Kontinuerlig datavask og datavedlikehold
Grunnleggende datavask
Uttrekk
grunndata
Pilot migrering
Inkrementell migrering
Elhub GO-LIVE
20.02.2017
SYSTEMTILPASNING / TEST
Systemgodkj.
Elhub
Systemtilpasning
Systemsertifisering
Edielportal
Aktørsert.
Edielportal
Aktørgodkjenning
Elhub
Markedsaktørens KIS-system må oppnå Systemsertifisering i Edielportalen for
de roller markedsaktøren vil ha i Elhub, før en markedsaktør kan gjennomføre
aktørsertifisering
Overordnet tidsplan systemtilpasning, aktørtest og
migrering
2015
Q1
Q2
2016
Q3
Q4
Q1
Q2
Q3
Q4
Q1
2017
Q2
MIGRERING
Kontinuerlig datavask og datavedlikehold
Grunnleggende datavask
Uttrekk
grunndata
Pilot migrering
Inkrementell migrering
Elhub GO-LIVE
20.02.2017
SYSTEMTILPASNING / TEST
Systemgodkj.
Elhub
Systemtilpasning
Systemsertifisering
Edielportal
Aktørsert.
Edielportal
Aktørgodkjenning
Elhub
Full funksjonell ende-til-ende test av en markedsaktørs IT-system mot Elhub.
Pågår i parallell med systemtesting av Elhub
Overordnet tidsplan systemtilpasning, aktørtest og
migrering
2015
Q1
Q2
2016
Q3
Q4
Q1
Q2
Q3
Q4
Q1
2017
Q2
MIGRERING
Kontinuerlig datavask og datavedlikehold
Grunnleggende datavask
Uttrekk
grunndata
Pilot migrering
Inkrementell migrering
SYSTEMTILPASNING / TEST
Systemgodkj.
Elhub
Systemtilpasning
Systemsertifisering
Edielportal
Aktørsert.
Edielportal
Aktørgodkjenning
Elhub
Sertifisering i Ediel-portalen av den enkelte markedsaktør for de roller
markedsaktør vil inneha
Elhub GO-LIVE
20.02.2017
Overordnet tidsplan systemtilpasning, aktørtest og
migrering
2015
Q1
Q2
2016
Q3
Q4
Q1
Q2
Q3
Q4
Q1
2017
Q2
MIGRERING
Kontinuerlig datavask og datavedlikehold
Grunnleggende datavask
Uttrekk
grunndata
Pilot migrering
Inkrementell migrering
Elhub GO-LIVE
20.02.2017
SYSTEMTILPASNING / TEST
Systemgodkj.
Elhub
Systemtilpasning
Systemsertifisering
Edielportal
Aktørsert.
Edielportal
Aktørgodkjenning
Elhub
Ende-til-ende test av at aktøren kan utveksle meldinger med Elhub på korrekt
format i henhold til aktuell rolle. Pågår delvis i parallell med akseptansetesting
av Elhub.
Milepæler for kraftleverandører og nettselskaper
• For å sikre at alle aktører har jevn progresjon i arbeidet og er
klare for idriftsettelse av Elhub på planlagt dato har Elhubprosjektet utarbeidet en milepælsplan for aktørsertifisering og
datamigrering.
• Aktørene skal rapportere status på hver milepæl til Elhubprosjektet.
• NVE kan fatte vedtak om tvangsmulkt for selskaper som ikke
kan dokumentere fremdrift i henhold til milepælsplanen.
Overordnet tidsplan systemtilpasning, aktørtest og
migrering
2015
Q1
Q2
M1
01.06.15
2016
Q3
Q4
M2
01.11.15
Q1
M3
01.03.16
Q2
Q3
M4
01.07.16
Q4
M5
01.10.16
Q1
M6
15.01.17
2017
Q2
MIGRERING
Kontinuerlig datavask og datavedlikehold
Grunnleggende datavask
Uttrekk
grunndata
Pilot migrering
Inkrementell migrering
Elhub GO-LIVE
20.02.2017
SYSTEMTILPASNING / TEST
Systemgodkj.
Elhub
Systemtilpasning
Systemsertifisering
Edielportal
Aktørsert.
Edielportal
Aktørgodkjenning
Elhub
NBS Go-Live
18.04.2016
FØRINGER
Edielportal (inkl B2B) klar
01.10.2015
DAMv1 levert
DAM v2 levert
01.08.2015
15.12.2015
Elhub klar for
Vendor Trial
01.04.2016
Elhub klar for
Market Trial
01.09.2016
Elhub accepted
01.02.2017
Utkast aktørmilepæler - test og migrering
2015
Q1
Formål
Q2
M1
01.06.15
2016
Q3
Q4
M2
01.11.15
Q1
M3
01.03.16
Q2
Q3
M4
01.07.16
Kriterier Migrering
• Sikre at aktøren har
• Egne data er kartlagt
korrekt identifisert alle
• Datakvalitetdata som skal migreres
undersøkelse er besvart
• Gi en tidlig indikasjon på • Aktør har utarbeidet
datakvalitet på data som
plan for datavask og
skal migreres
migrering
• Få total oversikt over
strukturdata i markedet
• Sikre at aktør har lagt
nødvendige planer for
migrering og test
Q4
M5
01.10.16
Q1
M6
15.01.17
2017
Q2
Kriterier Test
• Aktør har spesifisert
krav til endringer i ITsystemer
• Aktør har utarbeidet
plan for
systemtilpasning og test
Utkast aktørmilepæler - test og migrering
2015
Q1
Q2
M1
01.06.15
2016
Q3
Formål
Q4
M2
01.11.15
Q1
M3
01.03.16
Q2
M4
01.07.16
Kriterier Migrering
• Sikre at aktør har bedret • Grunnleggende
sin datakvalitet
datavask gjennomført
• Sikre at aktør er i stand
• Alle målepunkter
til å gjøre uttrekk fra
unike med
egne systemer på
GSRN/EAN (Ingen
spesifisert filformat og
duplikater)
oversende disse til DAM
• Org. nummer for
• Etablere infrastruktur
alle bedriftskunder
for migrering
• Grunndata og
• Få indikasjon på omfang
strukturdata sendt til
av inkonsistens på
Elhub på definert
porteføljenivå
filformat*
* Gradvise frister pr aktør
Q3
Q4
M5
01.10.16
Q1
M6
15.01.17
Kriterier Test
• Støtte for innhenting
av fødselsnr er
implementert
2017
Q2
Utkast aktørmilepæler - test og migrering
2015
Q1
Formål
Q2
M1
01.06.15
2016
Q3
Q4
M2
01.11.15
Q1
M3
01.03.16
Kriterier Migrering
Q2
Q3
M4
01.07.16
Q4
M5
01.10.16
Q1
M6
15.01.17
2017
Q2
Kriterier Test
• Sikre at datakvalitet på
• Hele porteføljen av
• Aktørs system skal
migrerte
grunndata og
være sertifisert i
grunndata/strukturdata
strukturdata for
Edielportalen og klar
er på akseptabelt nivå
aktøren er bekreftet
for systemgodkjenning
• Sikre at systemtilpasning
korrekt mottatt i elhub
i Elhub
pågår i henhold til plan
DAM
• Datakvalitet >= 95,0%
(inkl fødselsnr/orgnr og
nettavregningsomåder,
eks måleverdier)
• Data frem til 1.2. er
med i grunnlag for
rapportering av feilrate
Utkast aktørmilepæler - test og migrering
2015
Q1
Q2
M1
01.06.15
2016
Q3
Q4
M2
01.11.15
Q1
M3
01.03.16
Q2
Q3
M4
01.07.16
Q4
M5
01.10.16
Q1
M6
15.01.17
2017
Q2
Formål
Kriterier Migrering
Kriterier Test
• Sikre at datakvalitet på
migrerte data er høy
• Sikre at aktøren har
tilpasset sitt
forretningssystem til
elhub
• Hele porteføljen av
• Aktørs system skal
grunndata,
være godkjent i Elhub
strukturdata og
måleverdier for
aktøren er bekreftet
korrekt mottatt i DAM
• Datakvalitet >= 99,0%,
inkl måleverdier
• Data frem til 1.6. er
med i grunnlag for
rapportering av feilrate
Utkast aktørmilepæler - test og migrering
2015
Q1
Q2
M1
01.06.15
2016
Q3
Q4
M2
01.11.15
Q1
M3
01.03.16
Q2
Q3
M4
01.07.16
Q4
M5
01.10.16
Q1
M6
15.01.17
2017
Q2
Formål
Kriterier Migrering
Kriterier Test
• Sikre at datakvalitet på
migrerte data er høy
• Sikre at aktøren har
tilpasset sitt
forretningssystem til
elhub
• Hele porteføljen av
• Aktør er sertifisert i
grunndata,
Ediel-portalen og er
strukturdata og
klar for godkjenning i
måleverdier for
Elhub
aktøren er bekreftet
• Kraftleverandør har
korrekt mottatt i DAM
implementert prosess
• Datakvalitet >= 99,9%,
for kvalitetssikring og
inkl måleverdier
vedlikehold av
• Data frem til 1.9. er
fødselsnr
med i grunnlag for
• Aktør har inngått
rapportering av feilrate
brukeravtale med
Elhub
Utkast aktørmilepæler - test og migrering
2015
Q1
Q2
M1
01.06.15
2016
Q3
Q4
M2
01.11.15
Q1
M3
01.03.16
Q2
Q3
M4
01.07.16
Q4
M5
01.10.16
Q1
M6
15.01.17
Formål
Kriterier Migrering
Kriterier Test
• Sikre at datakvalitet på
migrerte data er i
henhold til kriterier for
GO-LIVE
• Sikre at aktørs
forretningssystem er
verifisert og klar for GOLIVE
• Hele porteføljen av
• Aktør er godkjent i
grunndata,
Elhub (Market Trial
strukturdata og
gjennomført)
måleverdier for
aktøren er bekreftet
korrekt mottatt i DAM
• Datakvalitet >=
99,98%, inkl
måleverdier
• Data frem til 1.1. er
med i grunnlag for
rapportering av feilrate
2017
Q2
Aktiviteter frem mot første milepæl 1/6
• M1 - Aktør har kartlagt egne data og utarbeidet plan for innføring av Elhub
Sjekkpunkt
Dato
Aktør har definert omfang på egne aktiviteter
Aktør har definert Elhub innføringsprosjekt med ansvarlige for hhv
datakvalitet/datamigrering og systemtilpasning/test
Krav til endringer i IT-systemer er identifisert
Krav til endringer i arbeidsprosesser og organisasjon er identifisert
Aktør har valgt leverandør(er) av system(er) som skal ha grensesnitt mot
Elhub
Aktør har lagt en overordnet plan for systemtilpasning og test
Aktør har lagt en overordnet plan for datavask og datamigrering
Aktør har besvart Elhubs datakvalitetsundersøkelse
M1 Aktør har kartlagt egne data og utarbeidet plan for innføring 01.06.2015
av Elhub
Ansvarlig
Markedsaktør
Markedsaktør
Markedsaktør
Markedsaktør
Markedsaktør
Markedsaktør
Markedsaktør
Markedsaktør
Foreløpig go-live prosess
Frys markedsprosesser
Siste frist for
migrering av
data til DAM
Go Live: Gradvis
åpne opp
markedsprosesser
mot Elhub
Market Parties
incremental migration
to DAM
Verify migrated
data
Migrate from
DAM to Elhub
Market Parties migrate
latest updates to DAM
Verify migrated
data
Migrate from DAM
to Elhub
Market Parties
Cut Over to Elhub
MARKEDSFRYS
Oppsummering – viktigste fokusområder for
bransjen
• 2015
– Etabler eget prosjekt for tilpasning til Elhub og migrering av data
– Definer kontaktpersoner for test og migrering
– Utarbeid plan for systemtilpasning og test
– Utarbeid plan datavask og datamigrering
– Inngå avtale(r) med systemleverandør(er) om datamigrering og tilpasning til Elhub
– Gjennomfør datavask på egne data, start innhenting av fødselsnr
– Gjennomfør innledende datamigrering
• 2016
– Utfør inkrementell datamigrering
– Gjennomfør systemoppgradering
– Sertifiser dere i Ediel-portalen
– Test mot Elhub og oppnå godkjenning i Elhub
– Implementer nye markedsprosesser, inkl intern opplæring
• Q1 2017
– Fullfør datamigrering
– Go-Live
[email protected] for generelle henvendelser
[email protected] for spørsmål knyttet til systemutvikling og test
[email protected] for spørsmål knyttet til datavask og migrering
Spørsmål og svar…
[email protected]