1. No category

Forutsetninger revidert plan
• Elhub på plan for produksjonssetting 1. februar 2017
• NBS innføring gjøres før Elhub innføring
• NBS Go-Live i Norge senest 15. oktober 2016
• NBS markedstest Q2 2016
Overordnet tidsplan test og migrering
2015
Q1
Q2
2016
Q3
M1
01.07.15
Q4
M2
01.11.15
Q1
M3
01.03.16
DATAVASK OG
MIGRERING
Q2
Q3
M4
01.07.16
Q4
M5
01.11.16
Q1
M6
15.01.17
2017
Q2
Kontinuerlig datavask og datavedlikehold
Grunnleggende datavask
Uttrekk
grunndata
Pilot migrering
Inkrementell migrering
SYSTEMTILPASNING /
TEST
Elhub GO-LIVE
20.02.2017
Systemgodkj.
Elhub
Systemtilpasning
Systemsertifisering
Edielportal
Aktørsert.
Edielportal
Aktørgodkjenning
Elhub
NBS Go-Live
09.2016
EKSTERNE MILEPÆLER
Edielportal (inkl B2B) klar
01.10.2015
DAMv1.1 levert
DAM v2 levert
01.09.2015
15.12.2015
Elhub klar for
Vendor Trial
01.05.2016
Elhub klar for
Market Trial
01.09.2016
Elhub accepted
01.02.2017
Aktørmilepæler - test og migrering
2015
Q1
Q2
2016
Q3
M1
01.07.15
Q4
M2
01.11.15
Q1
M3
01.03.16
Q2
M4
01.07.16
Q3
Q4
M5
01.11.16
Q1
M6
15.01.17
2017
Q2
Formål
Akseptansekriterier
Anbefalt status
• Sikre at aktøren har
korrekt identifisert alle
data som skal migreres
• Gi en tidlig indikasjon på
datakvalitet på data som
skal migreres
• Få totaloversikt over
strukturdata i markedet
• Sikre at aktør har lagt
nødvendige planer for
migrering og test
• Statnetts datakvalitetsundersøkelse er besvart
• Aktør har utarbeidet
overordnet plan for
datavask og migrering
• Aktør har spesifisert krav
til endringer i sine ITsystemer
• Aktør har utarbeidet
overordnet plan for
systemtilpasning og test
Aktørmilepæler - test og migrering
2015
Q1
Q2
M1
01.07.15
Formål
2016
Q3
Q4
M2
01.11.15
Q1
M3
01.03.16
Q2
M4
01.07.16
Akseptansekriterier
• Sikre at aktør har bedret • Aktør har oversendt
sin datakvalitet
målepunkt-, kontrakt- og
• Sikre at aktør er i stand
kundefiler for hele
til å gjøre uttrekk fra
porteføljen til Elhub DAM
egne systemer på
spesifisert filformat og
oversende disse til DAM
• Etablere infrastruktur
for migrering
• Få indikasjon på omfang
av inkonsistens på
porteføljenivå
Q3
Q4
M5
01.11.16
Q1
M6
15.01.17
2017
Q2
Anbefalt status
• Grunnleggende datavask
er gjennomført
• Alle målepunkter er
unike med
GSRN/EAN (Ingen
duplikater)
• Org. nummer er
innhentet for alle
bedriftskunder
• Støtte for innhenting av
fødselsnr er
implementert i aktørs ITsystem
Aktørmilepæler - test og migrering
2015
Q1
Q2
M1
01.07.15
Formål
2016
Q3
Q4
M2
01.11.15
Q1
M3
01.03.16
Q2
Q3
M4
01.07.16
Akseptansekriterier
• Sikre at datakvalitet på
• Aktør har oversendt
migrerte
målepunkt-, kontrakt- og
grunndata/strukturdata er
kundefiler for hele
på akseptabelt nivå
porteføljen til Elhub DAM,
• Sikre at systemtilpasning
med gjeldende data frem til
pågår i henhold til plan
01.02.2016 eller senere
• Datakvalitetskrav for M3
oppfylt
• Aktørs system skal være
sertifisert i Edielportalen
Q4
M5
01.11.16
Q1
M6
15.01.17
2017
Q2
Anbefalt status
• Fødselsnr innhentet
Aktørmilepæler - test og migrering
2015
Q1
Q2
2016
Q3
M1
01.07.15
Q4
M2
01.11.15
Q1
M3
01.03.16
Q2
M4
01.07.16
Formål
Akseptansekriterier
• Sikre at datakvalitet på
migrerte data er høy
• Sikre at aktøren har
tilpasset sitt
forretningssystem til
elhub
• Aktør har oversendt
målepunkt-, kontrakt-,
kunde- og måleverdifiler
for hele porteføljen til
Elhub DAM, med
gjeldende data frem til
01.06.2016 eller senere.
Historikk på måleverdier
fra 01.05.2016
• Datakvalitetskrav for M4
oppfylt
• Aktørs system skal være
godkjent i Elhub
Q3
Q4
M5
01.11.16
Q1
M6
15.01.17
Anbefalt status
2017
Q2
Aktørmilepæler - test og migrering
2015
Q1
Q2
2016
Q3
M1
01.07.15
Q4
M2
01.11.15
Q1
M3
01.03.16
Q2
M4
01.07.16
Q3
Q4
M5
01.11.16
Q1
M6
15.01.17
2017
Q2
Formål
Akseptansekriterier
Anbefalt status
• Sikre at datakvalitet på
migrerte data er høy
• Sikre at aktøren har
tilpasset sitt
forretningssystem til
elhub
• Aktør har oversendt
målepunkt-, kontrakt-,
kunde- og måleverdifiler
for hele porteføljen til
Elhub DAM, med
gjeldende data frem til
01.09.2016 eller senere
• Datakvalitetskrav for M5
oppfylt
• Aktør er sertifisert i
Edielportalen
• Aktør har inngått
brukeravtale med Elhub
• Kraftleverandør har
implementert prosess
for kvalitetssikring og
vedlikehold av
fødselsnr
Aktørmilepæler - test og migrering
2015
Q1
Q2
M1
01.07.15
Formål
2016
Q3
Q4
M2
01.11.15
Q1
M3
01.03.16
Q2
M4
01.07.16
Q3
Q4
M5
01.11.16
Akseptansekriterier
• Sikre at datakvalitet på
• Aktør har oversendt
migrerte data er i henhold
målepunkt-, kontrakt-, kundetil kriterier for GO-LIVE
og måleverdifiler for hele
• Sikre at aktørs
porteføljen til Elhub DAM, med
forretningssystem er
gjeldende data frem til
verifisert og klar for GO01.01.2017 eller senere
LIVE
• Datakvalitetskrav for M6
oppfylt
• Aktør er godkjent i Elhub
(Market Trial gjennomført)
Q1
M6
15.01.17
2017
Q2
Anbefalt status
Datakvalitetskrav for data migrert til DAM
M3
01.03.16
M4
01.07.16
M5
01.11.16
M6
15.01.17
Nettselskaper
kritikalitetsnivå 1
95%
99%
99,9%
99,98%
Nettselskaper
kritikalitetsnivå 2
Ingen
95%
98%
99,0%
Kraftleverandører 95%
kritikalitetsnivå 1
99%
99,9%
99,98%
Kraftleverandører Ingen
kritikalitetsnivå 2
95%
98%
99,0%
Oppsummering av datakvalitetsundersøkelsen
Statnett – Ekspertgruppemøte 10
10.09.2015
Antall respondenter
• Nettselskaper: 154
• Kraftleverandører: 170
• Fortsatt enkelte som ikke har svart
– 9 nettselskaper (+1 uavklart)
– 2 kraftleverandører (+11 uavklarte)
11.09.2015
11
Antall målepunkter
• Mye av differansen gjøres antageligvis opp i tekniske punkter og
punkter på leveringsplikt
• Fortsatt et stort avvik, 71 908 målepunkt på leveringsplikt, differansen
uten disse er fortsatt 101 296 målepunkter (3,42%)
3 000 000
2 964 917
Nett
Kraft
2 791 713
2 500 000
2 000 000
1 500 000
1 000 000
500 000
-
11.09.2015
12
Antall kunder
• Denne differansen er mest sannsynlig utgjort av målepunkter på
leveringsplikt
• Oppgitt 65 685 kunder på leveranseplikt
2 750 000
2 500 000
2 250 000
2 000 000
1 750 000
1 500 000
2 320 274
2 224 315
199 448
233 750
Nett
Kraft
1 250 000
1 000 000
750 000
500 000
250 000
0
Bedriftskunder
11.09.2015
Privatkunder
13
Hva er andelen vertikalintegrerte målepunkter i markedet
Ikke vertikalintegrerte
Vertikalintegrerte
44 %
56 %
11.09.2015
14
Fordeling times- og profilavregnede
Timesavregnede
11.09.2015
Profilavregnede
15
Kunder uten fødselsdato eller organisasjonsnummer
• Nett
• 0,60% av privatkundene (0,54%)
• 4,09% av bedriftskundene (0,37%)
• Kraft
• 0,59% av privatkundene (0,47%)
• 4,09% av bedriftskundene (0,29%)
16 000
14 000
13 846
13 117
12 000
9 561
10 000
8 155
8 000
6 000
4 000
2 000
Privatkunder uten fødselsdato
Nett
11.09.2015
Bedriftskunder uten orgnummer
Kraft
16
Lagt planer for datavask
100 %
90 %
80 %
70 %
60 %
50 %
40 %
30 %
20 %
10 %
0%
Nett
Kraft
Ja
11.09.2015
Nei
17
Har selskapene spesifisert nødvendige endringer i egne IT-systemer for
å benytte Elhub?
100 %
90 %
80 %
70 %
60 %
50 %
40 %
30 %
20 %
10 %
0%
Nett
Kraft
Ja
11.09.2015
Nei
18
Har aktørene utarbeidet en overordnet plan for hvordan man skal
gjennomføre endringer i IT-systemer, arbeidsprosesser og egen
organisasjon?
100 %
90 %
80 %
70 %
60 %
50 %
40 %
30 %
20 %
10 %
0%
Nett
Kraft
Ja
11.09.2015
Nei
19
Har aktørene valgt leverandør av system som skal benyttes mot Elhub
Er leverandør av system med grensesnitt mot Elhub valgt
100 %
90 %
80 %
70 %
60 %
50 %
40 %
30 %
20 %
10 %
0%
Nett
Kraft
Ja
11.09.2015
Nei
20
Har aktørene inngått avtale med leverandør av system som skal
benyttes mot Elhub
100 %
90 %
80 %
70 %
60 %
50 %
40 %
30 %
20 %
10 %
0%
Nett
Ja, for alle systemer
11.09.2015
Kraft
Ja, for noen systemer
Nei
21
Hvordan er utvikling av programvare for uttrekk til migrering tenkt
gjennomført
100 %
90 %
80 %
70 %
60 %
50 %
40 %
30 %
20 %
10 %
0%
Nett
Egenutvikling
11.09.2015
Kraft
Systemleverandøren utvikler uttrekkene
Ikke besluttet
22
Hvordan er selve uttrekksjobben tenkt gjennomført
Hvordan er selve uttrekksjobben tenkt utført
100 %
90 %
80 %
70 %
60 %
50 %
40 %
30 %
20 %
10 %
0%
Nett
Vi gjennomfører selv uttrekkene
11.09.2015
Kraft
Ikke besluttet
Systemleverandøren gjennomfører nødvendige uttrekk
23
Frekvens på innsending av måleverdier til Elhub
1 gang i døgnet
2-4 ganger i døgnet
5-12 ganger i døgnet
13-24 ganger i døgnet
Annet
* Annet er stort sett oppgitt som «i henhold til forskrift»
11.09.2015
24
Porteføljer
• Ved innsending av porteføljeoversikt fra samtlige aktører kan vi si noe om
omtrentligmengde med porteføljer i markedet
– Noe unøyaktighet kan forventes siden dette endrer seg over tid
– Porteføljeoversiktene er ikke innsendt av alle og sendt inn over en periode på over 3 måneder
• Oversikten viser 6448 porteføljer i uttrekkene
11.09.2015
25
Avvik mellom Elhub og Balanseweb
• 5 nett ikke med i Elhubs lister
– 2 industrinett
– 3 produksjonsnett
• Flere nett ikke med i Balanseweb som Elhub har identifisert
– Noen selskapsfusjoner
– Forskjellige GLN i Elhub sine lister vs Balanseweb
• Vil også sammenstilles med konsesjonshavere fra NVE
11.09.2015
26
Utfordringer
• Identifisere hvilke aktører som opererer i markedet
– Uttrekk fra Ediel, Balanseweb, NVE må sammenstilles med
porteføljeoversikter for å få et komplett bilde av markedet
– Nye kraftleverandører dukker opp
– Konkurser
– Fusjoner av nettselskaper
• Identifisere rolle til aktører som opererer i markedet
– Kraftleverandør / produsent
• Flere kraftleverandører er rene produsenter uten sluttbrukere
– Produsent / nett
• Enkelte nett er kun industri- eller produksjonsnett
• Finne/få tak i kontaktpersoner på identifiserte aktører i
markedet
– Holde kontaktinformasjon oppdatert
11.09.2015
27
Retningslinjer for identifisering av
sluttbrukere
Ekspertgruppemøte Elhub 10. september 2015
Nydalen
Grunnleggende datavask
• Dette er fasen frem til markedsaktørene mottar informasjon om inkonsistens fra
Elhub sitt migreringsverktøy DAM (Data Analysis and Migration tool)
• Øke kvalitet på egne data, herunder sikre identiteten på sine sluttbrukere
• Innhente fødselsnummer, og organisasjonsnummer der det mangler
• Hjelpemidler tilgjengelig:
– Dagens Ediel, NUBIX, DSF, Brønnøysund, kommunikasjon mellom markedsaktører og mot kunde,
andre kilder (Matrikkelen, Postens adresseregister, telefonkatalogen), eksterne leverandører av
datavask
Utbedring av inkonsistens mellom nett og kraft
• DAM v2.0 sender korreksjonsfiler til markedsaktørene med
informasjon om inkonsistens
• Filene inneholder informasjon om motpartens kundedata
(krever avtale mellom aktørene og Elhub om konfidensialitet)
• DAM v2.0 blir tilgjengeliggjort i januar 2015
• Kraft har hovedansvaret for utbedring av inkonsistens
• Kundebytte hos en av partene krever samtykke fra sluttbruker
Dokument publisert
• Elhub.no
• Ediel.no
Nytt fra NVE relatert til folkeregisteret
• Hjemmel for innsamling av fødselsnummer er vedtatt i forskrift
• Søknad på vegne av bransjen er sendt til Skattedirektoratet fra NVE
• EVRY jobber med å tilrettelegge for å opprette tilganger for bransjeaktørene
Prosess for grunnleggende datavask hos kraft
Prosess for grunnleggende datavask hos nett
Prosess for utbedring av inkonsistens
Prosess ved manglende kontrakt
Aktørtesting
Ekspertgruppemøte
10.September 2015
Agenda
• Innhold i aktørtesting
• Gjennomføring av tester
• Testmiljø og testdata
• Krav til piloter
• Status Edielportalen
Hjemmelekse
• Hvor mange aktører har egne testsystemer?
• Hvilke muligheter har aktørene for å legge inn testdata i
produksjonssystemene?
• Hvordan kan vi utnytte migreringsdata i testingen?
• Hvilke muligheter har aktørene for å teste Elhub-funksjonalitet
parallelt med eksisterende produksjon?
• Vi ønsker å gjennomføre testene mest mulig effektivt både for
aktørene og Elhub uten å gjøre for mye dobbeltesting.
Vi ønsker derfor innspill på hvilke typer tester som kan/bør
gjennomføres i Edielportalen og hvilke typer som bør
gjennomføres i Elhub?
Aktørtesting – Hensikt og målsetning
• Hensikt
– Bidra til at nye markedsprosesser for kraftmarkedet fungerer fra
oppstartdato for Elhub
• Mål
1.
2.
3.
Sikre at alle (KIS- og MVS-)systemer i kraftmarkedet støtter de nye
markedsprosessene i Elhub
Sikre at alle markedsaktører kan utveksle meldinger med Elhub
Sikre at alle markedsaktører kan håndtere de nye markedsprosessene
Prinsipper for aktørtesting
• Både system og aktør skal sertifiseres i Edielportalen før test og
godkjenning i Elhub
• Et system/en aktør må sertifiseres for alle roller som
systemet/aktøren skal inneha
• Aktørsertifisering skal utføres på et allerede sertifisert system
– Det kan være ulike systemer pr. rolle
• Sertifisering i Edielportalen gir ikke 100% garanti for at alt vil
fungere i Elhub
Sertifisering gjøres pr. rolle
Oppdatering
grunndata
kunde
Markedsprosesser
(opphør/
oppstart)
Oppdatering
grunndata
målepunkt
Måleverdiinnsamling
Milepælplan for aktørtesting
5/10 2015
Edielportalen er klar
for pilotering
1/3 2016
Alle systemer
er sertifisert
1/7 2016
Alle systemer er
godkjent i Elhub
1/11 2016
Alle aktører
er sertifisert
15/1 2017
Alle aktører er
godkjent i Elhub
Edielportalen
Systemsertifisering
Aktørsertifisering
Elhub Testmiljø
Leverandørtest
Elhub Pre-prodmiljø
Aktørgodkjenning
Testtyper
• Teknisk test
– Kommunikasjon, kryptering, sikkerhet, komprimering (EMIF)
• Test av meldinger
– XML Schema, Schematron
• Test av prosesskomponenter
– BIM
• Test av prosesser
– BRS
• Simulering av Elhub-produksjon
• Test av Go-live og Cut-over prosess
Systemsertifisering i Edielportalen
• Hensikt:
– Teste at systemene støtter tekniske krav til utveksling
– Teste at systemene kan sende/motta alle relevante Elhub-meldinger
(obligatoriske/valgfrie)
– Teste at meldingene sendes i riktig sekvens som del av
prosesskomponenter
• Deltakere:
– Systemleverandører
– Edielportalen
• Gjennomføring:
– Systemleverandører gjennomfører selvbetjente tester og sertifisering
med support fra Elhub test-team
Leverandørtest i Elhub
• Hensikt:
– Teste at systemene støtter tekniske krav inkl. krav til komprimering,
signering og kryptering
– Teste at systemene kan utveksle alle relevante meldinger med Elhub
– Teste at meldingene sendes i riktig sekvens som del av
prosesskomponenter og prosesser (BRS)
• Deltakere:
– Systemleverandører
– Elhub
• Gjennomføring:
– Elhub test-team planlegger og administrerer testen som gjennomføres
av systemleverandører
– Både selvbetjente, individuelle tester og ende-til-ende tester som kan
involvere flere systemer
Aktørsertifisering i Edielportalen
• Hensikt:
– Teste at aktørene kan sende og motta Elhub-meldinger i henhold til
tekniske krav
– Teste at aktørene kan prosessere utvalgte, viktige markedsprosesser/
BRS-er i henhold til sin rolle
• Deltakere:
– Markedsaktører
– Edielportalen
• Forutsetning:
– Systemet/versjonen som brukes av aktøren er sertifisert i Edielportalen
og godkjent i Elhub-test
• Gjennomføring:
– Markedsaktørene gjennomfører selvbetjente tester og sertifisering med
support fra Elhub test-team og egne systemleverandører
Aktørgodkjenning i Elhub
• Hensikt:
– Teste at markedsaktører kan utveksle meldinger med Elhub (både sende
og hente) i henhold til tekniske krav inkl. signering, kryptering og
komprimering
• Deltakere:
– Markedsaktører
– Elhub
• Gjennomføring:
– Elhub test-team planlegger og følger opp tester som gjennomføres av
markedsaktører
– Individuell test av grensesnitt for meldingsutveksling
BRS-NO-101: Oppstart kraftleveranse - leverandørskifte
sd Skift lev erandør
Kraftleverandør
Ny kraftleverandør
Gammel kraftleverandør
Elhub
Nettselskap
Målepunktadministrator
Nettilknytningstilbyder
1-oppstart kraftleveranse(leverandørskifte)
{etter siste frist for kansellering}
Meldingsfrist:
- senest tre virkedager før oppstartsdato for ikke-fjernavlest
- senest kalenderdagen før oppstartsdato for fjernavlest
- tidligst seks virkedager før oppstartsdato for ikke-fjernavlest
- tidligst fire kalenderdager før oppstartsdato for fjernavlest
6-oppdater grunndata(leverandørskifte)
11-Opphør kraftleveranse(leverandørskifte)
14-Oppstart i målepunkt(leverandørskifte)
{senest 3 virkedager etter skiftedato for ikke fjernavlest}
16-måleverdier(Periodevolum, stand)
7-måleverdier(Periodevolum, stand)
{senest kalenderdagen etter for fjernavlest}
7-måleverdier(Periodevolum, stand)
16-Måleverdier(Volumserie)
7-Måleverdier(Volumserie)
A
(from Roller)
Name:
Author:
Version:
Created:
Updated:
(from Roller)
Skift leverandør
perber
1.0
11.12.2013 15:51:51
13.05.2014 14:14:07
(from Roller)
(from Roller)
Prosesskomponent 1- Oppstart kraftleveranse
BRS-NO-312_ Oversendelse av måleverdier for profilavregnede
målepunkt
Testsystem
• Hvor mange aktører har egne testsystemer?
• Hvilke muligheter har aktørene for å teste Elhub-funksjonalitet
parallelt med eksisterende produksjon?
• Antagelse:
• Systemleverandørene har et testsystem der de kan manipulere
testdata
• Kun de største markedsaktører har testsystemer
• De fleste markedsaktørene må teste fra produksjonsmiljøet
Testdata
• Hvilke muligheter har aktørene for å legge inn testdata i
produksjonssystemene?
• Hvordan kan vi utnytte migreringsdata i testingen?
• Forslag til fremgangsmåte for bruk av migreringsdata i testing:
• Statnett definerer et sett med testaktører
• Aktørene registrerer disse testaktørene i egne systemer
• Testaktørene blir overført til Statnett i forbindelse med
prøvemigeringeringer
• Testaktørene kan benyttes i Aktørtester
Pilot-aktiviteter
1/10 2015
1/1 2016
Edielportalen er
klar for pilotering
Elhub klar for
Systemtest
1/3 2016
Alle systemer
er sertifisert
1/7 2016
Alle systemer er
godkjent i Elhub
1/10 2016
15/1 2017
Alle aktører
er sertifisert
Alle aktører
godkjent i Elhub
Edielportalen
Systemsertifisering
Aktørsertifisering
Pilot 1 og 2 - Testing Edielportalen
Elhub Testmiljø
Leverandørtest
Pilot 3 Delta i
Systemtest Elhub
Systemtest Elhub
Elhub Pre-prodmiljø
Aktørgodkjenning
Pilot 4 - Delta i akseptansetest
og pilotering av Elhub
Akseptansetest og
pilotering Elhub
Krav til pilotaktører
• Må ha utført nødvendige systemtilpasninger
• Må ha et miljø som er satt opp for test og kan
kommunisere med Elhub
–Testdata er klargjort
• Må delta i planlegging av tester
• Må gjennomføre tester i henhold til plan
• Må delta i statusmøter og rapportere testresultater til
Elhub
Deltakere Pilot 1
• Pilottest Edielportalen – Q4 2015
– Delta i utprøving av ny versjon av Edielportalen som skal brukes til
systemsertifisering for Elhub.
• Antatt ressursbehov: 3 dagsverk i løpet av 14 dager
• Trenger dekning for utvalgte roller
• Mulige deltakere
– Systemleverandører: Enoro, CGI, Brady, Tieto?
– Allianser: Valider/Powell, Nettalliansen/Embriq, SmartHub
– Markedsaktører med egne systemer
Plan for utvikling Edielportalen
• Systemsertifisering (TGT)
– Første versjon klar 5.oktober 2015 med enkelt teknisk grensesnitt og
utvalgte prosesskomponenter og meldinger
– Nye meldinger lanseres fortløpende med endelig ferdigstilling i løpet av
2015
(Systemsertifisering skal være gjennomført innen 1/3 2016)
• Aktørsertifisering (AGT)
– Edielportalen klar til 1.6 2016
(Aktørsertifisering skal være gjennomført innen 1/10 2016)
Innhold i oktober-versjonen
Mulige oppsett for systemsertifisering - I
Nettselskap
Statnett
MVS
Måleverdier
EDIsystem
KIS
Edielportalen/
Elhub
Kundedata
• System som skal sertifiseres er markert med rødt
Mulige oppsett for systemsertifisering - II
Innsamling
Allianse/
Tjenesteleverandør
Sentralsystem
Integrasjonslag
Nettselskap
Statnett
Måleverdier
Edielportalen/
Elhub
KIS
EDIsystem
Kundedata
• System som skal sertifiseres er markert med rødt
Mulige oppsett for systemsertifisering - III
Kraftleverandør
KIS
E
D
I
Statnett
Edielportalen/
Elhub
• System som skal sertifiseres er markert med rødt
Go-live-prosessen
Ekspertgruppemøte Elhub 10. september 2015
Nydalen
Cut Over for forretningsprosesser
Cut Over for måleverdirapportering og beregninger
Utkast til go-live prosess
• Frysperioden er 8 virkedager
• Frys inntreffer 8.2.2017
• Rapportering til NBS går som normalt gjennom frys
• Go/No go-gate etter migrering til DAM (11.2.2017)
• Go/No go-gate etter kvalitetssikring i Elhub (15.2.2017)
• Åpning for prosesser for oppdatering av grunndata 16.2.2017
• Åpning for prosesser for måleverdirapportering 17.2.2017. Timesmålte blir migrert
• Resten av prosessene åpnes 20.2.2017
Utkast til go-live prosess
Spørsmål
• Er lengden på frysperioden akseptabel for markedet?
• Vil det «worst case» være mulig å rulle tilbake til gammel meldingsutveksling inntil
siste go-live gate?
• Kan vi på noen måte optimalisere go-live-prosessen?
• Hvor lang tid tar de aktivitetene som markedsaktørene skal gjøre?
– Opplasting til DAM (1 dag)
– Prosessering av NCF og ny opplasting til DAM (1 dag)
– Manuell sjekk i Elhub portal (2 dager)
– Avspoling av master data oppdateringer (1 dag)
– Avspoling og migrering av målerverdier (1 dag + 1 helg). Siste uke timesmålte migreres 22.2.2017
og PPCer 23.2.2017 for hele perioden.
Introduksjon til DAM
Steg i DAM-prosesseringen
Akkumulering og aggregering
Last
opp
Formatsjekk
Integritet
sjekk
Dupl.
sjekk
Konsist.
sjekk
Kontroll på
dato:
Sekvens og
avhengighet
Kontroll på
felt-nivå:
Format,
påkrevd,
enumerasjon,
etc.
Kontroll på
rad-nivå:
Kombinerte
verdier,
avhengige
verdier
Kontroll på
MP-nivå:
Kombinerte
verdier,
avhengige
verdier
Etterkontroll
Stegning
Kontroll på
prosess:
Måleverdi,
andre data,
avhengig
struktur, etc.
Restrukturert
data for Elhub:
Iht. intern
datastruktur,
utvalg av
benyttede data
data
migrering
Migrering fra
DAM til Elhub
Recap.: Mottatte filer i DAM (fra markedsaktører)
Målepunkt
Kontrakt
Kunde
Alt.: Fullintegrerte
kundereferanser
Målepunkt
Kontrakt
Kunde
Måleverdier
11.09.2015
70
Formatsjekk
Fil 1
Col.A
A
AA
...
Col.B
B
BB
...
Col.C
C
CC
...
Col.D
D
DD
...
Fil 2
Col.A
A
AA
...
Col.B
B
BB
...
Col.C
C
CC
...
Col.D
D
DD
...
Integritetsjekk
Fil 1
Col.A
A
AA
...
Col.B
B
BB
...
Col.C
C
CC
...
Col.D
D
DD
...
Fil 2
Col.A
A
AA
...
Col.B
B
BB
...
Col.C
C
CC
...
Col.D
D
DD
...
Duplikatsjekk
Fil 1
Col.A
A
AA
...
Col.B
B
BB
...
Col.C
C
CC
...
Col.D
D
DD
...
Fil 2
Col.A
A
AA
...
Col.B
B
BB
...
Col.C
C
CC
...
Col.D
D
DD
...
Konsistenskontroll
Fil 1
Col.A
A
AA
...
Col.B
B
BB
...
Col.C
C
CC
...
Col.D
D
DD
...
Fil 2
Col.A
A
AA
...
Col.B
B
BB
...
Col.C
C
CC
...
Col.D
D
DD
...
Illustrativt om prosessering i parallell
Upload
Format
check
Integrity
check
Duplicate
check
Upload
Format
check
Integrity
check
Upload
Format
check
Integrity
check
Consistency
Consistency
check
Consistency
check
Duplicate Consistency
check
Duplicate
check
check
Duplicate
check
check
Postcheck
Staging
Data
migration
Tilstander…
(Nei, ingen grunn til gjennomgang av dette;-)
2
1
Format check
failed
Processed in Epic 1
Migration candidate status
and later
Format check OK
10
Integrity check
failed
Processed in US 8.2
Entity-stored status
Processed in US 8.3
Metalist-only status
Integrity check OK
11
Duplicate check to
be current
20
Duplicate check to
be current with
gap
22
27
Processed in US 8.4 Process-terminating status
23
32
Duplicate check
current with gap
34
Duplicate check
replaced
Consistency
checked with rule
failure
Duplicate check
current with gap
with consistency
40
31
Duplicate check to
be current with
consistency
Duplicate check to
be replaced with
consistency
21
Duplicate check to
be replaced
Duplicate check
current
26
24
Duplicate check to
be current with
error
30
Duplicate check
current with error
Duplicate check
current with
consistency
25
33
Duplicate check to
be current with
error having
consistency
Og dermed – litt demo, men først et annet lite tema
11.09.2015
77
Tilpasninger i filformatet
Hva har grovt skjedd med formatet?
• Måleverdier
– Endelig tatt i bruk
– Lagt til 4 felter i denne filen
• Øvrige filer
– Ingen nye felter
– Justert krav til påkrevde felter
– Presiseringer og korreksjoner
Måleverdifilen
• Dermed – endelig fastlagt!
• Fire nye felter ift. tidligere utsendte (ikke approberte) versjon:
– MeteringValueVersion – påkrevd, versjonsnummer på formatet
– ProcessingStatus – påkrevd, enumerasjoner: Settled, Reconciled, NA
– BalanceSupplierUsed – avhengig
– BalanceResposibleParty – avhengig
• ProcessingDateTime – endret navn fra RegistrationDateTime
• Presisert bruken av formatet…
11.09.2015
80
Typer av måleverdier som skal og kan mottas
NB! Nytt felt, Status, varierer innen hver av disse.
Type of MP
Non-profiled MP
PPC
Period volume
Meter index
Hourly interval
Specific file parameters
VolCat
TS_Type
Preliminary
E17
Period
E17
Index
E17
Interval
E17
(consumption)
Non-profiled MP
Hourly interval
Interval
E18
030
E02
E18
Hourly interval
Hourly interval
Interval
Interval
E17
E18
030
030
E02
E02
E19
E19
Hourly interval
Hourly interval
JIP
Grid Loss
Net Infeed
Net hourly settled
consumption
Net consumption
Interval
Interval
Interval
Interval
Interval
Interval
E17
E18
E17
E17
E18
E17
030
030
030
030
030
030
E02
E02
E02
E02
E02
E02
E20
E20
LP
GL
NI
NH
Interval
E17
030
E02
NC
Profiled MP
(production)
Non-profiled MP
(combined)
Exchange point
MGA
11.09.2015
Dataset
ProdType
030
030
030
030
Parameters for type of MP
SM_Type
MP_Type
E01
E17
E01
E17
E01
E17
E02
E17
81
Øvrige filer – krav til påkrevde felter
• MeterProfile: Påkrevde enumerasjonsverdier
• Reporting Frequency / Reporting Frequency Start
– Kun påkrevd for målepunkter med kunder og kontrakter
11.09.2015
82
Øvrige filer - annet
• Generelt om historikk
– Skal ALLTID være tilknyttet en dato. Hvis ikke – en feil fra vår side.
– Dato normalt knyttet til informasjonstype (information type)
• Næringskode (NAC_Code)
– Tillates nå også på privatpersoner, der relevant.
• MeterProfile
– Kommer med nærmere definisjon av enumerasjoner
• MeteringPointType
– Tillegg av enumerasjonene
– NI = NetInfeed, NH = NetHourlySettledConsumption
• PostOfficeBox
– Skal IKKE ha prefiks (slik som Pb., Postboks, el.)
11.09.2015
83
Spesielt om Kunde-filen (dvs. navn)
• Navn – antall felter og lengder?
– Spesielt mellomnavn
– Noen spørsmål om dette
– Avvikende mellom BIM, Migreringsfiler, DSF (Folkeregisteret)
– Lengde:
• BIM = 40
• DSF = 50
• Migrering = 80 (fornavn)
• Derfor…
– Fortsatt IKKE mellomnavn
– BIM allerede satt valgfritt mellomnavn (kardinalitet 0..1)
– Setter lengde = 40, alle parter forkorte navn med evt. siste 10 tegn
– For migrering: Også fornavn med lengde = 40 (mot 80 så langt)
11.09.2015
84
M2 Uttrekk - Elhub
Statnett – Ekspertgruppemøte 10
10.09.2015
Formål
• Sikre at alle aktørene har mulighet til å gjøre uttrekk på migreringsfilformat
• Skaffe en bedre oversikt over mengde og kvalitet på data i markedet
• Få opp infrastrukturen som er påkrevd for migrering
11.09.2015
86
Hva skal leveres?
• Spesifikasjon på uttrekk finnes på elhub.no
– http://elhub.no/nb/pages/50-Filformater-og-prosedyrer
– Både med og uten endringer siden v0.9
• Hva skal det leveres på til M2:
– Målepunkter (også kraftleverandører skal levere målepunkt uttrekk)
– Kontrakter
– Kunder
11.09.2015
87
Hva skal leveres - 2
• En fil kan kun inneholde data for en GLN
– Dvs at et selskap som opererer med mer enn 1 GLN må sende inn alle 3 filtyper for alle GLN man er
ansvarlig for
• Elhub vil følge opp at alle GLNer blir sendt inn data på
– Dette inkluderer en enkel sjekk på forventet antall målepunkter / kunder
– Ingen krav til kvalitet på dataene utover format på selve uttrekket
11.09.2015
88
Krav til data
• Snapshot av tilstand nå
– Ikke krav om historikk, men mulig
• Kvalitet vil ikke måles på dette uttrekket
– Utover innsending av data på alle målepunkter, kunder og kontrakter
– Ingen rapportering på kvalitet, dvs manglende orgnummer, fødselsnummer, mismatch mellom kraft
og nett e.l.
• Dataene vil ikke leve til Elhub GO-live
– Slettes når Elhub har kjørt analysene som skal kjøres
11.09.2015
89
Puljeinndeling
• Alle aktørene er delt inn i 5 puljer (første pulje kun piloter)
• Sikre at ikke alle sender inn data 30.oktober
• Forenkle oppfølgingsjobben for Elhub
• Bedre bistå aktørene som skal sende inn data
• Fortløpende publisering av aktører som har oppfylt kriteriene for M2 på elhub.no
11.09.2015
90
Puljeinndeling - 2
• Pulje 0: 25/9: Piloter + Brady pilot
• Pulje 1: 9/10: Ekspertgruppe + CGI Sør-Norge + Bergen Energi +
Brady
• Pulje 2: 16/10: SORIA + SmartStrøm NordVest+ Andre systemer
• Pulje 3: 23/10: MAIK + Enoro Øst- og Sør-Norge + Nettalliansen
• Pulje 4: 30/10: Enoro Nord-, Midt og Vest-Norge + CGI NordNorge + Ukjente systemer
• November: Clean Up og analyser
11.09.2015
91
Komme i gang
• Brukernavn – epost som angitt i datakvalitetsrapporten
• Telefonnummer – mobilnummer angitt i datakvalitetsrapporten eller innsendt i
ettertid
• Tilgang til aktører
– Hentes fra datakvalitetsundersøkelsen
• Passord
– sendes på SMS fra Elhub i løpet av førstkommende fredag og mandag
• Ekstern IP må sendes til «[email protected]»
– (http://minip.no)
– Dette har mange allerede gjort, de som ikke har gjort det før lansering av DAM vil ikke kunne nå
DAM før dette blir gjort
11.09.2015
92
Hvordan laste opp filer
• Informasjon om hvor man kan nå DAM distribueres så snart DAM er klar for alle
• Pålogging gjøres med brukernavn og passord
• Tilgang blir gitt på orgnummer / GLN basis
– Ved manglende tilganger – kontakt [email protected]
– Oppdages ved opplasting av filer
• Krever at ekstern IP-adresse er sendt Elhub
– Om DAM ikke laster, send IP-adresse til [email protected]
11.09.2015
93
Formatsjekk rapport
• Kjører ikke umiddelbart
– Det kan derfor gå flere minutter før det foreligger en nedlastbar rapport
• Rapporten inneholder kun antall feil fordelt på kategori
– Ingen arbeidslister eller sensitiv informasjon
– Dersom antallet feil i en kategori er få vil den indikere hvilke linjer som er feil
• Kun feil på format i denne omgang
– Konsistens og integritetsfeil vil komme i versjon 2 av DAM (januar 2016)
11.09.2015
97
Rapport – Før formatsjekk
• Her ser man på statusen at filen ikke er prosessert
11.09.2015
98
Rapport – Etter formatsjekk
• Filsjekk er passert (filnavn stemmer overens med rollen og tilgangene man har)
• Formatsjekken er passert, alle linjene er dermed OK på format
11.09.2015
99
Rapport – Last ned
• Rapporten inneholder antall feil fordelt på kategorier
• Link til nedlasting av rapport finnes oppe i høyre hjørne
• Beskrivelse av feilkoder er publisert på elhub.no
11.09.2015
100
Nedlastet rapport - Eksempel
11.09.2015
101
Mest vanlige feil som oppstår
• Når man laster opp får man beskjed om at «fil allerede er lastet opp»
– Dette er en indikasjon på at en fil som er 100% godkjent allerede er lastet opp med samme navn
– Øk løpenummeret på filen eller endre dato
• Man får feilmelding om at man ikke har tilgang til GLN
– Det er enten feil i orgnummer eller GLN i filnavn eller innhold
– Sjekk orgnummer og GLN både i filnavn og innhold
• Dersom dette er riktig, ta kontakt med [email protected]
• Dersom det er feil, korriger
• For en uttømmende liste med feilkoder, se http://elhub.no/nb/pages/50-Filformaterog-prosedyrer
11.09.2015
102
Pilotaktiviteter – Høst 2015
Pilotaktiviteter – Høst 2015
• Deltamigrering
– Frist 2.oktober
• Måleverdier
– Frist 2.oktober
• Behandling av Non Conformity Files (NCF)
– 1.november til 1.desember
• Test av DAM v2
– 1.november til 1.desember
11.09.2015
104
Deltamigrering – 02.oktober
• Alt som er endret etter 31.4.2015 skal sendes inn via DAM
• Endringer som skal sendes:
– Kort oppsummert: Målepunkter/kundeinfo/kontrakter med endringer etter 31.4
• Om dette ikke er mulig: Lag et delta på uttrekket som ble lastet opp til DAM som en del av M2, zip filene og last
opp til DAM.
– Delta inkluderer:
•
•
•
•
•
•
•
•
11.09.2015
Nye målepunkt
Ikke lenger aktive målepunkt
Målepunkt hvor det har vært andre endringer (eks: avregningsmetode)
Målepunkt hvor sluttbruker er endret
Nye kunder
Avsluttede kunder
Endring i kundedata (eks: fødselsnummer påført)
Andre kontraktsendringer (eks: avgiftsinformasjon)
105
Måleverdier – 2.oktober
• Uttrekk på filformatet som allerede er definert
– Måleverdier fra 01.09.2015
• Skal inneholde:
– Utvekslingspunkter:
• Timesverdier
– Nettavregningsområde
•
•
•
•
•
JIP
Nettap
Netto utveksling
Forbruk
Produksjon
– Timesavlest
• Timesverdier (siste – ikke historikk)
• Forventet årsforbruk
– Profilavregnet
•
•
•
•
Preliminære profilerte volumer
Periode volum
Målerstand
Forventet årsforbruk
• Sendes inn via DAM – zip filene før opplasting
11.09.2015
106
Behandling av Nonconformity files (NCF)
• Starter når DAM v2 er klar for test
– Tidlig november – frist 1. desember
– Avhengighet på DAM2 for å generere NCF-filer
• Pilotere verktøystøtte for å behandle NCF filer fra Elhub
– Tilrettelegge for en mest mulig effektiv behandling av feil rapportert fra DAM
• Elhub vil ha en dialog med systemleverandørene snart om bl.a. dette
11.09.2015
107
Test av DAM v2
• DAM v2 blir tilgjengeliggjort Elhub-prosjektet for akseptansetest 1. november
• Vært helt avhengig av piloter for kvalitetssikring av DAM v1
– Gir oss tidlig innblikk i hva som mangler for å kunne drifte en slik løsning
– Avdekker feil våre testere ikke har funnet
• Mest funksjonell testing, men håper også å kunne teste med litt større datamengder
• Elhub er derfor minst like avhengig av hjelp fra pilotaktørene for å kvalitetssikre DAM
v2
– Planen er å involvere piloter i begynnelsen av november
11.09.2015
108