Smartgridkonferansen 2015
Innføring av datahub i det norske kraftmarkedet
Tor B. Heiberg
Prosjektdirektør Elhub
Statnett SF
Innhold
Statnetts Mandat
Elhubs rolle
Gevinster
Konsekvenser for aktørene
Bransjens forberedelser
Elhub teknologi
AMS – Avanserte måle- og styringssystem
•
•
•
AMS forskrift vedtatt juni 2011
AMS medfører to-veis kommunikasjon med alle
forbrukere (2,9 mill. målepunkter) innen 2017
Timemåling, lagring og daglig distribusjon
 Innsamling og distribusjon: 24x2,7 mill. måleverdier
hver dag (0 i dag)
•
•
•
•
Prisinformasjon til sluttkunde
Struping og stenging
Mulighet for display og 3.parts grensesnitt
Tilrettelegge for tilleggstjenester
Noen konsekvenser:





Store investeringer for alle nettselskap
Forståelig strømregning
Større grad av forbrukertilpasset strømforbruk
Større muligheter for "smarte løsninger"
Økt nettnytte
Historikk
Juni 2011
Des. 2011
Jan. 2012
Mai 2012
Mai 2013
4
Rolle og oppgaver gitt av NVE
1
Statnett sin konsesjon som
Avregningsansvarlig (f.o.m. 30.01.2012)
"Avregningsansvarlig skal utrede og ha
et overordnet ansvar for å utvikle felles
IKT-løsninger for kraftmarkedet,
4-12 måleravlesninger pr.
målepunkt, pr. år
2
Utviklingen av datahub for kraftmarkedet
(brev fra NVE 28.05.2013)
• NVE ber om at Statnett nå setter i
gang arbeidet med utvikling av en
datahub for kraftmarkedet
8760 måleravlesninger
pr. målepunkt, pr. år
rapportert daglig
Rolle og oppgaver gitt av NVE
1
Statnett sin konsesjon som
Avregningsansvarlig (f.o.m. 30.01.2012)
"Avregningsansvarlig skal utrede og ha
et overordnet ansvar for å utvikle felles
IKT-løsninger for kraftmarkedet,
4-12 måleravlesninger pr.
målepunkt, pr. år
2
Utviklingen av datahub for kraftmarkedet
(brev fra NVE 28.05.2013)
• NVE ber om at Statnett nå setter i
gang arbeidet med utvikling av en
datahub for kraftmarkedet
8760 måleravlesninger
pr. målepunkt, pr. år
rapportert daglig
Rolle og oppgaver gitt av NVE
1
Statnett sin konsesjon som
Avregningsansvarlig (f.o.m. 30.01.2012)
"Avregningsansvarlig skal utrede og ha
et overordnet ansvar for å utvikle felles
IKT-løsninger for kraftmarkedet,
4-12 måleravlesninger pr.
målepunkt, pr. år
2
Utviklingen av datahub for kraftmarkedet
(brev fra NVE 28.05.2013)
• NVE ber om at Statnett nå setter i
gang arbeidet med utvikling av en
datahub for kraftmarkedet
8760 måleravlesninger
pr. målepunkt, pr. år
rapportert daglig
Elhub versjon 1.0 innhold
Kraftleverandør
Nettselskaper
EDI/XML
• Kundeinformasjon
• Markeds
prosesser
• Måleverdiforespørsel
• Avregnings
-underlag
database Kundeavtale
Sluttbruker
Administrering
• Markedsprosesser
• Målepunkt-DB
• Måleverdi-DB
Oppgaver
• Beregning av tap og
JIP
• Rapportering til
NBS & NECS
• Avviksunderlag
• Markedsaktører
• Strukturdata
• Sluttbrukers
kontraktrelasjoner
EDI/XML
• Målepunktinformasjon
• Måleverdier
• Markedsprosesser
• Nett-tariff
informasjon
(opsjon)
Måleverdier
Målepunkt
database
Gevinster Elhub
A God kvalitet og
effektiv
distribusjon av
måleverdier (AMS)
D
Internasjonal
integrasjon
B
E
Mer effektive og
nøytrale løsninger for
eksisterende
markedsdesign
Tilrettelegge for
tilleggstjenester
Bedre for sluttkunden!
C
F
Effektiv organisering
og forvaltning
av felles
IKT løsninger
Lavest mulig
kostnader for bransjen
Store endringer!
• Etablering av en datahub medfører endringer av roller og ansvar
i bransjen.
• Grunnleggende rammebetingelser i reguleringen er endret:
– Regulering av ny markedsmodell
– Datahubens rolle
• Finansieringsmodell
– Brukerfinansiering
•
Fastledd (per aktør)
•
Volumdel (per målepunkt)
• Styringsmodell
• Statnett
• Bransjens
• NVE
Forskriftsendringer med Elhub (FOR 301)
• Samme sluttbruker for nett og kraft på et
gitt målepunkt
• Standard for behandling av
timeverdier (VEE)
• Identifikasjon av sluttbruker ved fødselsnr.
eller organisasjonsnr.
• Kraftleverandør skal presentere
forbruksdata
• Leverandørskifter, anleggsovertagelse
• Sikkerhetskrav (Informasjon)
• Ansvar for beregningsoppgaver
• Nøytralitetskrav
– Beregning av JIP, nettap, og avregningsdata til
regulerkraftavregning
• Overføring av timeverdier til elhub innen kl.
07:00
• Måleverdier tilgjengelig kl. 09:00
• Lagring av timeverdier og kundeinformasjon
i Elhub
• Avviksoppgjør
• m.m.
Nytt marked når Elhub går i drift
 Alle aktørene har kun ett
grensesnitt å forholde seg til
 Effektivitet og totale
kostnads-besparelser
 Personvern og
datasikkerhet
 Økt nøytralitet - gjennom likebehandling
(mulighet for anonymisering av
leverandør)
Bedre kvalitet på
måleverdier gjennom
VEE og "benchmarking"
Nettselskap
Bedre tilgang til kunder
og måleverdier for
energirådgivning (ESCO)
Enklere selvbetjening
for sluttkunder bl.a. på
tvers av nettselskaper
 Elhub overtar
purring/oppfølging av
prosesser
 Formaliserte prosesser
for feil og reverseringer
Leverandør
1
Kilde for alle måleverdier,
ansvarlig for distribusjon
A
 Forståelige fakturaer
2
3
B
elhub
C
4
D
…
…
Alle beregninger kjøres likt
etter samme rutine
uavhengig av nettselskap
(JIP, nettap, avvik)
 Konsistente kundedata
gjennom bruk av
fødselsnummer
 Elhub "motpart" for
leverandørbytter og
flytting
Elhub foretar ukeavregning
og rapporterer til
Avregningsansvarlig
Overordnet status
Q2/15
Anskaffelsesprosess
feb/15
Implementeringsplan
Test & Migrering
Operativ drift
20.02.2017
Bransjeinvolvering
Bransjeråd
Gi råd til prosjektet om viktige forhold som må
tas hensyn til, samt sikre at valgt løsning dekker
de vesentligste forhold av betydning for
aktørene i bransjen.
Ekspertgrupper
Gi innspill på faglige spørsmål, samt bidra med
informasjon og beskrivelser av dagens løsninger,
krav til fremtidige løsninger og bistå i spesifikke
forhold som berører nettselskaper og
leverandører.
Konsulteres ved viktige beslutninger.
Sikre involvering og forankring i bransjen av det
arbeidet som blir utført.
Sikre dypere innsikt i nettselskapers og
leverandørers relevante prosesser , rutiner, og
tekniske løsninger.
Tre grupper deltok i utarbeidelse av
kravspesifikasjonen: 1) Måleverdihåndtering, 2)
Kundeadministrasjon, 3) Teknisk
Møter 2 ganger i halvåret
En gruppe "Test og migrering" i
implementeringsprosjektet.
Møter ca. 1 gang per måned
Samarbeid med bransjen - Hva kreves
Største omlegging siden energiloven
• Grensesnitt – Innhold
• Grensesnitt – Teknologi
• Utvikling
• Omfattende migrering & testing
• Operative prosedyrer
• Videreutvikling
• Styringsmodell
Tidsplan test og migrering
2015
Q1
Q2
2016
Q3
M1
01.07.15
Q4
M2
01.11.15
Q1
M3
01.03.16
DATAVASK OG
MIGRERING
Grunnleggende datavask
Q2
Q3
M4
01.07.16
Q4
M5
01.10.16
Q1
M6
15.01.17
2017
Q2
Kontinuerlig datavask og datavedlikehold
Uttrekk
grunndata
Pilot migrering
SYSTEMTILPASNING /
TEST
Inkrementell migrering
Elhub GO-LIVE
20.02.2017
Systemgodkj.
Elhub
Systemtilpasning
Systemsertifisering
Edielportal
Aktørsert.
Edielportal
Aktørgodkjenning
Elhub
EKSTERNE
MILEPÆLER
NBS Go-Live
Høst 2016
Edielportal (inkl B2B) klar
01.10.2015
DAMv1 levert
DAM v2 levert
01.08.2015
15.12.2015
Elhub klar for
Vendor Trial
01.05.2016
Elhub klar for
Market Trial
01.09.2016
Elhub accepted
01.02.2017
Teknologiske utfordringer
- Opp til 100 millioner innkommende måleverdier fra 2,8 millioner
målepunkt hvert døgn
- Over 25 milliarder måleverdier på 1 år.
- Ta imot samtlige markedsprosesser i det norske kraftmarkedet
-
Ca. 500.000 Leverandørbytter
Ca. 500.000 Flyttinger
- All data skal være tatt imot innen kl 07:00 for foregående døgn
- Data skal være gjort tilgjengelig for markedsaktørene kl 09:00
- Store mengder aggregeringer, beregninger av JIP og prosessering av
data for opp til 12 dager med data tilbake i tid. Kontinuerlig prosess.
17
Last i Elhub
Aggregering
Beregning av JIP
Innkommende Utgående
data
data
Fokus i Elhub teknologi
Spesiell fokus på fire områder i design:
Ytelse
Skalerbarhet
Sikkerhet
Stabilitet
Komponenter som ivaretar disse områdene:
19
Ytelse
- Oracle Engineered systems
- Oracle Service Bus til intern kommunikasjon i Elhub
- Riktig database til riktig bruk (RDBMS og NoSQL)
- Cloudera Hadoop cluster med Spark for distribuerte
prosesseringer i minnet
- Optimalisering av prosesseringstid for oppgaver
20
Skalerbarhet
• Fysisk skalering ved å legge til hw noder i eksisterende rack, eller ekstra rack
• Kan skalere enkeltlag eller komponenter
• Meldingsmottak fra markedet, separat fra prosessering
• Ønsker så stor grad av opplevd tilgjengelighet for Elhub som mulig,
uavhengig av meldingsprossessering
• Skal tåle utfall av underliggende lag i så stor grad som mulig
• Asynkrone mekanismer for å skille mottak og prosessering og for å kunne
skalere enkeltlag
Vertikal skalering
Horisontal skalering
21
Sikkerhet
• Kryptert og signert overføring av markeds
meldinger og måleravlesninger
• Spesifikt fokus på kravsetting av sikkerhet i
løsningen
• Sertifikater og MinID for autentisering
• Audit trail
• Sonemodell, topolologi for deployment og
tilgang
• Autoriseringsmodell for bla. implisitt/eksplisitt
tilgang for 3.part
• Sterkt fokus på personvern/sikkerhet
• Privacy-by-design
• Skattedirektoratet
• Datatilsynet
• KraftCert
22
Stabilitet
• Alle Eng. Systems har full HW redundans
• PDU, nettverk, servere, switcher etc.
• Mellomvare med redundans, HA, clustre, load-balancing
• Vedlikeholdbarhet og isolasjon mellom komponenter viktig for å
sikre stabilitet
• Viktig med realistiske last modeller i test/QA
– Vi må forstå aktørenes oppførsel
23
Elhubs potensielle rolle i 3.parts marked
Elhub
Takk for oppmerksomheten!
For mer informasjon sjekk:
www.elhub.no