UNLOCKING THE POTENTIAL OF DATA Grunddata og Datafordeler forretningsmæssige udfordringer og muligheder for finansielle virksomheder September 24th 2015 Nicolas Horst KMD Grunddata KMD A/S INTERNT EJ NUMMERERET-V0.0 PUBLIC BASIC-DATA IS THE FOUNDATION FOR PUBLIC AUTHORITIES AND PRIVATE COMPANIES TO PERFORM ESSENTIAL DAILY TASKS … Background on basic-data and the basic-data programme • Basic data is various core information about individuals, businesses, real properties, buildings, addresses, and more, used by the Public authorities … • … while the scope of the basicdata program is harmonize and registers and establish a distribution infrastructure • The most important objectives for the programme is… Public sector basic-data is information about ... People Owns Owns Employed in Real Estate Owns Located at Lives on Adresses, Roads etc. Exists on Maps and Geography Determines the location Business … that it is correct, complete and up-to-date … that all public authorities use public sector basic data … that it is freely available to businesses as well as the public The civil registration system (CPR) is a central, nationwide due register, which assign a personal number (social security number) for secure identification to everyone Business master data is stored in the Central Business Register and in the Company Register … that it is distributed efficiently Real property master data includes data on land parcels, buildings and dwellings … that it accommodate the needs of the users Address master data are data relating to road names, postal codes etc., and “place names” which are known names for places or areas such as cities, hospitals, etc. Geographic basic data is location-specific data e.g. about land parcels, buildings, road infrastructure, watercourses and lakes KMD A/S INTERNT EJ NUMMERERET-V0.0 2 DATA IS LIMITED BY SILOS, MULTIPLE DISTRIBUTION PLATFORMS AND DOUBLE REGISTRATION THROUGH SHADOW REGISTERS … Solution area Illustration (non exhaustive) Market structure / maturity • Underdeveloped market, following wideranging legal restrictions Value-added products Master data management KMD A/S INTERNT EJ NUMMERERET-V0.0 Shadow reg. Distribution platform Distribution platform Distribution platform Distribution platform Core reg. Distribution Distribution platform • Silo based market approach has led to technological and organizational barriers and a low level of flexibility People Companies Real Estate Adresses, Roads etc. Maps and Geography • Many solutions are technically obsolete, consequently not capable of delivering the desired data as fast as needed • Great number of individual systems for distributing basic data • Strong pressure on registers due to increasing demand for data • Problems with gaps and redundancy in the data sets, has resulted in shadow registers to enable delivery the service requested 3 THE BASIC DATA PROGRAM - UNLOCKING THE POTENTIAL OF PUBLIC MASTER DATA About the Agreement: • • • • Initiated by the Government and KL. Investments of approximately mDKK 930 until 2016 Establishing a common public data distributor Common architecture & data model KMD A/S INTERNT EJ NUMMERERET-V0.0 4 THE DATA DISTRIBUTOR Enriched Data LOOKUP, SERVICES & DOWNLOAD DATA DISTRIBUTOR UPDATING Basic Data KMD A/S INTERNT EJ NUMMERERET-V0.0 5 Configurable Dataleverancespecifikation (DLS) Soap Grunddata Register Opdatering PostGre PostGre PostGre De-normaliserede data (performancehensyn) Core System Grunddata Register Rest Fildownload Services WFS Synkroniser ing WCS SQL Server System data PostgreSQL Grunddata Konfigurerbart KMD A/S INTERNT EJ NUMMERERET-V0.0 WMS/WMTS TIME SCHEDULE FOR DATA ON THE COMMON DATA DISTRIBUTOR FASE 1 DAGI Skærmkort Højdemodel (Featured datasets from the above) September 2015 FASE 2 CPR CVR VUR Stednavne Q4 2016 FASE 3 BBR DAR Matriklen Ejerfortegnelsen Q2 2017 Common properties for all datasets: ● Common model ● Interfaces, standards and data models are coordinated ● Governance for future changes established KMD A/S INTERNT EJ NUMMERERET-V0.0 23-09-2015 7 REGLER OM GENERELLE EGENSKABER - ALLE MODELENTITETER SKAL MODELLERES: Med Persistent, unik identifikation (HTTP URI) Med Status, der klart angiver, hvor et forvaltningsobjekt er i sin livscyklus Med Dobbelthistorik, der klart angiver registreringstid, virkningstid og aktører. Det dobbelte består i, at to tidsaspekter “virkningstid” og “registreringstid” håndteres i sammenhæng Så Beskedfordeling understøttes KMD A/S INTERNT EJ NUMMERERET-V0.0 8 Link til modelregler for grunddata og arkitekturforum for relevante dokumenter 8 VILKÅR FOR BRUG AF DE OFFENTLIGE GRUNDDATA Generel information [Indsæt betegnelsen for den offentlige myndighed, som konkret stiller data til rådighed], herefter Myndigheden, som har de immaterielle rettigheder til [indsæt betegnelsen for/en henvisning til data, der konkret stilles til rådighed] (herefter data), giver på nedenstående vilkår brugsret til data Vilkårene accepteres ved enhver brug af data. Vilkårene reguleres af dansk ret. Brugsret Myndigheden giver en verdensomspændende, gratis, ikke-eksklusiv, og i øvrigt ubegrænset brugsret til data, som frit bl.a. kan: kopieres, distribueres og offentliggøres, ændres og sammensættes med andet materiale bruges kommercielt og ikke-kommercielt, Vilkår Data må ikke bruges på en måde, så det kan fremstå som om, at myndigheden godkender, støtter, anbefaler eller markedsfører brugeren, brugerens produkter eller tjenester. Det skal sikres, at brug af data er i overensstemmelse med dansk ret. [indsæt evt. yderligere beskrivelse af/ henvisning til lovgivning om brug af data og evt. forpligtelse til at oplyse herom]. Kildeangivelse Ved brug af data [indsæt kan eller skal] følgende angives: [indsæt [Indeholder data, som benyttes i henhold til vilkår for brug af danske offentlige data] eller [specifik kildeangivelse for myndighed og data]] Myndighedens rettigheder og ansvar Data stilles til rådighed, som de er, og myndigheden har intet ansvar for hverken indhold, oprindelse, fejl og mangler eller nogen form for skade, der måtte følge af brug af data. KMD A/S INTERNT EJ NUMMERERET-V0.0 9 STRATEGI FOR BEDRE DATA OG SERVICES FOR JER! MULIGHEDER OG UDFORDRINGER MED DATA “IF THE RATE OF CHANGE ON THE OUTSIDE EXCEEDS THE RATE OF CHANGE ON THE INSIDE, THE END IS NEAR!” JACK WELCH DET DIGITALE WILD WEST STORE FORANDRINGER I IT OG DATA LANDSKABER CENTRAL STYRING OG DECENTRAL IMPLEMENTERING OG GEVINSTREALISERING KOMPLEKS VERDEN MANGE DATA MANGE FAGAPPLIKATIONER MANGE PLATFORME AS A SERVICE: DATADISTRIBUTION BUSINESS INTELLIGENCE BIG DATA ANALYTICS DATA GRUNDDATA JERES DATA SAMARBEJDSPARTNERS DATA EKSTERNE DATA DATAFORDELER SERVICEPLATFORM NATIONAL SUNDHEDSPLATFORM SIKKERHED IT SIKKERHED DATA SIKKERHED PRIVACY - I DANSK OG EUROPÆISK KONTEKST KMD COGNITO – DATA MED INDSIGT KMD SKABER NY PRODUKTFAMILIE – KMD COGNITO KMD Cognitofamilien samler de nye løsninger, som vi præsenterer fremadrettet til jer KMD A/S INTERNT EJ NUMMERERET-V0.0 KMD Cognito leverer data og services på tværs af områder. KMD Cognito sikrer data med indsigt Selv komplekse data bliver tilgængelige 16 KMD COGNITO LOCAL UTILILY PRIVAT EXCHANGE CONSULTING ACCESS Vi er blevet moderne, tro det eller ej! #nytnavn #KMDCognito #sammenudviklerviDK FUTURE VISION FOR MARKET OF DATA MANAGEMENT AND DISTRIBUTION Solution area Illustration (non exhaustive) Decentralised data distribution (Data container) Description KMD Cognito Finance Distribution platform Datafordeleren Distribution platform Distribution platform Distribution Distribution platform Distribution platform Value-added products Core reg. KMD A/S INTERNT EJ NUMMERERET-V0.0 Companies Real Estate Business development Town Planning Private master data Maps and Geography Utilities Social media Finance Tele Agriculture Health Shadow reg. Master data management People Consumer Behaviour Centralised data Exchange platform Public master data Adresses, Roads etc. Finance Cockpit Traffic 18 KMD COGNITO ACCESS - SKÆRMBILLEDER KMD A/S INTERNT EJ NUMMERERET-V0.0 19 Big Data represents a different regime within data mining A coherent shift for Business and IT => new demand for Data Scientists Customer experience • “Known Customer” • Better understanding of customer behaviour • Proactive customer handling Business improvements • More relevant for customers • Real time analytics • Improved Risk management Fostered by new technology It capabilities • Cheap, scalable and reliable • Large(r) data sets • Self healing systems • It operation optimization – Log analysis KMD A/S INTERNT EJ NUMMERERET-V0.0 23-09-2015 Analytical capabilities • Access to “hidden” information • Looking for unknown structures (Machine Learning) • Data of any structure • Compare with customer segments 20 VI MØDER JER PROFESSIONELT OG I ØJENHØJDE SAMARBEJDER GERNE MED KONKURRENTER VI ARBEJDER MUDULÆRT OG SKALERBART VI ER MED JER HELE VEJEN TAK FOR NU NICOLAS HORST [email protected] +45 6191 3686 LINKEDIN: KMD GRUNDDATA DET SKAL UDVIKLES VÆK! #SAMMENUDVIKLERVIDANMARK 22 BACKUP/EXTRA ©KMD 23 STATENS, KLS & DRS GRUNDDATAPROGRAM – KORT FORTALT INTERNT KMD A/S EJ NUMMERERET-V0.0 v/ Nicolas Lemcke Horst AGENDA 1. Grunddataprogrammet – kort fortalt Grunddata - mere konkret 2. Datafordeleren – et paradigme skifte Baggrund og teknologi 3. KMDs strategi arbejde om ”data og data distribution” KMD A/S INTERNT EJ NUMMERERET-V0.0 25 Værdikæde z y System x Informationsskabelse • Manuel • automatisk Anvendelse Anvendelse • Fagsystemer • Produktionssyste mer • Opbevaring • Intern distribution Opsamling og deling Datavarehus Analyse • • • • • • • • • Sikker datadeling Distribution Søgning Behandling Opbevaring Forretningsafklaret, -styret og – koordineret informationshåndtering (MDM). KMD A/S INTERNT EJ NUMMERERET-V0.0 Udnyttelse prognoser evalueringer benchmarking mønster Data ”dør” – bliver historiske Fangst Operationel anvendelse 1. GRUNDDATAPROGRAMMET ”Grunddataprogrammet skal sikre gode sammenhængende grunddata, der opdateres et sted og anvendes af alle.” VÆKST i den private sektor EFFEKTIVISERING i den offentlige sektor med fælles løsninger MULIGHEDER for at forbedre servicen for borgere og virksomheder med digitale løsninger KMD A/S INTERNT EJ NUMMERERET-V0.0 27 2. TODAY BASIC-DATA IS LIMITED BY MULTIPLE DISTRIBUTION PLATFORMS, DOUBLE REGISTRATION AND SHADOW REGISTERS … Solution area Illustration (non exhaustive) Market structure / maturity • Underdeveloped market, following wideranging legal restrictions KMD A/S INTERNT EJ NUMMERERET-V0.0 Shadow reg. Master data management Distribution platform Distribution platform Distribution platform Distribution platform Distribution platform Distribution • Many solutions are technically obsolete, consequently not capable of delivering the desired data as fast as needed Core reg. Value-added products • Silo based market approach has led to technological and organizational barriers and a low level of flexibility People Companies Real Estate Adresses, Roads etc. Maps and Geography • Great number of individual systems for distributing basic data • Strong pressure on registers due to increasing demand for data • Problems with gaps and redundancy in the data sets, has resulted in shadow registers to enable delivery the service requested 28 DIGITALISERINGSSTYRELSENS - PROGRAM FOR GRUNDDATA • Grunddataprogrammet sikrer gode sammenhængende grunddata, der opdateres ét sted og anvendes af alle. • Sikre fri adgang til offentlige grunddata for myndigheder, virksomheder og borgere • KOMBIT koordinere udfasningen af eksisterende systemerne i relation til grunddata Om aftalen: Milepæle og fokus i 2015: • Igangsat af regeringen og KL – regionerne også med • Tættere offentligt digitalt samarbejde – Digitaliseringsstrategi 2012-2016 • Investeringer for ca. 930 mio. kroner frem til 2016 • Realisere business casen og gevinsterne • Etablering af fællesoffentlig datafordeler • Etablering af samlet programplan skal sikre bedre fremdrift – forår 2015 • Fælles arkitektur og datamodel • • Etablering af en tværoffentlig grunddatabestyrelse Dialog med kommuner, regioner og private virksomheder om potentialer og gevinster • Politisk behandling af analysen af effektiv personregistrering KMD A/S INTERNT EJ NUMMERERET-V0.0 september 2015 29 PRINCIPPER FOR TILGÆNGELIGHED OG ANVENDELSE • Grunddata kan anvendes som defineret i de fælles vilkår for grunddata (juridisk tilgængelige). • Grunddata kan anvendes uden betaling for rettigheder til data (økonomisk tilgængelige). • Grunddata kan tilgås via Datafordeleren (teknisk tilgængelige). • Alle offentlige myndigheder skal, pr aftale eller de facto, anvende grunddata, hvor data er relevante. KMD A/S INTERNT EJ NUMMERERET-V0.0 30 PRINCIPPER FOR PRODUKTION OG VEDLIGEHOLDELSE • Grunddata skal være relevante for flere offentlige myndigheder • Grunddata skal være fælles anvendelige • Grunddata skal være veldefinerede og kvalitetssikrede • Grunddata er tilstrækkeligt komplette og korrekte til de væsentligste anvendelser af data • Grunddata tilknyttes en entydig og stabil identifikation • Grunddatas dataformat er i overensstemmelse med den fælles datamodel • Ansvaret for grunddatas kvalitet og vedligeholdelse er klart placeret • Grunddata opdateres kun ét sted • Produktion og vedligeholdelse af grunddata sker effektivt KMD A/S INTERNT EJ NUMMERERET-V0.0 31 GRUNDDATA – MERE KONKRET KMD A/S INTERNT EJ NUMMERERET-V0.0 32 HVAD ER GRUNDDATA KMD A/S INTERNT EJ NUMMERERET-V0.0 33 EJENDOMSDATA (GD 1) Der etableres en forbedret og sammenhængende infrastruktur på ejendomsområdet • Matrikel (GST) • Ejerfortegnelsen (GST) • BBR (MBBL) Et fælles ejendomsbegreb: Bestemt Fast Ejendom 34 KMD A/S INTERNT EJ NUMMERERET-V0.0 34 ADRESSEDATA (GD 2) Det autoritative adresseregister bliver BBR Nyt adresse register etableres Vejnavne og adresser (MBBL) Stednavne (GST) Administrative inddelinger (GST) (DAR) CPR og CVR trækker fra BBR Aktualiteten og kvaliteten af adressedata øges Et stednavnesystem etableres Danmarks administrative geografiske inddeling (DAGI) udbygges som et grundregister, De kommunale inddelinger og distrikter vedligeholdes efter ensartede standarder og normer KMD A/S INTERNT EJ NUMMERERET-V0.0 35 GEODATA OG KLIMATILPASNING (GD 3 & 4) Geografiske grunddata frikøbes • Danmarks Højdemodel bliver ajourført fremadrettet • Ny organisering omkring FOT • Etablering af et fælles grundlag til vandforvaltning og klimatilpasning • Etablering af en hydrologisk højdemodel KMD A/S INTERNT EJ NUMMERERET-V0.0 36 PERSONDATA (GD 5) Analyse af en mere effektiv og sammenhængende personregistrering og distribution af persondata Persondata er i første omgang ikke omfattet af frikøb af grunddata Persondata vil fortsat være beskyttet Indstilling pga. analysen • Teknisk modernisering • CPR nr. fastholdes • Klargøring til et journalnummer Politisk beslutning ultimo 2015 KMD A/S INTERNT EJ NUMMERERET-V0.0 37 VIRKSOMHEDSDATA (GD 6) CVR- og selskabsdata får et kvalitets forbedres Virksomheder under 50.000 kr. i årlig omsætning registreres Udenlandske virksomheder kan registreres Antal ansatte i intervaller Tegningsreglerne struktureres til anvendelse i digital forvaltning Geografisk placering SE-numre udfases om muligt CVR validerer adresser mod BBR-registeret (DAR) KMD A/S INTERNT EJ NUMMERERET-V0.0 38 GRUNDATAS GOVERNANCE Grunddataprogrammet Bestyrelsen Grunddatasekrateriatet Programkoordinationen Arkitekturforum GD 8 Kontakt udvalg ??? Landbrug? Finans Virksomhedsdata GD6 Persondata GD5 Geodata GD4 Klimatilpasning og vanddata GD3 Adressedata GD2 Ejendomsdata GD1 Tværgående kompunenter Datafordeleren GD 7 Fælles datamodel KMD A/S INTERNT EJ NUMMERERET-V0.0 Link Digitaliseringsstyrelsen: Medlemmer i Grunddatabestyrelsen og styregrupperne 39 GRUNDDATAMODELLEN For at grunddata effektivt kan anvendes af brugerne, skal datamodellerne for de enkelte grunddata være ensartede og sammenhængende. Grunddatamodellen sikre en samlet og sammenhængende model i et distribueret forvaltningsmiljø. KMD A/S INTERNT EJ NUMMERERET-V0.0 Link til modelregler for grunddata og arkitekturforum for relevante dokumenter 40 FÆLLES DATAMODEL Grunddataprogrammet Grunddatasekrateriatet Programkoordinationen Arkitekturforum GD 8 CPRkontoret MBBL Virksomhedsdata GD6 Persondata GD5 Geodata GD4 Vanddata GD3 Adressedata GD2 Ejendomsdata GD1 Geodatastyrelsen Erhvervsstyrelsen Tværgående produkter Datafordeleren GD7 Fælles datamodel KMD A/S INTERNT EJ NUMMERERET-V0.0 KL DR ATP SKAT 41 REGLER OM GENERELLE EGENSKABER - ALLE MODELENTITETER SKAL MODELLERES: Med Persistent, unik identifikation (HTTP URI) Med Status, der klart angiver, hvor et forvaltningsobjekt er i sin livscyklus Med Dobbelthistorik, der klart angiver registreringstid, virkningstid og aktører. Det dobbelte består i, at to tidsaspekter “virkningstid” og “registreringstid” håndteres i sammenhæng Så Beskedfordeling understøttes 42 KMD A/S INTERNT EJ NUMMERERET-V0.0 Link til modelregler for grunddata og arkitekturforum for relevante dokumenter 42 GRUNDDATAMODELLEN Et samlet overblik (“indholdsfortegnelse”) Så grunddata fremstår sammenhængende for interessenterne Grunddata som de udstilles for databrugere (interne + eksterne) og systemudviklere Central opbevaring og udstilling 43 KMD A/S INTERNT EJ NUMMERERET-V0.0 Link til modelregler for grunddata og arkitekturforum for relevante dokumenter 43 DATAFORDELEREN KMD A/S INTERNT EJ NUMMERERET-V0.0 44 DATAFORDELEREN • Skal distribueres alle grunddata • På sigt kan andre data også distribueres • Dataejerskabet for grunddata er uforandret • Opdatering af grunddata sker (uforandret) gennem eksisterende grænseflader • Grunddata kopieres til datafordeleren med en frekvens, der er understøtter brugernes behov for aktualitet • Grunddata distribueres på en åben licens • Grunddata opbevares og distribueres i henhold til gældende dansk og europæisk lovgivning 45 KMD A/S INTERNT EJ NUMMERERET-V0.0 VILKÅR FOR BRUG AF DE OFFENTLIGE GRUNDDATA Generel information [Indsæt betegnelsen for den offentlige myndighed, som konkret stiller data til rådighed], herefter Myndigheden, som har de immaterielle rettigheder til [indsæt betegnelsen for/en henvisning til data, der konkret stilles til rådighed] (herefter data), giver på nedenstående vilkår brugsret til data Vilkårene accepteres ved enhver brug af data. Vilkårene reguleres af dansk ret. Brugsret Myndigheden giver en verdensomspændende, gratis, ikke-eksklusiv, og i øvrigt ubegrænset brugsret til data, som frit bl.a. kan: kopieres, distribueres og offentliggøres, ændres og sammensættes med andet materiale bruges kommercielt og ikke-kommercielt, Vilkår Data må ikke bruges på en måde, så det kan fremstå som om, at myndigheden godkender, støtter, anbefaler eller markedsfører brugeren, brugerens produkter eller tjenester. Det skal sikres, at brug af data er i overensstemmelse med dansk ret. [indsæt evt. yderligere beskrivelse af/ henvisning til lovgivning om brug af data og evt. forpligtelse til at oplyse herom]. Kildeangivelse Ved brug af data [indsæt kan eller skal] følgende angives: [indsæt [Indeholder data, som benyttes i henhold til vilkår for brug af danske offentlige data] eller [specifik kildeangivelse for myndighed og data]] Myndighedens rettigheder og ansvar Data stilles til rådighed, som de er, og myndigheden har intet ansvar for hverken indhold, oprindelse, fejl og mangler eller nogen form for skade, der måtte følge af brug af data. KMD A/S INTERNT EJ NUMMERERET-V0.0 46 KMD UDVIKLER DATAFORDELEREN KMD A/S INTERNT EJ NUMMERERET-V0.0 47 Tjenester Konfigurerbar Synkronisering Opdatering Skalering Cache Datamodel KMD A/S INTERNT EJ NUMMERERET-V0.0 Modulært opbygget Komponenter Synkronisering Opdatering Dynamiske applikations services KMD A/S INTERNT EJ NUMMERERET-V0.0 Switchboard Teknologiskift Hybrid Cloud Dynamiske applikations services Komponentbaseret Skalerbar KMD A/S INTERNT EJ NUMMERERET-V0.0 Udviklet til forandring KMD A/S INTERNT EJ NUMMERERET-V0.0 DATAFORDELEREN – MERE KONKRET KMD A/S INTERNT EJ NUMMERERET-V0.0 52 ARKITEKTUREN I LØSNINGEN Soap Base Register Updating PostGre PostGre PostGre Copy data (De-normalized) Performance optimazation Core System Services Data delivery agreement (1 per base register) WMS/WMTS WFS WCS SQL Server 23. september 2015 File Synchroni -sing Base Register KMD A/S INTERNT EJ NUMMERERET-V0.0 Dokument nr./Version Rest System data Datamodel Services Updating & Synchronising PostgreSQL Basic Data Configureable DIAS 53 KMD A/S INTERNT EJ NUMMERERET-V0.0 Nicolas Lemcke Horst Mobil: 4161 3686 54 Email: [email protected]
© Copyright 2024