Data Governance tulee lihaksi Jarno Lindqvist Senior Advisor, Information Management Nordic Region Mitä ja miksi? • DG = (tiedon) hallintamalli • DG viittaa ihmisten, prosessien ja teknologioiden kokonaisuuteen, jolla organisaation (liiketoiminta)tietoa hallitaan. • DG kattaa tyypillisesti tiedon hallinnan, tiedon laadun, tiedonhallintaprosessien johtamisen ja niihin liittyvän riskienhallinnan. • DG luo pelisääntöjä ja yhteisymmärrystä niihin prosesseihin, joilla dataa hallinnoivat henkilöt luovat, päivittävät, käyttävät ja arkistoivat tietoa. säännöt, käytännöt Yhteisymmärrys DG tavoitteet roolit, omistajuus, vastuu tiedonlaatu, validointi, monitorointi Yhteistyö Läpinäkyvyys Lähtokohta valitettavan usein 80% ONGELMA Oikean datan etsiminen, erilaisten datojen yhdistely, virheiden korjaus, väärinkäsitysten oikaisu, vastuullisten etsiminen, yhteisymmäryksen etsiminen 20% Tuottava tekeminen PÄÄTÖS DG prosessit käytössä 20% ONGELMA Edellä mainittu valmisteleva toiminta 80% Ongelmanratkaisuun riittää enemmän panoksia, koska perusasiat ovat jo valmiiksi ryhdikkäässä kunnossa PÄÄTÖS Tavoitteita liiketoiminnan näkökulmasta? Parempi tuottavuus ja tehokkuus Lainsäädännön mukainen toiminta Alhaisemmat kustannukset Alhaisemmat riskit Data Governance Business Case Tehokkaampi toiminta  Tiedonhallintaprosessien modernisointi  Kustannusten alentaminen  Parempi tuottavuus  Prosessien automatisointi Asiakkaalle näkyvät hyödyt  Vähemmän asiakkaalle näkyviä virheitä  Markkinoinnin tarkempi kohdentaminen  Nopeampi reagointi poikkeamiin -> Parantunut asiakastyytyväisyys Riskinhallinta ja laillisuus  Alentunut operationaalinen riski  Toiminnan läpinäkyvyys, vastuuhenkilöt  Tietosuojalainsäädäntö, Basel / Solvency vaatimukset  Jäljitettävyys Business Data Network: Sama resurssi, kaksi eri näkökulmaa Purkki 435g Tietohallinto Logo punaisella Sisältää 16% sattumia LÄHDE: http://www.jalostaja.fi/tuotteet/hernekeitot Tunnettu brändi Premiumtuote: enemmän katetta Valmistettu Turun tehtaalla Liiketoiminta Business Data Network Liiketoiminta-termistön keskitetty varasto (data dictionary, business glossary) • Liiketoiminnan ja tietohallinnon yhteistyöhön kannustava ratkaisu • Mahdollistaa Data Governance –ohjelmien nopeamman käynnistämisen • Saa kaikki osapuolet puhumaan ”samaa kieltä” • Parantaa luottamusta dataan • Vähentää väärinkäsityksistä johtuvia virheitä • Sisältää muutoshallinta-ominaisuudet Business Data Network: Rakentaa yhteyden eri osapuolien välille Database = TUOTTEET Category: Elintarvikkeet Tietohallinto Term: Keittoruuat Schema = PURKKI_RUUAT Description: Juhlahernekeitto Table = KEITOT Documents: Salainen hernekeittoresepti.docx Column = TUOTEKOODI Data type = STRING Business Data Network Status: UNDER REVIEW Valid values = BB, LB, RB Liiketoiminta Business Data Network: Linkittää tekijät ja resurssit DG tulee lihaksi –toimijat Liiketoiminta = tiedon omistaja IT = toimeenpanija Data Steward = valvoja Temistö Säännöstö Hälytykset Kuvaukset Validointisääntö Mittaristot Vaatimukset … määrittelee termit sekä sanallisesti, että numeerisesti ja linkittää ne sidosryhmiin … yhdistää termistön korreloivan datan kanssa ja rakentaa validoinnissa käytettävät liiketoimintasäännöt … seuraa sääntöjen totetutumista mittareiden kautta ja ryhtyy korjaaviin toimenpiteisiin (=remediaatio) Jäljitettävyys Hallintamalli, tiedon laatu, dokumentaatio, omistajuus Business Data Network: kuka teki, mitä teki, million teki ja mistä löydän alkuperäisen? Business Data Network: Omistajuus, tilatieto, ilmoitukset Business Data Network: Lineage ja relaatiodatan import ulkoisista välineistä  Tuetut import‐formaatit: – – – – – SAS Data Management Platform Metadata SAS DI Studio Metadata Erwin CSV (Excel) CWM (Common Warehouse Metamodel format) • Tukee yli 200 eri kehitysvälinettä! Business Data Network: Resurssien liittäminen termistöön • Resursseja voi liittää nimen perusteella tai resurssityypin, esim: – DI jobi – Taulu / sarake – Transformaatio – Jne. Business Data Network: Liiketoimintaresurssien tarkastelu linkkikartalla Näyttää termien ja osapuolten keskinäiset linkit: • Henkilöt • Termit • URLit • Dokumentit Business Data Network: Teknisten resurssien tarkastelu linkkikartalla (lineage) • • Saraketasolle menevä Lineage‐tieto Voidaan suodattaa resurssityypin tai relaatiotyypin mukaan Business Data Network: Selainpohjainen haku – tuloksista suoraan termistöön Business Data Network: Referenssitiedon hallinta tiedon omistajille • • • • • Keskitetty paikka referenssitiedolle Käyttäjäystävällinen selainkäyttöliittymä Versiointi, muutoshistoria, julkaisuprosessi Referenssilistoja voidaan hyödyntää liiketoiminta‐ sääntöjen kanssa datan validoinnissa ja mittaroinnissa Tuki usealle kielelle Business Data Network: Referenssitiedon hyödyntäminen datan validoinnissa • • Referenssilistoja voidaan käyttää liiketoimintasääntöjen kanssa esim. datan validoinnissa Rakenetaan liiketoimintasääntö, joka vertaa referenssilistaa oikeaa dataa vasten Business Data Network: Referenssitiedon hyödyntäminen datan validoinnissa • • • Datan validointiajossa kutsutaan liiketoimintasääntöä Voidaan esim. erotella rivit jotka täsmäsivät ja rivit jotka eivät Ajon tulokset voidaan lähettää datan omistajalle DG tulee lihaksi - prosessi 1. Määrittely Luodaan Data Governance käytäntöjen mukaiset säännöt, jotka määrittelevät datalle vaaditun laatutason Korkeintaan 5% ilmentymistä saa olla puutteellisia, muuten prosessia on tarkistettava ja ryhdyttävä korjaaviin toimenpiteisiin 2. Suunnittelu Implementoidaan sitä vastaavat liiketoimintasäännöt, numeerisesti mitattavia, raja‐arvoja jne. Asiakkaan etunimen ja sukunimen tulee olla vaaditussa kentässä. Kenttä ei saa sisältää numeroita tai erikoismerkkejä, poislukien väliviiva. 3. Prosessointi Prosessoidaan liiketoimintasäännöt dataa vasten ja kerätään sen pohjalta lokitietoa Kun rivi ei täsmää liiketoimintasääntöön, nostetaan triggeri ja kirjataan se lokiin 4. Seuranta Yhdistetään monitoroinnin tulokset KPI‐mittareiksi ja esitetään käyttäjillle laatumittaristossa Esim. Asiakasdatan KPI = 96% liiketoimintasääntöjen mukaista. 5. Korjaus Tehdään tarvittavat kehitys / korjaustoimenpiteet Manuaaliset korjaustoimenpiteet asiakkuusylläpidon toimesta tai automaattisten laadunkorjausprosessien käynnistäminen jne. 6. Prosessin kehitys Muutetaan datan keräys, syöttö, käsittelyprosessia niin, että virheellisen datan määrää saadaan minimoitua. Laatuvalidointia jo datan syöttövaiheessa tai ETLprosessin staging alueella, kehitetään prosessia, jolla uudet asiakkaat luodaan kantaan jne. Yhteenveto Lisää yhteisymmärrystä: • Osapuolet ymmärtävät termistön samalla tavalla • Osapuolet pysyvät ajantasalla muutoksista Mahdollistaa yhteistyön: • Monta näkökulmaa samaan asiaan • Madaltaa liiketoiminnan ja IT:n raja-aitaa Lisää läpinäkyvyyttä: • Asiayhteydet ja omistajuus aina näkyvissä • Referenssidata on helposti ylläpidettävissä Yhteisymmärrys Yhteistyö Läpinäkyvyys Data Governance –välineitä löytyy useista SAS-ratkaisuista Data Integration Data Acquisition Data Quality Master Data Management SAS Data Integration Server SAS Event Stream Processing Engine SAS Data Quality Desktop SAS MDM Standard SAS Data Management Standard SAS Federation Server SAS Data Quality Standard SAS MDM Advanced SAS Data Management Advanced SAS Data Surveyors SAS Data Quality Advanced SAS Data Migration SAS Access Engines SAS Data Governance SAS DQ Accelerator for Teradata Company Confidential ‐ For Internal Use Only Copyright © 2013, SAS Institute Inc. All rights reserved.