Tietovaraston kehittäminen Metropolia Ammattikorkeakoulussa Antti Tikka, 29.5.2013.

Esitys aiheesta: "Tietovaraston kehittäminen Metropolia Ammattikorkeakoulussa Antti Tikka, 29.5.2013."— Esityksen transkriptio:

1 Tietovaraston kehittäminen Metropolia Ammattikorkeakoulussa Antti Tikka, 29.5.2013

2 Johdanto Antti Tikka229.5.2013 KeskitettyDW Operatiivisia tietokantoja Datamartteja Inmon Datamartteja Operatiivisia tietokantoja Kimball

3 1.Aloitus Inmonin arkkitehtuurilla 2.Ongelmia ja ratkaisuyrityksiä 3.Kimballin arkkitehtuuri

4 Keskitetyn tietovaraston käsitemalli  Suunnittelun aloitus vuonna 2006  Suunnittelu yhteistyössä konsulttien ja omien eri alojen asiantuntijoiden kanssa  Ensimmäinen versio valmis vuonna 2008  120 eri käsitettä opiskelusta, opetuksesta, HR:stä, organisaatiosta ja taloudesta  Muistuttaa XDW-mallia 29.5.20134Antti Tikka

5 Toteutettu arkkitehtuuri vuonna 2010 29.5.20135Antti Tikka KeskitettyDW Operatiiviset tietokannatDatamartit HR Winha STTS Tiedostoja (strategisen toiminnan suunnittelu) Opintojaksopalaute

6 1.Aloitus Inmonin arkkitehtuurilla 2.Ongelmia ja ratkaisuyrityksiä 3.Kimballin arkkitehtuuri

7 Ongelmat keskitetyssä tietovarastossa  Kyselyt monimutkaisia  Tyhjät taulut ja sarakkeet  Osa tauluista ei ajan tasalla  Kehityksen painottuminen liikaa keskitettyyn tietovarastoon  => Tarve datamarteille Antti Tikka729.5.2013 KeskitettyDW ?

8 ETL-prosessien ongelmat  Kaksi tietomallia ja kaksi ETL-prosessia  => paljon työtä ja paljon virheitä  Virheen jäljitys: Missä vaiheessa virhe on syntynyt?  Tyyppi 2 muutosten liikakäyttö Antti Tikka829.5.2013 KeskitettyDW Datamartti Operatiivinen tietokanta Virheitä Työtä Paljon työtä, paljon virheitä

9 Vuodet 2010 - 2012  Kehitytystä yhteistyössä konsulttien kanssa  Yrityksiä hyödyntää tietovarastoa heikolla menestyksellä  Tietovaraston hyödyntäminen käytännössä vaikeaa  Raportoinnin tukemista erilaisin keinoin  Näkymiä  Proseduureja  Itsenäisiä datamartteja 29.5.20139Antti Tikka

10 Itsenäiset datamartit 29.5.201310Antti Tikka Operatiiviset tietokannatDatamartit Tiedostoja Tilanvaraus OPS-editor Winha HR AMKOTA- Palvelussuhteet AMKOTA-TKI- opintopisteet Tilanvaraus Toisu Opintojaksojen luokittelu Suoritetut opintopisteet Palvelussuhteet Työajan käyttö Poissa-olot, osa-aikaisuus

11 1.Aloitus Inmonin arkkitehtuurilla 2.Ongelmia ja ratkaisuyrityksiä 3.Kimballin arkkitehtuuri

12 Kimballin arkkitehtuurin periaate  Ei keskitettyä tietovarastoa  Tietovarasto vain joukko datamartteja  Datamartit keskenään yhteensopivia  Tietovarasto rakennetaan datamartti kerrallaan Antti Tikka1229.5.2013 Datamartteja Operatiivisia tietokantoja Tietovarasto

13 Tähtimalli  Kimballin arkkitehtuurin ydin  Koostuu fakta- ja dimensiotauluista  Monipuoliset koostamismahdollisuudet  Yksinkertaiset ja tehokkaat kyselyt  Soveltuu automaattiseen kyselyiden generointiin  Suora yhteys OLAP- kuutioon Antti Tikka1329.5.2013 Opiskelija Toteutus Pvm Suoritus Työntekijä Arvioija D D D D F

14 Yhteiset dimensiot Antti Tikka1429.5.2013 Opiskelija ToteutusPvm Suoritus Työntekijä Arvioija PalauteKysymys F F

15 Väylämatriisi 29.5.201315Antti Tikka Dimensiot Datamartti / faktatauluFakta Pvm Kuukausi Kvartaali Lukukausi Vuosi Toteutus Opintojakso Koulutusohjelma Klusteri Työntekija Opiskelija Arvosana Kysymys Perustelu Kustannuspaikka Tili Toiminto Opinto SuoritusOpintopistemääräXXXXXXXXXXXX LäsnäoloKyllä / eiXX XXX Opintojaksopalaute KysymyspalauteNumeerinen arvioXXXXXXXXXXXX Avoin palauteSanallinen arvioXXXXXXXXXX Talous TilitapahtumaRahasummaXXXXXXX BudjettiRahasummaXXXXXX Työaika (tulossa) TehtäväTuntimääräXXXXXXXXXXX

16 Tekninen toteutus käytännössä 29.5.201316Antti Tikka Datamartit Yhteiset dimensiot Latausalue Operatiiviset tietokannat Tietojen siirto näkymien kautta Raportointi näkymien kautta

17 Ketterä kehitysprosessi  Nopea ja karkea toteutus päästä päähän  Käyttäjä havaitsee raportoinnin mahdollisuudet  => palautetta, muutoksia  Tietovarastoon vain raporteilla esitettävää tietoa  Suositaan tyyppi 1 muutoksia Antti Tikka1729.5.2013 Datamartti Operatiivinen tietokanta Latausalue Raportteja

18 Tutkimus arkkitehtuurien menestyksestä [3] Antti Tikka1829.5.2013 Pieni työmääräSuuri työmäärä Hyvä menestysKimballInmon Heikko menestys Itsenäiset datamartit, Pelkkä keskitetty tietovarasto

19 Arkkitehtuurin vaihto  Onko jo tehty työ tehtävä uudestaan?  Ei, jätetään jo tehty ennalleen  Jatketaan kehitystä Kimballin arkkitehtuurilla Antti Tikka1929.5.2013 KeskitettyDW ?

20 Metropolian arkkitehtuuri vuonna 2013 29.5.201320Antti Tikka KeskitettyDW Operatiiviset tietokannat Datamartit HR Winha STTS Tiedostoja (strategisen toiminnan suunnittelu) Opintojaksopalaute Talous Opinto Intime (kirjanpito)

21 Tekniset työkalut  SQL Server 2008 R2 ja SQL Server 2012  Integration Services  Reporting Services  Analysis Services  Oraylis (tietojen oikeellisuuden testaus) Antti Tikka2129.5.2013

22 Haasteita  Avaimettomien dimensioiden yhtenäistäminen  Raportilla esitettävän sisällön rajaaminen käyttäjän perusteella 29.5.201322Antti Tikka

23 Lähteet  [1] Adamson, C. (2010). Star Schema, The Complete Reference. McGraw-Hill Osborne Media.  [2] Kimball, R. (2002). The Data Warehouse Toolkit: The Complete Guide to Dimensional Modeling (Second Edition). Wiley.  [3] Watson, H. J., Ariyachandra, T. (2005). Data Warehouse Architectures: Factors in the Selection Decision and the Success of the Architectures. http://www.terry.uga.edu/~hwatson/DW_Architecture_Rep ort.pdf. http://www.terry.uga.edu/~hwatson/DW_Architecture_Rep ort.pdf 29.5.201323Antti Tikka

24 www.metropolia.fi www.facebook.com/MetropoliaAMK antti.tikka@metropolia.fi KIITOS!

25 29.5.201325Antti Tikka

26 29.5.201326Antti Tikka

27 Opintojaksopalautteen raportit 29.5.201327Antti Tikka

28 29.5.201328Antti Tikka

29 29.5.201329Antti Tikka