ATT-vaikuttavuusselvitystyöryhmä: taustaa Kansilehteä voi käyttää valokuvan kanssa tai ilman kuvaa. Aloituskokous 22.9.2014 Anssi Neuvonen VTT

Lähtökohtia Perusolettamus Tulokulmat Sisällöt Avoimuus Näkyvyys Tutkimuksen avoimuuden edistäminen ja hyödyntäminen Avoimuuden edistämisen ja hyödyntämisen mittaaminen Sisällöt Tulokset (julkaisujen lisäksi esim. ohjelmistot, audio-visuaalinen aineisto) Data => aineistot ja tietovarannot, jotka keskeinen osa tutkimuksen tulosta Menetelmät Näkyvyys Vaikuttavuus: status Käytettävyys Hyödynnettävyys Vaikuttavuus: toiminta

Työryhmän reunaehtoja Työn tavoite: Tuottaa selkeitä suosituksia, jotka voidaan kuitenkin kuvata melko yleisellä tasolla; tilaa organisaatiokohtaiselle soveltamiselle ja valinnoille Laajempi tavoite: tarjota avoimuus-vaikuttavuus –mittareita mukaan rahoitusmalleihin Mahdollisuus vaikuttaa myös EU:n komission ja OECD:n linjauksiin Aikataulu vuoden 2014 loppuun, todennäköisesti jatkuu 2015 talveen/kevääseen Aikataulun reunaehtoja: Avoin tiede ja tutkimus –hankkeen käsikirja (1. versio) valmistumassa vuoden vaihteeseen mennessä joitain alustavia suosituksia liittyen ainakin mittaamiseen (metriikat, kansainvälinen tiannekuva/selvitys) => mitä mitataan ja miten? jos aikataulu ja resurssit sallivat suosituksia myös liittyen palveluihin ja prosesseihin? ATT-tiekartta valmistumassa keväällä 2015 Avoimuuteen liittyvä tulkinta: avoimuudessa voi olla aste-eroja ja tietojen avaaminen voi olla säädeltyä

Avoimuuden edistäminen Strategiat, politiikat Toimintamallit, sopimukset, prosessit Käytetyt palvelut Kannustimet, meritoituminen Tulokset … Data Menetelmät

Avoimuuden hyödyntäminen Strategiat, politiikat Toimintamallit, sopimukset, prosessit Käytetyt palvelut Kannustimet, meritoituminen Tulokset … Data Menetelmät

Vaikuttavuuden mittaaminen, mittauskohde-näkökulma: indikaattori-esimerkkejä Twiittaus Wikipedia-artikkeli Lehtikirjoitus Facebook-Like g+1 GitHub-lataus Vlogi Amazon-arvio SourceForge-lataus Youtube-lataus SlideShare-lataus Näkyvyys Pdf-lataus PLOSista GooglePlay-arvio Blogikirjoitus ResearchGate-tallennus Sitaatti Wikipediassa LinkedIn-katselu CiteULike Sitaatti ammattijulk. Mendeley-tallennus Scopus-sivuklikkaus Sitaatti tieteel. julk. Mukana kirjasto- kokoelmissa Hyödyntäminen Mittarityyppi: Käyttö Keskustelu Merkintä Sitaatti ”Äänestäminen”

Vaikuttavuuden mittaaminen, mittaustapa-näkökulma: indikaattori-esimerkkejä Scopus-sivuklikkaus LinkedIn-katselu Pdf-lataus PLOSista GitHub-lataus SourceForge-lataus Youtube-lataus CiteULike Sitaatti ammattijulk. SlideShare-lataus Kvantitatiivinen ResearchGate Mendeley-tallennus Sitaatti tieteel. julk. Mukana kirjasto- kokoelmissa Twiittaus GooglePlay-arvio Facebook-Like Amazon-arvio g+1 Sitaatti Wikipediassa Wikipedia-artikkeli Vlogi Blogikirjoitus Lehtikirjoitus Sisällöllinen Mittarityyppi: Käyttö Keskustelu Merkintä Sitaatti ”Äänestäminen”

Indikaattorien taulukointi ohjeistuksen tueksi, esimerkkimalli Mitä mitataan? Miten mitataan? Ominaisuus Mittari Tunnettuus (1-3) Hyödyntäminen (1-3) Kvantitatiivinen (1-3) Sisällöllinen (1-3) Läpinäkyvyys (1-3) Yhteensä Mendeley-tallennus 2 3 12 SlideShare-lataus 1 10 Maininta blogi-kirjoituksessa 9 Sitaatti tieteel. artikkelissa Maininta twiitissä 8

Tutkimusdata = raakadata - projektidata Kansalliset tietovarannot Julkisen vallan ratkaisut ja yhteistyö Tietovarannot Hyödyntämistarpeet laajenevat Toimijan strateginen sitoutuminen Hallinnointitarve kasvaa (Itsenäiset) tutkimusaineistot Saatavuutta ja käytettävyyttä tukevat prosessit ja toimintamallit Tutkimusdata = raakadata - projektidata Mitä näistä voidaan & halutaan mitata?

Avoimia kysymyksiä Tutkimuksen näkyvyys: missä kontekstissa / käyttäjäryhmässä? Painotus? Tutkimuksen hyödyntäminen: miten? Painotus? Jatkotutkimuksessa? Tieteen sisällä? Kaupallisesti, liiketoiminnassa? Sosiaalisesti? Yhteiskunnallisesti? … Uudet indikaattorit, haasteita: Läpinäkyvyys? Luotettavuus? Yhteismitallisuus? Painotukset? ”Sitä saa, mitä mittaa” Mekanistinen vs. sisällöllinen lähestymistapa Kohteet Data: mitä tarkoitetaan datalla tässä yhteydessä? tutkimusaineistoja? – tietovarantoja? Menetelmät: mitä tarkoittaa avoimuus menetelmien tapauksessa? Avoimen lähdekoodin ohjelmistot yksi esimerkki, mutta mitä muuta? Standardit, rajapinnat? Menetelmien julkisuus on perinteisesti keskeinen osa tieteen sisäistä kontrollia. Tietyllä tasolla menetelmät aina julkisia Terminologiaa: tutkimusväline (esim. Weka) - tutkimusmenetelmä (esim. kysely) - tutkimusmetodi (esim. tilastollinen analyysi)?

TEKNOLOGIASTA TULOSTA Päätöskalvo ei ole pakollinen VTT:n sisäisissä esityksissä.