JULKAISUFOORUMI 1. paneelikokous Tammikuu 2014. Tausta Tieteelliset julkaisut yliopistojen rahoitusperusteena vuodesta 2007, mutta ratkaisevaa määrä,

Esitys aiheesta: "JULKAISUFOORUMI 1. paneelikokous Tammikuu 2014. Tausta Tieteelliset julkaisut yliopistojen rahoitusperusteena vuodesta 2007, mutta ratkaisevaa määrä,"— Esityksen transkriptio:

1 JULKAISUFOORUMI 1. paneelikokous Tammikuu 2014

2 Tausta Tieteelliset julkaisut yliopistojen rahoitusperusteena vuodesta 2007, mutta ratkaisevaa määrä, ei laatu Suomen yliopistojen rehtorien neuvoston työryhmän suunnitelma laadunarvioinnin kehittämiseksi 2010: – Viittauksiin perustuva laadunarviointi on vakiintunut luonnon- ja lääketieteissä, mutta se kattaa huonosti humanististen alojen, yhteiskuntatieteiden ja osin teknisten tieteiden tutkimusta – Norjassa (2005) ja Tanskassa (2009) toteutettu julkaisufoorumien tasoluokitus kattaa kansainvälisen ja kansallisen julkaisutoiminnan, sekä lehtiartikkelien lisäksi konferenssijulkaisut ja kirjat Tieteellisten seurain valtuuskunta perusti OKM:n rahoituksella Julkaisufoorumi-hankkeen 2010

3 Ohjausryhmä TSV:n hallituksen nimittämä ohjausryhmä vastaa paneelien asettamisesta sekä arviointityön ohjeistuksesta ja valvonnasta: Puheenjohtaja: Kansleri Ilkka Niiniluoto (TSV) Jäsenet: Professori Risto Heiskala (TaY) Sovellussuunnittelija Jyrki Ilva (KK) Yksikön johtaja Susan Linko (SA) Rehtori Matti Manninen (UNIFI) Professori Kaisa Miettinen (JY) Professori Tiina Onikki-Rantajääskö (HY) Opetusneuvos Olli Poropudas (OKM) Kehityspäällikkö Tuija Raaska (CSC) Professori Heimo Saarikko (HY) Professori Hannu Sariola (HY) Professori Timo Tokola (ISY) Ylikirjastonh. Kimmo Tuominen (SYN) Sihteeristö: Toiminnanjohtaja, professori Aura Korppi-Tommola (TSV) Toiminnanjohtaja Liisa Savunen (UNIFI) Suunnittelija Janne Pölönen (TSV) Suunnittelija Anna-Sofia Ruth (TSV)

4 Paneelit 23 tieteenaloittaista asiantuntijapaneelia vastaavat julkaisufoorumien arvioinnista. Yliopistoilta, valtion tutkimuslaitoksilta, tieteellisiltä seuroilta ja tiedeakatemioilta saatiin 553 ehdotusta paneelien jäseniksi kaudelle 2014-2016. Paneeleihin nimitettiin kaikkiaan 203 henkilöä, joista 101 on paneelien jäseninä kaudella 2010-2013 toimineita ja 102 uusia jäseniä. Paneelien puheenjohtajina jatkavat nykyisten paneelien puheenjohtajat tai varapuheenjohtajat, kolmessa paneelissa nykyisen paneelin jäsen

5 Tavoitteet Laadunarviointia tukeva kaikki tieteenalat kattava tieteellisten julkaisufoorumien tasoluokitus, joka on tarkoitettu suurten julkaisumäärien, ei yksittäisten tutkijoiden arviointiin. – Kannustaa tutkijoita julkaisemaan parhaat tieteelliset kirjoituksensa alansa johtavilla kotimaisilla ja ulkomaisilla julkaisufoorumeilla – Yhdistettynä julkaisutietoihin tuottaa tietoa tutkimusorganisaatioiden ja -alojen julkaisutoiminnasta – 2015 alkaen tieteellisten julkaisujen laatua ilmaiseva indikaattori OKM:n käyttämään yliopistojen perusrahoitusmalliin

6 Rahoitusmalli 2015? Rahoitusmallityöryhmän ehdotus valmistuu tammikuussa Tieteellisten julkaisujen perusteella jaetaan 13 % perusrahoituksesta (n. 200 milj. euroa). – Julkaisuja painotetaan julkaisutyypin ja Jufo-luokan perusteella – Yhteisjulkaisuja ei ositeta? Taso 1Tasot 2 ja 3 Muut Vertaisarvioitu artikkeli13 0,1 Tieteellinen erillisteos412 0,4 Muut artikkelit0,1 Muut erillisteokset0,4

7 Tasoluokitus Ensimmäinen Julkaisufoorumi-luokitus valmistui 2011 Vuosittain voidaan lisätä uusia kanavia perustasolle 1: luokitusta on täydennetty 2012 ja 2013. Tasoluokitus kattaa jo lähes 27 000 kotimaista ja ulkomaista julkaisukanavaa: Kaikki tasoluokitukset arvioidaan uudelleen 3 vuoden välein: ensimmäinen päivitysarviointi tapahtuu 2014. YhteensäTasoluokka 3210 Lehti/sarja2206911373025162701637 Konferenssi268804210591587 Kirjakustantaja199201301142720

8 Kriteerit tasolle 1 Tasolle 1 voidaan luokitella tieteellisen julkaisukanavan määritelmän täyttäviä kotimaisia ja ulkomaisia lehtiä, sarjoja ja kirjakustantajia: – erikoistuneet tieteellisten tutkimustulosten julkaisemiseen – asiantuntijoista koostuva toimituskunta – tieteelliset julkaisut käyvät läpi koko käsikirjoitukseen kohdistuvan vertaisarvioinnin Mutta ei jos: – kyseessä on yliopiston väitöskirjasarja – yli puolet (1/2) arvioijista ja/tai kirjoittajista edustaa samaa tutkimusorganisaatiota (yliopistojen ja laitosten omat sarjat) – tieteellinen taso tai merkitys kyseenalainen

9 Kriteerit tasolle 2 Eri tieteenalojen johtavia tieteellisiä julkaisukanavia, joissa tutkijat eri maista julkaisevat parhainta tutkimustaan: – pääsääntöisesti kansainvälisiä tieteellisiä julkaisukanavia, joiden toimitus-, kirjoittaja- ja lukijakunta edustaa eri kansallisuuksia. Valitaan paneelin tason 2 kiintiön puitteissa ne julkaisukanavat, joihin tasokkaimmat julkaisut valikoituvat laajan kilpailun ja vaativan vertaisarvioinnin seurauksena. Vaikuttavuutta ja arvostusta alan kansainvälisessä tiedeyhteisössä voidaan tieteenalasta riippuen arvioida viittaus- ja luokitusindikaattorien perusteella. – Yksinomaan katsausartikkeleita julkaisevien lehtien osuus ei saa muodostua liian suureksi.

10 Suomen- ja ruotsinkieliset kanavat Ihmistieteiden paneeleissa 14 ja 16-23 voidaan luokitella tasolle 2 myös johtavia suomen- tai ruotsinkielisiä julkaisukanavia, jotka kattavat tieteenalansa suomalaisen yhteiskunnan, kulttuurin ja historian erityispiirteitä käsittelevää tutkimusta mahdollisimman laajasti  Kriteereitä on täsmennetty siten, että tasolle 2 voidaan hyväksyä suomen- tai ruotsinkielisiä kanavia, joissa julkaisemista pidetään yhtä tärkeänä meriittinä kuin julkaisemista tasolle 2 luokitelluissa vieraskielisissä julkaisukanavissa Tasolle 2 valitaan korkeatasoisimmat ja laaja-alaisimmat suomen- ja ruotsinkieliset julkaisukanavat niiltä aloilta, joilla on perusteltua tuottaa ja julkaista uutta tieteellistä tietoa kotimaisilla kielillä. Ihmistieteiden paneelit tekevät aloista esityksen ohjausryhmälle ja paneelien puheenjohtajat valitsevat tason 2 kriteerit täyttävät julkaisukanavat konsensuspäätöksellä.

11 Kriteerit tasolle 3 Tasolle 3 voidaan luokitella eri alojen korkeatasoisimmat julkaisusarjat: – tutkimus edustaa alansa korkeinta tasoa ja sen (esim. viittausindikaattoreilla mitattu) vaikuttavuus on erittäin suuri – kattavat omaa tieteenalaansa laajasti, eivätkä rajoitu kapean erikoistematiikan käsittelyyn – kirjoittaja- ja lukijakunta on kansainvälistä ja toimituskunnissa toimivat alan johtavat tutkijat – julkaisemista näissä lehdissä ja sarjoissa arvostetaan alan kansainvälisessä tutkijayhteisössä erittäin korkealle Paneelit tekevät ehdotukset tasolle 3 luokiteltavista julkaisusarjoista ja paneelien puheenjohtajat vahvistavat luokituksen.

12 Julkaisuvolyymiin perustuvat tason 2 ja 3 kiintiöt 2011 tasolle 2 voitiin kaikissa paneeleissa luokitella 20 % lehti/sarja-nimekkeiden lukumäärästä – kanava joka julkaisee 10 tai 10000 artikkelia vuodessa vei paneelin tason 2 kiintiöstä yhtä suuren osan 2014 tasojen 2 ja 3 kiintiöt määrittyvät paneelikohtaisesti julkaisukanavien koon perusteella  tasolle 2 luokiteltujen lehti/sarja-nimekkeiden yhteenlaskettu julkaisuvolyymi saa olla enintään 20 % paneelin luetteloon kuuluvien tason 1 kriteerit täyttävien lehti/sarja-nimekkeiden yhteenlasketusta julkaisuvolyymista.  tasolle 3 luokiteltujen julkaisusarjojen yhteenlaskettu julkaisuvolyymi saa olla enintään 25 % paneelin luetteloon kuuluvien tasolle 2 luokiteltujen lehti/sarja-nimekkeiden yhteenlasketusta julkaisuvolyymista. Sihteeristö tuottaa julkaisuvolyymitiedot ja arviointisivusto hoitaa tilastoinnin.

13 Vertailu Tanskan ja Norjan luokitukseen Julkaisufoorumi-luokkiin 2 ja 3 sijoittuvien julkaisujen osuus yliopistojen vuoden 2011 julkaisuista käytettäessä julkaisufoorumin, Tanskan ja Norjan luokitusta

14 Vertailu Tanskan ja Norjan luokitukseen Tasoluokan 2 osuus eri paneelien lehtien ja sarjojen nimikkeistä käytettäessä julkaisufoorumipohjaista (JUFO) ja volyymipohjaista (Tanska ja Norja) luokittelua

15 Päivitysarviointi Kaikki tasoluokitukset arvioidaan kolmen vuoden välein (2014) Maaliskuu (2. paneelikokous: päätös lehtien/sarjojen jaosta paneelien kesken, paneelien 14, 16-23 ehdotukset aloiksi, joilla perusteltua luokitella suomen- tai ruotsinkielisiä tasolle 2) Toukokuu (Paneelien 14 ja 16-23 puheenjohtajien kokous: päätös suomen- ja ruotsinkielisten kanavien luokittelusta tasolle 2) Syyskuu (3. paneelikokous: päätökset tasolle 2 luokiteltavista kirjakustantajista) Marraskuu (4. paneelikokous: päätökset tasolle 2 ja 3 luokiteltavista lehdistä ja sarjoista) Marras-joulukuu (Puheenjohtajakokous: luokitusten vahvistaminen)

16 Lehtien ja sarjojen jako paneelien kesken 2011 tasoille 1-3 luokitelluista lehdistä ja sarjoista n. 30 % esiintyi useamman kuin yhden paneelin luettelossa. 2014 lehdet ja sarjat jaetaan siten, että kukin lehti/sarja-nimeke esiintyy vain yhden paneelin luettelossa – Paneelien työmäärä vähenee n. 30 %, vältetään päällekkäistä työtä – Päästään paneelien välisten ristiriitaisten luokitusten ongelmasta – Vastuu tasoluokituksista on helpompi määrittää – Samaa julkaisukanava ei vaikuta usean paneelin tasojen kiintiöihin Yleistieteelliset lehdet, joita ei voida riittävän hyvin perustein sijoittaa minkään yksittäisen paneelin luetteloon, sijoitetaan omaan yleistieteellisten julkaisusarjojen luetteloon Sihteeristö valmistaa ehdotuksen ja paneelit päättävät

17 Täydennysarviointi Vuosittain voidaan lisätä uusia julkaisukanavia tasolle 1 Muutos aikaisempaan: arviointi 4 jaksossa Paneelien jäsenet voivat lähettää lisäysehdotukset sihteeristölle Puheenjohtaja ja varapuheenjohtaja vastaavat, panelisteja konsultoidaan tarpeen mukaan JaksoLähteet 1.2.-31.3.Julkaisufoorumin ehdotussivu Sihteeristö kartoittaa puuttuvat kanavat (WoS/Scopus, Norja/Tanska) 1.4.-30.5.Julkaisufoorumin ehdotussivu Yliopistojen edellisen vuoden julkaisutiedot 1.6.-30.9.Julkaisufoorumin ehdotussivu 1.10.-31.11.Julkaisufoorumin ehdotussivu

18 Arviointisivusto Arviointityötä tehdään ja valmistellaan kokousten lisäksi pääasiassa arviointisivustolla (https://jfp.csc.fi), joka korvaa aiemmin käytetyt Excel-tiedostot.https://jfp.csc.fi – Mahdollisuus edelleen ladata luettelot julkaisukanavista Excel-tiedostona Uudet paneelien jäsenet saavat käyttäjätunnukset tammikuussa 2014. Tammikuun alusta siirrytään käyttämään Haka-tunnistautumista, eli panelistit voivat jatkossa kirjautua omilla yliopiston tunnuksilla Osa tutkimuslaitoksista ei kuulu Haka-verkostoon: näitä tutkimuslaitoksia edustaville panelisteille luodaan vierailijatunnukset tammikuun aikana. CSC:ltä paneelien käyttöön Adobe Connect neuvotteluhuoneet, joten paneelien jäsenet voivat järjestää etäkokouksia.

19 Arviointisivusto Sivustolla on tällä hetkellä valmiina toiminnallisuudet, jotka mahdollistavat täydennysarvioinnin suorittamisen sekä lehtien ja sarjojen jakamisen paneelien kesken. Maaliskuun kokoukseen mennessä sivustolle lisätään tieteenaloittainen julkaisuvolyymipohjainen tilastointi päivitysarviointia varten. – Bibliografisia ja bibliometrisiä tiedot, www-linkit – Monipuoliset suodatustoiminnot – Perustelut ja muistiinpanot – Julkaisufoorumin ehdotussivun kautta tehdyt perustellut ehdotukset