Henri Mäkilä Melindan kokemukset vaihtoon -tilaisuus

Esitys aiheesta: "Henri Mäkilä Melindan kokemukset vaihtoon -tilaisuus"— Esityksen transkriptio:

1 Henri Mäkilä Melindan kokemukset vaihtoon -tilaisuus 22.8.2013
Kuinka toimitaan kun… Henri Mäkilä Melindan kokemukset vaihtoon -tilaisuus

2 Tavoitetilanne Kunkin kirjaston valmistelutyöt aloitetaan KK:ssa 1,5 – 2 kuukautta ennen loadia Koeloadit, poiminta-asetukset ja aineistorajaukset valmiina viimeistään viikkoa ennen aikataulussa mainittua päivää Paikalliskannan aineiston poiminta aikataulun mukaisen viikon torstaina n. klo 10 (varapäivä perjantai) Loadien ajastus viikonlopuksi Virheraporttien ajo heti seuraavan viikon maanantaina Replikoinnin käynnistys ja Aleph-luetteloinnin aloitus tiistaina/keskiviikkona

3 Valmistelut KK:ssa Sovitaan low tag ja lisätään Alephin asetuksiin tuki sille Luodaan pääkäyttäjätunnukset ja -oikeudet Valmistellaan replikointiasetukset ja saatavuustietojen haku Määritellään aineisto- ja kokoelmarajaukset poimintaa varten Määritellään kenttien muutos- ja poistoehdot ja muut mahdolliset kenttäkohtaiset lataussäännöt Ajetaan koeloadit ja tietueiden tarkistusrutiinit ja analysoidaan tulokset Hyväksytyn koeloadin jälkeen pilkotaan aineisto eriksi ja ajastetaan ne

4 Koeloadit Yritetään paikallistaa aineistossa mahdollisesti esiintyvät systemaattiset korjaustarpeet Esim. toistuva kenttäsisältö, jota ei haluta Melindaan Varmistetaan merkistöjen oikeellisuus Varmistetaan loadin asetukset Käsitelläänkö oikeita kenttiä? Tehdäänkö niille oikeat asiat? Aineistojakauman analyysi: uudet/päivittyvät tietueet Onko Melindaan tulossa epätavallisen paljon tietueita uusina? Ovatko nämä tosiaan uusia vai tuplia?

5 Loadin jälkeen Parhaassa tapauksessa... Tai sitten...
Ajetaan ja analysoidaan tuplakontrolli- ja virheraportit Käynnistetään replikointi Aloitetaan Aleph-luettelointi! Tehdään virheraporttien mukaiset aineistokorjaukset Tarvittaessa säädetään replikoinnin asetuksia Tai sitten... Aletaan selvittää, mikä meni pieleen

6 Entäs jos... ajastus epäonnistuu?
Alephin ydinosat ovat yli 30 vuotta vanhoja, joten hitaus on järjestelmän tavaramerkki  viikonlopun loadit eivät ehkä valmistu niille varatussa ajassa Operaattorin möhläyskin mahdollinen: päiväys ohjelmoitu väärin, skriptin suoritusoikeudet vajaat, syntaksivirhe Ratkaisu: Selvitetään, mitä jäänyt lataamatta, ja pyritään tekemään lisäloadit seuraavina päivinä/öinä + ennakointi isojen aineistojen kohdalla Paitsi että: Keskellä työpäivää voidaan ladata vain pieniä aineistoja replikoinnin tukkeutumisen vuoksi, arkiöinä ~ tietuetta/yö

7 Entäs jos... koko haluttu aineisto ei sittenkään lataudu?
Kokoelmien määrittely puutteellinen? Kokoelmien nimilistassa kirjoitus/kopiointivirhe? Ääkköselliset kokoelmanimet sotkevat käsittelyn jossain? Operaattorin virhe: määrätty pois jätettäväksi koko tietue, vaikka piti poistaa kenttä? Ratkaisu: Selvitetään, mitä jäänyt puuttumaan  näille kokoelmille ja tietueille uusi erillinen poiminta ja load + virhetietueiden selvittely Paitsi että: Kuulostaa yksinkertaisemmalta kuin ehkä oikeasti onkaan

8 Entäs jos... latautuu aineistoa, joka haluttiin rajata pois?
Kokoelmien/kenttien määrittelyvirheet? Operaattorin virhe: unohdettu määrätä tietue pois jätettäväksi tai asetettu ehdot väärin (pitäisi paljastua jo koeloadeissa) Ratkaisu: Uusina tulleille tietueille voidaan lisätä jälkiajona kenttä STA Deleted (tietue poistuu näkyvistä, mutta ei kannasta) Paitsi että: Päivittyneet tietueet, joilla useita low tageja  mietittävä tapauskohtaisesti

9 Ja mitäs siinä tapauksessa että...
latautuu kokonaan väärä aineisto? Esim. koeloadien aineisto mennyt vahingossa sisään varsinaisessa loadissa Seurauksena mittavia jälkiselvittelyjä, poistoja ja uusintaloadeja Ratkaisu: KK:ssa lisätty tarkistuksia ja oikean aineiston tunnistamista helpottavia toimia  ei pitäisi olla enää ongelma Mutta: Tietokannan aineiston siirto toiseen kantaan on yhä paljon pikkutarkkaa manuaalista työtä vaativa operaatio  virhealttius yleisesti ottaen edelleen suuri

10 Muita havaittuja ongelmia
Replikointi ei toimi / toimii väärin Yleensä helpompi korjattava kuin aineisto-ongelmat Pluginien asetuksia voidaan vaihtaa lennossa, uudelleenkäynnistys mahdollista myös keskellä päivää (automaattisesti iltaisin klo 22 ) Kaikkeen toivottuun käsittelyyn ei ole vielä valmista pluginia Hakusanoilla ei löydy äskettäin ladattuja teoksia Jo n tietueen lataus Alephiin voi aiheuttaa useiden vuorokausien viivästymän hakusanojen indeksointiin Nopeuttamiseen niukasti keinoja

11 Muita havaittuja ongelmia
Alephin tietueentarkistin kaatuu selittämättömästi Ikävä bugi/ominaisuus Alephissa, syynä esim. yksittäinen tietue, jossa luetteloitu sisältöä väärään kenttään  tarkistin sekoaa Hidas ja työläs korjattava, viallinen tietue pitää etsiä käsin haarukoimalla Saatavuustiedot eivät näy Asennuksessa pientä vikaa, yleensä nopeasti korjattavissa Kirjaston nimi/käännös väärin Vaihdetaan OPAC Enhancerista