libor coufal - australská národní knihovna 2 - přednáška praha 22.3.2017
TRANSCRIPT
![Page 1: Libor Coufal - Australská národní knihovna 2 - přednáška Praha 22.3.2017](https://reader035.vdocuments.site/reader035/viewer/2022081604/58e4cbad1a28abc24e8b6419/html5/thumbnails/1.jpg)
DIGITÁLNÍ SBÍRKY A JEJICH DLOUHODOBÉ UCHOVÁVÁNÍ V NÁRODNÍ KNIHOVNĚ AUSTRÁLIE
LIBOR COUFAL
![Page 2: Libor Coufal - Australská národní knihovna 2 - přednáška Praha 22.3.2017](https://reader035.vdocuments.site/reader035/viewer/2022081604/58e4cbad1a28abc24e8b6419/html5/thumbnails/2.jpg)
Digitální uchovávání „vzhůru nohama“
![Page 3: Libor Coufal - Australská národní knihovna 2 - přednáška Praha 22.3.2017](https://reader035.vdocuments.site/reader035/viewer/2022081604/58e4cbad1a28abc24e8b6419/html5/thumbnails/3.jpg)
Průkopnická léta• 80. léta – „elektronické“ materiály na PN• 1994 – pozice pro „elektronické uchovávání“• 1996 – Pandora • 1997/98 – IT projekt „Digital Services“– digitální úložiště (DOSS)– DCM
![Page 4: Libor Coufal - Australská národní knihovna 2 - přednáška Praha 22.3.2017](https://reader035.vdocuments.site/reader035/viewer/2022081604/58e4cbad1a28abc24e8b6419/html5/thumbnails/4.jpg)
Průkopnická léta• 2006/7 – Australian Partnership for
Sustainable repositories– Automated Obsolescence Notification System
(AONS)• 2007/8 – interní projekty– Mediapedia, Prometheus, Configulator
![Page 5: Libor Coufal - Australská národní knihovna 2 - přednáška Praha 22.3.2017](https://reader035.vdocuments.site/reader035/viewer/2022081604/58e4cbad1a28abc24e8b6419/html5/thumbnails/5.jpg)
Průkopnická léta• 2008 – interní hodnocení (DRAMBORA, TRAC)• 2009 – profilace digitálních fondů• 2010/11 – „preservation intents“• 2012 – DLIR• 2016 – Preservica v provozu
![Page 6: Libor Coufal - Australská národní knihovna 2 - přednáška Praha 22.3.2017](https://reader035.vdocuments.site/reader035/viewer/2022081604/58e4cbad1a28abc24e8b6419/html5/thumbnails/6.jpg)
Strategický plán 2015 - 19• Strategické cíle, priority a implementační rámec• Typy digitálních materiálů:
– Původní digitální• Publikovaný• Nepublikovaný
– Digitalizovaný• Interně• Externě
– Původní digitální vytvořený• Interně/na zakázku
– Sklizený webový materiál
![Page 7: Libor Coufal - Australská národní knihovna 2 - přednáška Praha 22.3.2017](https://reader035.vdocuments.site/reader035/viewer/2022081604/58e4cbad1a28abc24e8b6419/html5/thumbnails/7.jpg)
Hodnocení rizik• Faktory– Jedinečnost • Existuje ve fyzické podobě?
– Charakteristiky• Jak/kým vytvořen?• Standardy, kontrola kvality?• Uniformita
![Page 8: Libor Coufal - Australská národní knihovna 2 - přednáška Praha 22.3.2017](https://reader035.vdocuments.site/reader035/viewer/2022081604/58e4cbad1a28abc24e8b6419/html5/thumbnails/8.jpg)
TYPECHARACTERISTICS
Input – source item Output – digital item Preservation risk
Born-digital –
Internally-created or
commissioned
No physical equivalent Created to a defined standard
Agreed preservation format
Uniform format(s)
Quality assurance/control in place
Low – based on homogeneity and
control over creation
Born-digital – Published No physical equivalent (often)
Creation outside NLA control
Various file formats (not necessarily
‘well-formed’)
Some container formats
Possibly complex objects
Quality assurance/control uncertain
Content may exist in multiple
operating system versions
Prone to Technological Protection
Measures (TPMs) such as encryption
or password protection to inhibit
access and copying
Preservation may be mandated by
legislation (e.g. legal deposit) or
there may be a reputational risk if
we do not fulfil our preservation
commitment
Possibly high - based on
heterogeneity and lack of control
over creation
Expected or known issues with
specific file formats (e.g.
RealMedia)
Preservation action likely to be
required sooner in the lifecycle. No
business decision has been taken
on ‘normalising’ formats on ingest
(i.e. ‘format shift’).
![Page 9: Libor Coufal - Australská národní knihovna 2 - přednáška Praha 22.3.2017](https://reader035.vdocuments.site/reader035/viewer/2022081604/58e4cbad1a28abc24e8b6419/html5/thumbnails/9.jpg)
Hodnocení rizikRiziko pro digitální uchování Typ materiálu
Vysoké Původní digitální – publikovanýPůvodní digitální – nepublikovanýPůvodní digitální – webový materiál
Nízké Původní digitální – vytvořený interně/na zakázkuDigitalizovaný – interněDigitalizovaný - externě
![Page 10: Libor Coufal - Australská národní knihovna 2 - přednáška Praha 22.3.2017](https://reader035.vdocuments.site/reader035/viewer/2022081604/58e4cbad1a28abc24e8b6419/html5/thumbnails/10.jpg)
Strategický cíl 1• Uložit na řízeném úložišti a zajistit uchování na
úrovni bitů– Všechny digitální objekty uloženy na úložišti– Mnohonásobné kopie– Řízení úložiště pro případ havárie– Pravidelná migrace úložných médií– Zabezpečení úložiště– Procesy pro pravidelnou verifikaci kontrolních součtů
![Page 11: Libor Coufal - Australská národní knihovna 2 - přednáška Praha 22.3.2017](https://reader035.vdocuments.site/reader035/viewer/2022081604/58e4cbad1a28abc24e8b6419/html5/thumbnails/11.jpg)
Strategický cíl 2• Správa digitálních objektů v LTP systému– „Ingest“ do produkční verze LTP– Pravidelná analýza a vykazování složení a stavu
digitálních sbírek– Monitorování rizik pro dlouhodobé uchovávání– Logická ochrana sbírek (např. formátová migrace)
podle potřeby
![Page 12: Libor Coufal - Australská národní knihovna 2 - přednáška Praha 22.3.2017](https://reader035.vdocuments.site/reader035/viewer/2022081604/58e4cbad1a28abc24e8b6419/html5/thumbnails/12.jpg)
Strategický cíl 3• Digitální uchovávání je robustní, spolehlivé a
škálovatelné– Integrace LTP s ostatními knihovními systémy– Digitální uchovávání jako součást běžných business
procesů, po boku ostatních funkcí pro správu fondů
![Page 13: Libor Coufal - Australská národní knihovna 2 - přednáška Praha 22.3.2017](https://reader035.vdocuments.site/reader035/viewer/2022081604/58e4cbad1a28abc24e8b6419/html5/thumbnails/13.jpg)
Strategická priorita 1• Původní digitální materiál– Publikovaný– Nepublikovaný– Pandora
• Plně implementovat strategické cíle 1 (bitová ochrana) + 2 (logická ochrana)
![Page 14: Libor Coufal - Australská národní knihovna 2 - přednáška Praha 22.3.2017](https://reader035.vdocuments.site/reader035/viewer/2022081604/58e4cbad1a28abc24e8b6419/html5/thumbnails/14.jpg)
Strategická priorita 2• Zvukový materiál– Digitalizovaný (interně + externě)– Původní digitální
• Plná implementace strategického cíle 1 (bitová ochrana)
• Ingest do LTP, zbytek logické ochrany po roce 2019
![Page 15: Libor Coufal - Australská národní knihovna 2 - přednáška Praha 22.3.2017](https://reader035.vdocuments.site/reader035/viewer/2022081604/58e4cbad1a28abc24e8b6419/html5/thumbnails/15.jpg)
Strategická priorita 3• Digitalizovaný materiál, původní digitální
vytvořený interně, webový materiál (mimo Pandory)
• Plná bitová ochrana (Priorita 1)• Správa v DCM• Logická ochrana mimo LTP (pokud potřeba)– Přehodnocení po 2019
![Page 16: Libor Coufal - Australská národní knihovna 2 - přednáška Praha 22.3.2017](https://reader035.vdocuments.site/reader035/viewer/2022081604/58e4cbad1a28abc24e8b6419/html5/thumbnails/16.jpg)
Q3 Q4 Q1 Q2 Q3 Q4 Q1 Q2 Q3 Q4 Q1 Q2
Ebooks and E-serialsMusic ScoresMapsPhysical CarriersPANDORASimple UnpublishedComplex Unpublished
Monthly Activity ReportsAnnual QA AuditAnnual Report
Monitor Level of SupportMonitor Preservation RisksFormat Obsolescence WatchCollection Health ReportsPreservation Treatments
Not Started In Progress Delayed BAU
Bit-level Preservation
Maintain Long-term Usability
Digital Preservation Road Map 2016 - 2019
2016/17 2017/18 2018/19
Ingest into Preservica
![Page 17: Libor Coufal - Australská národní knihovna 2 - přednáška Praha 22.3.2017](https://reader035.vdocuments.site/reader035/viewer/2022081604/58e4cbad1a28abc24e8b6419/html5/thumbnails/17.jpg)
Bitová ochrana
Policy on bit-level preservation of digital collection material • Redundance a diverzifikace– Nejméně 3 kopie– Nejméně 2 typy úložných médií– Nejméně jedna kopie v jiné lokalitě
![Page 18: Libor Coufal - Australská národní knihovna 2 - přednáška Praha 22.3.2017](https://reader035.vdocuments.site/reader035/viewer/2022081604/58e4cbad1a28abc24e8b6419/html5/thumbnails/18.jpg)
Bitová ochrana• Kontrola integrity– Všechny soubory musí mít
• Kontrolní součet• Časové razítko vytvoření součtu
– Kontrolní součty musí být chráněny proti• Ztrátě• Poškození• Úmyslné změně
– Integrita všech souborů musí být pravidelně kontrolována
![Page 19: Libor Coufal - Australská národní knihovna 2 - přednáška Praha 22.3.2017](https://reader035.vdocuments.site/reader035/viewer/2022081604/58e4cbad1a28abc24e8b6419/html5/thumbnails/19.jpg)
Bitová ochrana• Audit– Měsíční výkazy o aktivitě (IT, kontola DiP)
• Počet nových souborů a kontrolních součtů• Počet zkontrolovaných souborů a výsledky• Podniklé kroky v případě nesrovnalostí
– Roční audit na reprezentativním vzorku (DiP za asistence IT)– Roční zpráva (DiP, pro CSG)
• Souhrn aktivit v průběhu roku• Výsledky ročního audit
![Page 20: Libor Coufal - Australská národní knihovna 2 - přednáška Praha 22.3.2017](https://reader035.vdocuments.site/reader035/viewer/2022081604/58e4cbad1a28abc24e8b6419/html5/thumbnails/20.jpg)
Preservica• Integrace se systémem eDeposit• Ingest plně automatizován
– Extrakce metadat a souborů přes API– Vytvoření SIP
• Hierarchie• Mapování metadat do XIP + DC• Použití původního kontrolního součtu
– Vyexportování SIP na síťový disk monitorovaný Preservicou• 1x týdně, zpoždění 3 měsíce• Flexibilní, konfigurovatelný rámec
![Page 21: Libor Coufal - Australská národní knihovna 2 - přednáška Praha 22.3.2017](https://reader035.vdocuments.site/reader035/viewer/2022081604/58e4cbad1a28abc24e8b6419/html5/thumbnails/21.jpg)
Preservica• Funkční
– e-knihy, e-seriály, e-hudebniny• Připravuje se
– Synchronizace po ingestu (duben/květen 2017)– e-mapy (květen/červen 2017)– Digitální archivy (květen/červen 2017)
• Integrace s ArchivesSpace– Publikace na pevných nosičích (červenec 2017)– Pandora (červen 2018)
• Integrace s Pandas
![Page 22: Libor Coufal - Australská národní knihovna 2 - přednáška Praha 22.3.2017](https://reader035.vdocuments.site/reader035/viewer/2022081604/58e4cbad1a28abc24e8b6419/html5/thumbnails/22.jpg)
![Page 23: Libor Coufal - Australská národní knihovna 2 - přednáška Praha 22.3.2017](https://reader035.vdocuments.site/reader035/viewer/2022081604/58e4cbad1a28abc24e8b6419/html5/thumbnails/23.jpg)
Logická ochrana• Neidentifikované formáty– Vysoké riziko akce
• Nejednoznačně/nesprávně identifikované formáty– Potenciálně vysoké riziko akce
• (Interní) podpora pro souborové formáty– Schopnost „zobrazit“ soubory v daném formátu
![Page 24: Libor Coufal - Australská národní knihovna 2 - přednáška Praha 22.3.2017](https://reader035.vdocuments.site/reader035/viewer/2022081604/58e4cbad1a28abc24e8b6419/html5/thumbnails/24.jpg)
Podpora souborových formátů• Světově unikátní empirický výzkum
– Mapování podpory formátů v SW aplikacích– Empirické testování kvality
• Hlavní součást znalostní báze NLA • Od 2012/13, 1 pracovník (60 – 70 % úvazku)• > 12 tis. Záznamů• Implementace
– Pracovní verze Excel– Import dat do graph DB
![Page 25: Libor Coufal - Australská národní knihovna 2 - přednáška Praha 22.3.2017](https://reader035.vdocuments.site/reader035/viewer/2022081604/58e4cbad1a28abc24e8b6419/html5/thumbnails/25.jpg)
Podpora souborových formátů• Proces– Prioritizace formátů podle typu• (Pravděpodobnost) zastoupení ve fondu
– Výzkum a dokumentace formátu– Výběr a dokumentace aplikací– Mapování podpory formátů v dané aplikaci– Testování kvality podpory
![Page 26: Libor Coufal - Australská národní knihovna 2 - přednáška Praha 22.3.2017](https://reader035.vdocuments.site/reader035/viewer/2022081604/58e4cbad1a28abc24e8b6419/html5/thumbnails/26.jpg)
Podpora souborových formátů• Využití– Obsolescence Watch– Collection Health Report– Indikace migračních možností
• Data budou zveřejněna
![Page 27: Libor Coufal - Australská národní knihovna 2 - přednáška Praha 22.3.2017](https://reader035.vdocuments.site/reader035/viewer/2022081604/58e4cbad1a28abc24e8b6419/html5/thumbnails/27.jpg)
Certifikace# Rok Proces
1 2018/19 Samo-hodnocení podle Data Seal of Approval
2 2018/19 Získání Data Seal of Approval
3 2022/23 Samo-hodnocení podle ISO 16363
4 2023/24 Úpravy na základě samo-hodnocení
5 2025/26 Akreditace