europeana: status - datenlieferungen - metadaten

EuropeanaStatus / Datenlieferungen / Metadaten

BAM Austria, 11.11.2009

Max KaiserÖsterreichische Nationalbibliothek

Abt. f. Forschung & [email protected]

mailto:[email protected]

Max Kaiser, Österreichische Nationalbibliothek: EuropeanaBAM Austria, Wien, 11.11.2009

Status Quo: Europeana Prototyp

• Europeana Prototyp am 20.11.2008 präsentiert• Ergebnis eines einjährigen Entwicklungsprojekts im Rahmen von

Europeana.Net (eContentplus-Projekt)• Enorme Publizität• Mehr als 4.000 gleichzeitige Nutzer in den ersten Stunden• 10 Mio. Hits / Stunde• Zusammenbruch des Service nach wenigen Stunden wegen

Überlastung…

• Prototyp seit 18.12.2008 wieder online• Wesentlich erweiterte Server-Infrastruktur


Status Quo: Europeana Prototyp

• Ca. 5 Millionen Objekte von mehr als1.000 Institutionen zugänglich

• Features u.a:

• Multilinguale Oberfläche

• Einfache und erweiterte Suche

• Browsing nach Zeitachse

• „My Europeana“

• Aber: Beta-Version!

• Entwicklung zu einem voll ausgebauten Service in den nächsten 2 Jahren

• Technische Implementierung

• Geschäftsmodell

• Digitale Inhalte


Digitale Ressourcen in Europeana

Status Anfang 2009:4,5 Millionen Objekte aus unterschiedlichen Domänen

• 3,500.000 Bilder: Fotos, Gemälde, Zeichnungen, Postkarten, Poster

• 935.000 Textdokumente: Bücher, Zeitungsartikel, Manuskripte, Briefe

• 115.000 Videos: Filme, Dokumentationen, TV-Sendungen

• 13.000 Audio-Dokumente: Digitalisierte Zylinder, Schallplatten, Radioaufnahmen, Feldaufnahmen


Europeana: die nächsten 2 Jahre

• 4 Projekte aus dem eContentplus 2007 Call

• Zusätzliche digitale Inhalte für Europeana: EuropeanaLocal, EFG, Athena, APEnet

• 6 Projekte aus dem eContentplus 2008 Call

• Projektbeginn jeweils Mitte 2009• Zusätzliche digitale Inhalte• Entwicklung der operativen Europeana:

• Europeana v1.0• EuropeanaConnect

• Fertigstellung von Version 1.0 der Europeana bis Juni 2010

• „Rhine Release“• 10 Millionen digitale Objekte bis 2010


Europeana v1.0 und EuropeanaConnect

• „Geschwisterprojekte“: Entwicklung der Komponenten und Services für Europeana

• Projekte ergänzen einander einander

• Projektpläne eng aufeinander abgestimmt

• Europeana v1.0 (http://version1.europeana.eu/web/europeana-project/): • Thematic Network – Koordiniert durch European Digital Library Foundation

• Laufzeit Feb. 2009 – Juli 2011

• 6,2 Mio Euro Gesamtbudget (100% EU-Finanzierung)

• EuropeanaConnect (http://www.europeanaconnect.eu/): • Best Practice Network – Koordiniert durch Österreichische Nationalbibliothek

• Laufzeit Mai 2009 – Okt. 2011

• 5,6 Mio Euro Gesamtbudget (80% EU-Finanzierung)

http://version1.europeana.eu/web/europeana-project/

http://www.europeanaconnect.eu/


Europeana v1.0 und EuropeanaConnect

Europeana v1.0:

• Wartung des Europeana-Prototypen

• Aufbau des Netzwerks von Content Providern

• Entwicklung des Geschäftsmodells

• Sicherstellung der langfristigen Finanzierung der Europeana

• Integrator für verwandte Projekte

• Entwicklung der Kernapplikation für Version 1.0 bis Juni 2010

• Erweiterung der digitalen Inhalte auf 10 Millionen Objekte bis 2010

• Entwicklung einer Europeana API zur Einbindung in andere Applikationen

EuropeanaConnect:

• Entwicklung von Infrastruktur-Komponenten für Europeana

• Entwicklung von neuen Zugangsmöglichkeiten zu Europeana

• Entwicklung des Semantischen Layers für Europeana

• Entwicklung der multilingualen Suche

• Neue Services für BenutzerInnen

• Europeana Lizenz-Framework

• Einbringung einer kritischen Masse von Audio-Inhalten


Athena

APEnet

Biodiversity HeritageLibraries Europe

EUScreen

EuropeanFilmGateway

EuropeanaLocal

EuropeanaTravel

Musical Inst.Museums Online

Judaica Europeana

The European Library

EuropeanaConnect

Europeana v.1.0

Europeana Projekt-Cluster

ArrowPrestoPrime

Europeana


Rhine release Danube release


Europeana Projekte – Gemeinsame Aktivitäten

• Project Coordinators Group

• Content & Partner Group

• IPR Group

• Communications Group

• Technical Group

Europeana Group Homepage www.group.europeana.eu/

http://www.group.europeana.eu/

http://www.group.europeana.eu/


EDL Foundation

Mitglieder: Europäische Dachverbände aus dem Bereich Kulturerbe

• ACE: Association Cinémathèques Européennes

• CENL: Conference of European National Librarians

• CERL: Consortium of European Research Libraries

• EMF: European Museum Forum

• EURBICA: European Regional Branch of the International Council on Archives

• FIAT: International Federation of Television Archives

• IASA: International Association of Sound and Audiovisual Archives

• ICOM Europe: International Council of Museums, Europe

• LIBER: Ligue des Bibliothèques Européennes de Recherche

• MICHAEL: Multilingual Inventory of Cultural Heritage in Europe


EDL Foundation Governance

Advisory & Budgetary roles

Holds legal power & Reports on finance & strategy

Executive Committee

Board of Participants

Council of Content Providers & Aggregators

Up to 6 elected

Up to 9 elected

2 invited observers

Funding & Orientation Group: Commission & Member States


Analyse der gegenwärtigen Europeana-Inhalte

• 70% der Inhalte kommen von 4 Aggregatoren / Providern:• Culture.fr• Bibliothèque nationale de France• Memory of the Netherlands• Staats- und Universitätsbibiothek Göttingen

• 82% der Inhalte kommen aus 4 Ländern:• Frankreich (50 %)• Deutschland (16 %)• Niederlande (8 %)• Großbritannien (8 %)

• 77% der Inhalte sind Bilder

• Text: 20%; Video: 2,5%; Audio: 0,5%

• Die neue Europeana Content-Strategie addressiert diese Punkte


Inhalte in Europeana nach Ländern


Content Provider / Aggregatoren

• Content Provider: Organisation, die digitale Inhalte und Metadaten für Europeana zur Verfügung stellt

• Aggregator: Organisation, die Metadaten (und digitale Inhalte) von einer Gruppe von Content Providern einsammelt und diese an Europeana weiterleitet

• Horizontaler Aggregator: sammelt Inhalte quer über Domänen• Nationale und regionale Aggregatoren• Z.B. Kulturpool.at

• Vertikaler Aggregator: sammelt Inhalte einer bestimmten Domäne• Kann auf regionaler, nationaler oder internationaler Ebener arbeiten• Z.B. TheEuropeanLibrary.org; European Film Gateway

• Thematischer Aggregator: sammelt Inhalte zu bestimmten Themen• Domänenspezifisch oder quer über Domänen


Aggregatoren und Portale

• Aggregatoren bauen teilweise selbst Portale auf

• Z.B. Kulturpool.at (http://www.kulturpool.at/)

• European Film Gateway (http://www.europeanfilmgateway.eu/)

• Teilweise nur Inhaltslieferanten für Europeana, die nicht für Endnutzer zugänglich sind

• Z.B. EuropeanaTravel (http://www.europeanatravel.eu/)

• Aggregatoren sammeln meist nur Metadaten, keine digitalen Objekte

• Z.B. Kulturpool.at

• Einige Aggregatoren speichern auch digitale Objekte ( Repositorien)

http://www.kulturpool.at/

http://www.europeanfilmgateway.eu/

http://www.europeanatravel.eu/


Aggregatoren

• Vertikale Aggregatoren:• Operational: The Europeana Library (Nationalbibliotheken; zukünftig auch

wissenschaftliche Bibliotheken)• In Vorbereitung:

• The European Film Gateway (http://www.europeanfilmgateway.eu/) • EU Screen (Rundfunkarchive)• APEnet (Europäische Archive) (http://www.apenet.eu/)

• Aggregatoren ohne eigene Portale:• Z.B. EuropeanaTravel, Athena, EuropeanaLocal

• Nationale Aggegatoren:• Operational: Österreich, Frankreich, Deutschland, Ungarn, Italien, Rumänien• In Vorbereitung: Finnland, Norwegen, Schweden, Portugal, Slowenien,

Tschechien, Slowakei



http://www.apenet.eu/


CENL

National Digital Library

ACE

Film Archive X

Eurbica National Archive 1

MICHAEL

NL 1 NL 2 NL 3

Museum X

Archive X

National Archive 2

Film Archive 1

Film Archive 2

Film Archive 3

National Archive 3

Library X

Museum A Archive A Library A

FIAT

Television Archive 1

Television Archive 2

IASA

Sound Archive 1

Sound Archive 2

ICOM Europe

Museum 1Museum 2

Federation of European Publishers

Publisher A Publisher B Publisher C

Europeana als Meta-Aggregator Europeana als Meta-Aggregator

RL 1 RL 2 RL 3


Rolle der Aggregatoren

• Nur mithilfe der Aggregatoren kann Europeana als tragfähiger Service entwickelt werden

• Aggregation von 10 Millionen Objekten bis Sommer 2010

• Zusammenarbeit mit Content Providern / Harvesting

• Europeana: relative kleine Organisation – kann mithilfe der Aggregatoren Zugriff auf eine große Zahl von Objekten ermöglichen


Aggregatoren in Europeana

• Repräsentiert in „Council of Content Providers and Aggregators“ (CCPA) der EDL Foundation

• Agieren als Vermittler und Multiplikatoren zwischen Europeana und den Content Providern

• Vermitteln Vision und Ziele von Europeana in ihren Netzwerken

• Sammeln Feedback aus Netzwerken und leiten es an Europeana weiter

• Werben für Implementierung der Europeana-Standards in ihren Netzwerken

• Vermitteln Expertise

• Harvesten digitale Inhalte von Content Providern für Europeana


Aggregatoren in Europeana


Aggregatoren und finanzielle Nachhaltigkeit

• Existenz finanziell gesicherter Aggregatoren ist essentiell für Nachhaltigkeit der Europeana

• Unterschiedliche Modelle der Finanzierung• Staatliche Finanzierung für nationale Aggregatoren• Mitgliedsbeiträge (z.B. The European Library)• EU-Förderung / nationale Projektförderung• Einnahmen aus kommerziellen Aktivitäten


Aggregatoren und Endbenutzer

• Die meisten Aggregatoren geben Zugriff auf die gesammelten Inhalte über ein Portal

• Portale der Aggregatoren und Europeana ergänzen einander

• Aggregatoren können Benutzern spezifische Services in Ergänzung zu Europeana anbieten

• Vertikale Aggregatoren: domänenspezifische Services• Z.B. The European Library (http://www.theeuropeanlibrary.org)

• Zusätzliche Kontextinformation

http://www.theeuropeanlibrary.org/


Kooperation Europeana – Aggregatoren

• Wesentlicher Bestandteil der Content-Strategie der Europeana• Elemente der Zusammenarbeit:

• Aggregators Survey – wurde beim Europeana Plenary in Den Haag am 14./15. September 2009 vorgestellt

• Aggregators Group: Arbeitsgruppe innerhalb des EDL CCPA (Council of Content Providers an Aggregators)

• Workshops mit Aggregatoren• Z.B. Den Haag, September 2009; Lund, Oktober 2009

• Handbuch für Aggregatoren• Training für Aggregatoren• EuropeanaLabs

• Europeana Content-Checker: Test-Umgebung zum Testen der Datenlieferung an Europeana


Kooperation Europeana - Projekte

• Ziel von Europeana v1.0 und der Projekte der Europeana Partner-Gruppe:

• Ausbau des jeweiligen Netzwerks• Erweiterung der Europeana verfügbaren digitalen Inhalte

• Zentral: Kooperation zwischen den einzelnen Projekten

• Europeana Content and Partner Group• Zusammenarbeit mit der Aggregator Group (tw. Überschneidung)• Erweiterung des Partner-Netzwerks• Nutzung von Synergien


Richtlinien für Lieferung von Inhalten an Europeana

• Europeana arbeitet im Normalfall mit Aggregatoren und Projekten• Nur im Ausnahmefall direkte Datenlieferung von Institutionen an

Europeana• Vorgeschlagene Priorisierung der Aggregatoren für Lieferung digitaler

Inhalte an Europeana:

1. Nationaler / regionaler Aggregator (z.B. Kulturpool.at)

2. Vertikaler Aggregator (z.B. European Film Gateway / The European Library)

3. Thematisches Projekt (z.B. Europeana Travel, Judaica Europeana)

4. Für lokale und regionale Institutionen ohne Vertretung in1-3: EuropeanaLocal (http://www.europeanalocal.eu/)

• Wenn keine dieser Möglichkeiten für eine Institution zutrifft: Kontaktaufnahme mit Europeana Office

http://www.europeanalocal.eu/


Workflow


Europeana Content Strategie

• Drei Gruppen von Ländern:• Gruppe 1: Länder repräsentieren jeweils <1 % des Gesamtinhalts

der Europeana (z.B. Österreich)• Gruppe 2: Länder repräsentieren jeweils 1 % - 5 %• Gruppe 3: Länder repräsentieren jeweils > 5 %

• Gruppe 1 hat höchste Priorität für Europeana

• Für jede Gruppe wird eigener Plan vorbereitet


Themen

• Vorgängerprojekt EDLnet identifizierte mehrere Themen für digitale Inhalte in Europeana

• Städte; Reisen und Tourismus; Verbrechen und Strafe; Musik; soziales Leben

• Neue Projekte zu diesen Themen:

• EuropeanaTravel; Judaica Europeana; MIMO (http://www.mimo-project.eu/)

• Content Strategie nach Themen in Praxis schwierig zu organisieren

• Themen geben Inhalten in Europeana Kontext und machen sie interessanter für Endbenutzer

• In Zukunft: Themen werden durch das Europeana-Team identifiziert

• Können auf neuen Sammlungen und relevanten Ereignissen und Jahrstagen basieren

• Interessant für Presse und Medien

http://www.mimo-project.eu/


Europeana Content Strategie



• Europeana speichert Repräsentationen digitaler Objekte, nicht die digitalen Objekte selbst

• Metadaten: Beschreibung, Vorschau (Thumbnail)

• Anzeige, Abspielen, Nutzung auf der Website des Daten-Providers

• Objekte werden ausschließlich in Systemen der Provider bzw. Aggregatoren gespeichert

• Darstellung digitaler Objekte in höchstmöglicher Granularität• Möglichst direkter Link zu den digitalen Objekten

• Möglichst geringe “Klickdistanz” zwischen Beschreibung und Objekt

• Gemeinsamer zentraler Index für Objektmetadaten

• Objektzentrierter, nicht sammlungszentrierter Zugang



• Digitale Ressourcen in Europeana:• Metadaten (deskriptiv, administrativ): Beschreibung des Objekts• Objektvorschau: Thumbnail• Aktiver Link zum Objekt auf der Website des Datenproviders

• Europeana Rhine Release: nur Objekte in Public Domain / rights cleared

• Im Normalfall bereiten Aggregatoren die Daten für Europeana vor


Metadaten in Europeana

• Europeana sammelt und indexiert deskriptive Metadaten zu den digitalen Inhalten

• Es gibt keinen gemeinsamen, für die verschiedenen Domänen gültigen Metadatenstandard

• Entwicklung eines Sets von Metadatenelementen für Europeana: Europeana Semantic Elements (ESE)

• Gemeinsames Set von Informationselementen• Unterstützt von Benutzern erwartete Funktionalität des Portals• Unterstützt technische Funktionalität des Europeana-Systems


Europeana Semantic Elements

• Europeana Semantic Elements, V 3.2 (ESE)• Basiert auf Dublin Core, enthält zusätzliche Elemente

• 49 Elemente (15 dc, 22 dcterms, 12 europeana)

• Generisches Set von Elementen, die auf heterogene Ressourcen anwendbar sind

• Metadaten für Europeana müssen auf ESE 3.2 gemappt werden

• Zusätzlich Normalisierung einiger Element-Inhalte erforderlich, um sie maschinenverarbeitbar zu machen

• Mapping / Normalisierung soll v.a. durch Aggregatoren durchgeführt werden


Europeana Semantic Elements

Strongly recommended

Recommended Additional elements Europeana elements

dc:titledcterms:alternativedc:creatordc:contributordc:datedcterms:createddcterms:issued

dc:coveragedcterms:spatialdcterms:temporaldc:descriptiondcterms:isPartOfdc:languagedc:publisherdc:sourcedc:subjectdc:type

dc:formatdcterms:extentdc:identifierdc:rightsdcterms:provenancedc:relationdcterms:isFormatOfdcterms:hasFormatdcterms:hasVersiondcterms:isVersionOfdcterms:hasPartdcterms:isReferencedBydcterms:referencesdcterms:isPrelacedBydcterms:replacesdcterms:isRequiredBydcterms:requiresdcterms:tableOfContents

europeana:countryeuropeana:hasObjecteuropeana:isShownAteuropeana:isShownByeuropeana:languageeuropeana:objecteuropeana:providereuropeana:typeeuropeana:unstoredeuropeana:urieuropeana:usertageuropeana:year


ESE Dokumentation

• http://version1.europeana.eu/web/guest/provide_content

http://version1.europeana.eu/web/guest/provide_content


ESE Europeana Elemente

Element Wer ist verantwortlich?

europeana:unstored Datenprovider – wenn anwendbar

europeana:object Datenprovider – wenn anwendbar

europeana:provider Datenprovider – verpflichtend

europeana:type Datenprovider – verpflichtend

europeana:isShownBy

europeana:isShownAt

Datenprovider – mindestens ein Element verpflichtend

europeana:country Europeana

europeana:hasObject

europeana:language

europeana:uri

europeana:year

europeana:usertag


“Schwierige” Elemente (für Datenprovider)

• isShownBy• Direkter Link zu digitalem Objekt auf Server des Datenproviders (High

Resolution)

• isShownAt• Link zu digitalem Objekt auf Server des Datenproviders mit

Kontextinformation (Deskriptive Info, Links zu Services, Navigation zu anderen Ressourcen)

• object• URL zu Thumbnail

• URLs müssen funktionieren!

• Geänderte URLs müssen an Europeana gemeldet werden

• Nicht funktionierende URLs müssen repariert werden

„isShownBy“

„isShownAt“

„object“


Content Checker

• Web Tool für Data Provider / Aggregatoren, um ESE Daten in Testumgebung zu laden und zu validieren

• Kann vor dem formalen Upload von Daten genutzt werden


Laden von ESE Daten: Einzelne Schritte


Nächste Schritte

• Sommer 2010: „Rhine Release“• 10 Millionen Objekte

• Mitte 2011: „Danube Release“• 20 Millionen Objekte

• 2012: 25 Millionen Objekte

EuropeanaStatus / Datenlieferungen / Metadaten

BAM Austria, 11.11.2009

Max KaiserÖsterreichische Nationalbibliothek

Abt. f. Forschung & [email protected]

VielenDank!

Fragen?

mailto:[email protected]

europeana: status - datenlieferungen - metadaten

Technology