rosetta Система сохранения цифровых объектов 1 7 октября ...

1 Ex Libris Ltd., 2012 - Internal and Confidential

RosettaСистема сохранения

цифровых объектов

17 октября 2012

Сергей ДоценкоПредставитель Ex Libris в Украине.

2 Ex Libris Ltd., 2012 - Confidential

Необходимость в обеспечении сохранности

3

Необходимость в сохранности цифровых объектов

Если файл не открывается, то возможной причиной

является:

1. Повреждение носителя(медиа).

2. Отсутствие соответствующего ПО.

3. Неизвестный формат.

4


1. Носители имеют срок жизни

2. Программы имеют срок

жизни

3. Форматы имеют срок жизни

Необходимо обеспечить сохранность всех трех

компонентов для чтения файла.

5


►

Официальные док.

Веб сайтыМедицински

е док.Исследован

ияКультурное достояние

Аудио видео

Цифровые коллекции


Вызовы

7

Вызовы

Принципы сохранения:

1) Обеспечение целостности данных

2) Обеспечение сохранности содержания• Действующий формат• Полнота метаданных• Оригинал

3) Система, соответствующая OAIS

8

Вызовы – целостность данных

• Контрольные суммы показывают изменения или

повреждения

• Одна из характеристик присущая большинству систем

• Не гарантирует доступ к данным, лишь потому, что они

не изменялись

Первый маленький шаг к сохранности

9

Вызовы – сохранность содержания

• Форматы развиваются быстро и быстро устаревают

• Доступность файла

- Действующий формат (pdf)

- Соответствующее ПО (Acrobat reader)

• Анализ рисков по доступности файла

- Библиотека форматов

- Библиотека ПО

Важно для сохранности

10

Вызовы – полнота метаданных

• Технические метаданные (т.к. размер, разрешение, компрессия и т.д.)

• Метаданные описания (e.g. автор, заглавие, издательство и т.д.)

• Метаданные существенны чтобы:

• Обеспечить сохранность только необходимым

элементам

• Знать (в будущем) что именно было

сохранено

11

• Журнал изменений

- Кто, что, где, когда, по какой причине создал,

изменил, удалил и т.д.??

Вызовы – Оригинал и производные

Метаданные, форматы, миграции


Обзор Rosetta

13

Что такое Rosetta?

Полноценное решение, направленное на работу с постоянно

растущей необходимостью сбора, архивирования и

сохранения оцифрованных и электронных материалов

имеющихся в научных, исследовательских и государственных

организациях, гарантируя целостность данных и

доступность информации.

14

Rosetta Timeline

• Разработана в партнерстве с Национальной

библиотекой Новой Зеландии (интенсивная подготовка

ТЗ)

• В октябре 2008 запущена в работу в Национальной

библиотеке Новой Зеландии

• Версия 1.0 была выпущена в Январе 2009

• Экспертная группа по Rosetta – 2010

• Версия 2.2 выпущена в Августе 2011

• Последняя версия 3.0 вышла в июле 2012

15

Экспертная группа по NDHA

• Британская библиотека • Библиотека Корнельского университета• Исследовательский институт Гетте• Национальная библиотека Финляндии• Национальная библиотека Нидерландов• Национальная библиотека Сингапура• Национальная библиотека Китая• Компания Sun Microsystems• Университет Глазго• Йельский университет

16

Модель OAIS

Ex Libris Ltd., 2011 - Internal and Confidential


Rosetta - архитектура


Основные преимущества Rosetta


Rosetta – основные преимущества

Масштабируемость

Открытость иинтегрируемость

Готовая конфигурация

Коллективная работа Активное обеспечение сохранности

(Active Preservation)

Веб интерфейс


Rosetta – коллективное создание БазыЗнаний

Библиотека форматов с метаданными и инструментами извлечения Глобальная библиотека на основе PRONOM Ассоциированные с форматами ПО и риски Возможность интеграции с Глобальной библиотекой Автоматическое обновление библиотеки


Rosetta – активное обеспечение сохранности

Управление процессом планирования сохранности от возникновения рисков до решений

Оценка и сравнение альтернативных планов Основана на передовом опыте и рекомендациях Совместная работа

ИсполнениеОценкаОпределение.

PermanentStorage

OperationalStorage

MigrationAction

……


Rosetta - масштабируемость

Проверенная архитектура способная обрабатывать миллионы файлов.

Выделенные сервер для каждого из этапов Легкость и гибкость конфигурации


Rosetta – открытость и интеграция

Rosetta

Приложенияввода

АБИС

Поисковыемашины

Плагины (проверки, конверторы,

дополнения, и т.д.)

Хранилища данных


Rosetta – ввод данных

• Различные типы ввода данных

• Автоматизированный (ftp, NFS, etc)

• Ручной

• SDK - позволяет создавать собственные приложения ввода

данных.

ПО автомат. ввода ввода

Издатель (например, газета)

Rosetta


Rosetta – интеграция с АБИС

• Синхронизация с АБИС

• Стандарты SRU и OAI.

Другие АБИС


Rosetta – интеграция с поисковиками

• Модуль Публикации позволяет обмениваться данными с другими системами

• Публикация различных групп объектов в различные форматы

• Наличие API’s и SDK для доступа к данным

• Встроенные интерфейс OAI

…


Rosetta – уровень хранилища

Rosetta

Уровень хранилища

NFS NetApp IBM


Rosetta – основные преимущества

Полноценное Решение по обоспечению сохранности

Масштабируемость

Открытость иинтегрируемость

Готовая конфигурация

Коллективная работа Активное обеспечение сохранности

(Active Preservation)

Веб интерфейс


Основные компоненты Rosetta



• Пользователи

• Репозитарий

• Доставка

• Библиотека форматов

• Сохранностьo Анализ рисковo План сохранения

• Управление коллекциями

• Управление процессами


Компоненты Rosetta – пользователи

• Продюсеры и их агенты

• Сотрудники• Менеджеры

• Посредники, оценщики и модератор

• Технический специалист

• Редактор

• Аналитик по сохранности

• Администратор

• Контактные лица


Пользователи

Список всех пользователей

Фильтры по различным типам пользователей


Добавление пользователя

Общая информация

Роли пользователя

Авторизация


Начало работы Агента


Добавление объекта – Шаг 1

Список материалов



Список полей.



Опции

Договор



Загрузка файлов по одному

Просмотр/редактирование файлов

Добавить файл


Список файлов

Просмотр/редактирование файлов

Файлы для загрузки



Рабочее окружение

Папки для различных этапов работы

• Работа с файлами (редактирование/просмотр)

ПоискДобавить файл


Компоненты Rosetta – Репозитарий

• Определения Хранилищ данных

• Группы и типы хранилищ

• Правила распределения и хранения объектов


Добавление группы


Список


Добавление диска


Параметры и правила


Компоненты Rosetta – Сохранность

• Анализ рисков• Типы: устаревший формат, отсутствие приложения,

свойство файла (атрибуты)

• Периодический запуск отчетов

• План сохранения• Набор объектов на основе отчетов анализа рисков

• Альтернативные планы

• Тестирование, сравнение и оценка планов

• Принятие решения

• Миграция


Отчет по устаревшим форматам

Список форматов с рисками

Поиск в отчетеСортировка


Риск анализ – атрибуты файла

Список рисков


Планы сохранения – сравнение планов


Автоматическая оценка планов


Примеры проектов по сохранности цифровых

объектов

53

Пользователи Rosetta по всему миру

Major ReligiousInstitution

Prominent Research Library

Saxon State & University Library Dresden

54

Пользователи Rosetta



Коллекции в Rosetta


Цюрих, Швейцария

Партнер DataCite

Веллингтон, Новая

Зеландия

Партнер Ex Libris

Исследовательские

данные

Спец коллекции

Диссертации

Национальное

культурное достояние

Частные коллекции

Веб сайты

55






Лёвен, Бельгия

LIBIS – провайдер услуг

Замена DigiTool

Интеграция с Aleph и Primo

Специальные коллекции

Работы преподавателей

Эл. почта

Видео коллекции

Веллингтон, Новая

Зеландия

Подразделение НБ

Integrating Archway

Legal documents

Архивные коллекции

Правительственные

документы

56






Бингхемптон, США

Подразделение SUNY

FTE: ~14 тыс. студентов

Штат: 1.5FTE (not dedicated)

Мюнхен, Германия

Провайдер сервисов для

Баварии

Участник проекта Google

Books

Спец. коллекции (Edwin

A. Link)

Информационные

бюллетни

Фотографии

Оцифровка рукописей и

редких книг

Официальные док.

Веб сайты


Этапы развития Rosetta…

Рост2012-2016

Консолидация2010-2011

• Масштабируемость• БазаЗнаний(Библи

отека форматов)• Научные

организации• Архивы• Проекты

сотрудничества

Инновация2007-2009

• Проектирование и разработка

• Национальные библиотеки,

• Культурное наследие.

• Исследовательские данные

• Сервисы• Новые функции

управления • Музеи,…• Проекты


Спасибо!

rosetta Система сохранения цифровых объектов 1 7 октября ...

Documents

rosetta ex libris

funds ex libris

ex libris rosetta solution

world of digital preservation

text file

file properties

complete md

digital information