Die Nationalbibliothek von Neuseeland stellt die digitale Provenienz mit einer Greenfield-Lösung für Objektspeicher und Datenmanagement sicher

Ihre Aufgabe ist es, diese Sammlungen dauerhaft zu erhalten, sie Forschern, Historikern, Lehrkräften, Schülern und anderen Personenkreisen jetzt und in Zukunft zur Verfügung zu stellen und dafür zu sorgen, dass sie auch noch in 100–200 Jahren zugänglich und aussagekräftig sind.

Das Rechenzentrum der Nationalbibliothek von Neuseeland war in die Jahre gekommen. Außerdem war die Stadt Wellington von einem schweren Erdbeben heimgesucht worden. Zusätzlich zu geografischer Redundanz und Disaster Recovery führte die Bibliothek ein Projekt zur Optimierung des digitalen Speichers durch. Dieses Projekt sollte sich mit den steigenden Speicheranforderungen der Nationalbibliothek befassen, die Speicherkosten senken und eine zukunftssichere Lösung für die enormen Datenmanagementanforderungen finden.

„Als Einrichtung, die mit Sammlungen arbeitet, werden unsere Speicheranforderungen immer weiter zunehmen. Wir müssen den Prozess erschwinglicher machen, damit wir in Zukunft noch mehr digitale Schätze sammeln und mit den Neuseeländern teilen können“, erklärte Bill Macnaught, Mitarbeiter der Nationalbibliothek.

Es ist eine Herausforderung, sicherzustellen, dass eine digitale Sammlung immer zugänglich und verständlich ist. Man muss sich mit der Veralterung von Hardware und Software auseinandersetzen und herausfinden, unter welchen Voraussetzungen die Bedeutung eines digitalen Objekts dauerhaft aufrechterhalten werden kann.

Digitale Aufzeichnungen und Archive gehen über Generationen hinaus. Die heute getroffenen Entscheidungen können eine unbekannte Zukunft beeinflussen, insbesondere für Dokumente von kultureller Bedeutung. Das National Digital Heritage Archive, das die digitalen und digitalisierten Sammlungen der Nationalbibliothek beherbergt, ist nicht nur eine Datenbank, sondern eine Umgebung von etwa einem Petabyte mit 170 unterschiedlichen Formaten und ihren Varianten, von denen einige bis ins späte 18. Jahrhundert zurückreichen.

„Wir digitalisieren physische Objekte und bewahren die digitalen Versionen auf. Und wir müssen auch ursprünglich in digitaler Form erstelltes, sogenanntes 'born digital' Material sammeln und bewahren, d. h. Material, das nur in digitaler Form vorliegt“, sagte Steve Knight, Program Director, Preservation Research.

Er und sein Team ermitteln, was in Neuseeland in digitaler Form veröffentlicht wird, sammeln es und bauen die notwendigen digitalen Prozesse auf, die der Archivierung physischer Objekte nachempfunden sind, um sicherzustellen, dass ursprünglich digitales Material dauerhaft aufbewahrt werden kann.

„Wir sammeln auch die Inhalte der Webdomain .nz mit jährlich 20 bis 30 Terabyte pro Crawling. Wir besitzen über fünf Millionen Seiten historischer Zeitungen, die wir online verfügbar machen, und vieles mehr. Volumen und Komplexität der Inhalte, die wir sammeln müssen, nehmen ständig zu“, so Knight weiter.

Was das Datenmanagement anbelangt, hat die Bibliothek festgestellt, dass Archivkonzepte wie Kontext und Provenienz von entscheidender Bedeutung sind. Knight zufolge muss zur Wahrung der Authentizität einer digitalen Sammlung jede Änderung eines Objekts oder jede Auswirkung darauf Teil der Informationen werden, die zusammen mit diesem Objekt gespeichert sind. Nur so kann seine Provenienz als vertrauenswürdig verifiziert werden.
„Unsere Aufgabe ist es, dafür zu sorgen, dass die Person, die unser digitales Archiv nutzt, darauf vertrauen kann, dass die Nationalbibliothek von Neuseeland jedes Objekt authentisch bewahrt hat. Wenn es geändert wurde – und sei es nur die Konvertierung vom PDF-Format in das JPEG-Format –, können sämtliche Änderungen, die mit diesem digitalen Objekt gespeichert wurden, angezeigt werden“, so Knight weiter.

Die Lösung

Die neuseeländische Regierung hat angeordnet, dass ihre Behörden eines von drei souveränen Rechenzentren nutzen müssen, darunter auch Revera. Bis 2015 hatte die Bibliothek ihr eigenes, ausgefallenes Rechenzentrum vollständig aufgegeben und alle permanenten Sammlungen im Rahmen eines Infrastructure-as-a-Service-Modells an das Revera-Rechenzentrum übertragen. Um ihr Kostenprofil für digitalen Speicher zu reduzieren und die Kontrolle über ihre unstrukturierten Daten zu erlangen, gab die Bibliothek ein Optionspapier in Auftrag und entschied sich für ein Greenfield-Projekt mit Revera und Hitachi Vantara. Das Ergebnis ist die weltweit einzigartige Lösung für digitale Bewahrung und Provenienz.

Knight und sein Team hielten Objektspeicher für eine skalierbare und kostengünstige Lösung. Sie benötigten jedoch eine robuste Datenverwaltungsschicht, damit die Bibliothek die Authentizität und Integrität ihrer digitalen Objekte dauerhaft sicherstellen konnte. Die Bibliothek erkannte den Wert der Cloud und wünschte sich eine Private-Cloud-Option, die ihren speziellen Anforderungen als Regierungsbehörde gerecht wurde.

„Wir wussten, dass Revera bereits mit Hitachi Vantara zusammengearbeitet hatte“, sagte Knight. „Zu Beginn des Projekts war uns nicht klar, woher die Kerntechnologien kommen würden. Aber es zeigte sich schnell, dass dies der richtige Weg war und dass Hitachi wirklich daran interessiert war, gemeinsam mit Revera und der Nationalbibliothek von Neuseeland eine Lösung zu schaffen.“

Diese Lösung ist ein integrierter End-to-End-Objektspeicher mit 900 TB, der von der Hitachi Content Platform-Lösung unterstützt, unter dem Markennamen „Cascade“ angeboten und über Revera als Service bereitgestellt wird.

Die Vorteile

„Diese Sammlung gehört allen Neuseeländern. Die Technologie ermöglicht endlich jedem Neuseeländer den einfachen Zugang zu dem umfassenden Wissen, das wir für ihn gesammelt haben“, so Bill Macnaught, Mitarbeiter der Nationalbibliothek.

Als das Gebäude nebenan nach einem Erdbeben der Stärke 7,8 2016 abgerissen werden musste, wurde die Notwendigkeit einer geografischen Redundanz für die Nationalbibliothek von Neuseeland sehr real. Es gibt jetzt eine Echtzeit-Replikation von ihrer Heimatbasis in Wellington nach Auckland und die Pläne sehen als nächsten Schritt tertiäre Kopien an anderen Orten vor.

Knight wurde damit beauftragt, für die Organisation und die neuseeländischen Steuerzahler Einsparmöglichkeiten zu finden. Seiner Ansicht nach gehen die Vorteile jedoch weit über die Erfüllung der Disaster-Recovery-Anforderungen hinaus.

„Ein Greenfield-Technologieprojekt, das Geld sparen soll, ist sicherlich keine einfache oder gewöhnliche Sache“, so Knight weiter. „Wir haben zwar noch ein paar Monate vor uns, gehen aber davon aus, dass die Kosteneinsparungen, die wir uns am Anfang vorgestellt haben, realisiert werden.“

Die Lösung bietet der Bibliothek die Möglichkeit, unstrukturierte Daten zu speichern, zu archivieren und darauf zuzugreifen. Sie kann den Speicher durch automatische Komprimierung optimieren, bei Bedarf schnell große Datasets neu aufbauen, wenn Daten mit anderen geteilt werden müssen, und die Gesamtkosten senken.

„Hitachi Vantara und Revera haben gemeinsam eine hochmoderne Lösung für digitale Archivierung und Bewahrung entwickelt, mit der wir sicherstellen können, dass das digitale Erbe Neuseelands für kommende Generationen verfügbar, zugänglich, aussagekräftig und authentisch ist.“

Durch die Kombination intelligenter Archivierungsfunktionen mit erweiterten Metadatenfunktionen und Tools, die das Taggen digitaler Objekte mit benutzerdefinierten Metadaten ermöglichen, wird die Bibliothek ihrer Verantwortung, die digitale Provenienz ihrer Sammlungen zu bewahren, gerecht. Für jedes digitale Objekt kann die Kontrollkette nachgewiesen werden. Der WORM-Speicher (Write Once, Read Many) kann nicht gelöscht werden und garantiert Authentizität.

„Ich bin stolz darauf, dass wir zeigen können, dass wir den digitalen Raum beherrschen, dass wir ein digitales Unternehmen mit digitalen Services sind. Kunden in Neuseeland und auf der ganzen Welt können sich auf digitale Interaktionen mit uns freuen. Für die Neuseeländer werden wir zu einem lokalen Knotenpunkt in einem globalen Netzwerk von Institutionen und Ländern mit einzigartiger Vertrauenswürdigkeit“, fuhr Knight fort.