Hitachi Content Platform S30
Hitachi Data Ingestor
Objektspeicher und Datenmanagement als Service, angeboten unter dem Markennamen „Cascade“ und bereitgestellt vom Hitachi Vantara-Partner Revera
Kostengünstiges Sammeln, Teilen und Bewahren des digitalen Erbes Neuseelands bei gleichzeitiger Erfüllung der internationalen Standards für digitale Bewahrung
Integrierte Hitachi Content Platform-End-to-End-Objektspeicherlösung mit 900 TB, bereitgestellt als Service durch Revera
Die Nationalbibliothek von Neuseeland baut Sammlungen mit den sozialen, kulturellen, kreativen, wirtschaftlichen, wissenschaftlichen und sonstigen Leistungen und Ergebnissen von Neuseeländern auf. Ihre Aufgabe besteht darin, die Geschichte und kulturelle Identität des Landes zu bewahren und diese Sammlungen Forschern, Historikern, Lehrkräften, Schülern und anderen Personenkreisen jetzt und in Zukunft zugänglich zu machen.
Das Rechenzentrum der Nationalbibliothek von Neuseeland war in die Jahre gekommen. Außerdem war die Stadt Wellington von einem schweren Erdbeben heimgesucht worden. Zusätzlich zu geografischer Redundanz und Disaster Recovery führte die Bibliothek ein Projekt zur Optimierung des digitalen Speichers durch. Dieses Projekt sollte sich mit den steigenden Speicheranforderungen der Nationalbibliothek befassen, die Speicherkosten senken und eine zukunftssichere Lösung für die enormen Datenmanagementanforderungen finden.
„Als Einrichtung, die mit Sammlungen arbeitet, werden unsere Speicheranforderungen immer weiter zunehmen. Wir müssen den Prozess erschwinglicher machen, damit wir in Zukunft noch mehr digitale Schätze sammeln und mit den Neuseeländern teilen können“, erklärte Bill Macnaught, Mitarbeiter der Nationalbibliothek.
Das National Digital Heritage Archive (NDHA) beherbergt sowohl die ursprünglich in digitaler Form erstellten („born digital“) als auch die digitalisierten Sammlungen der Nationalbibliothek. Das NDHA ist ein etwa ein Petabyte großes Ökosystem, das End-to-End-Workflows für digitale Bewahrung in über 200 verschiedenen Formaten umfasst.
„Wir digitalisieren physische Objekte und bewahren die digitalen Versionen auf. Und wir müssen auch ursprünglich in digitaler Form erstelltes, sogenanntes born digital, Material sammeln und bewahren, d. h. Material, das nur in digitaler Form vorliegt“, sagte Steve Knight, Program Director, Preservation Research.
Er und sein Team sind für die langfristige sichere Aufbewahrung von Inhalten des digitalen Erbes verantwortlich, die in Neuseeland in digitaler Form veröffentlicht wurden. Sie werden identifiziert und erfasst.
„Wir sammeln auch die Inhalte der Webdomain .nz und besitzen über fünf Millionen Seiten historischer Zeitungen. Volumen und Komplexität der Inhalte, die wir sammeln müssen, nehmen ständig zu“, so Knight weiter.
Wenn es darum geht, die Authentizität einer digitalen Sammlung zu bewahren, muss jede Änderung eines Objekts oder jede Auswirkung darauf Teil der Informationen werden, die zusammen mit diesem Objekt gespeichert sind. Nur so kann seine Provenienz als vertrauenswürdig verifiziert werden.
„Unsere Aufgabe ist es, dafür zu sorgen, dass die Person, die unser digitales Archiv in 100 Jahren nutzt, darauf vertrauen kann, dass die Nationalbibliothek von Neuseeland jedes Objekt authentisch bewahrt hat. Und nach Sicherstellung der kontinuierlichen Zugänglichkeit – beispielsweise die Umstellung von WordStar (einer in den 1980er Jahren häufig verwendeten Textverarbeitungsanwendung) auf PDF – können sämtliche Änderungen, die mit diesem digitalen Objekt gespeichert wurden, angezeigt werden“, fuhr Knight fort.
2011 hat die neuseeländische Regierung angeordnet, dass ihre Behörden eines von drei souveränen Rechenzentren nutzen müssen, zu denen auch Revera gehört. Im Rahmen eines Infrastructure-as-a-Service-Modells schloss die Bibliothek 2015 die Übertragung aller permanenten digitalen Sammlungen an das Revera-Rechenzentrum ab. Um die Kosten für digitalen Speicher zu senken und die Kontrolle über ihre unstrukturierten Daten zu erlangen, entschied sich die Bibliothek für ein Greenfield-Projekt mit Hitachi Vantara und dem Hitachi Vantara-Partner Revera.
Knight und sein Team hielten Objektspeicher für eine skalierbare und kostengünstige Lösung. Sie benötigten auch eine robuste Datenmanagementschicht, damit die Bibliothek die Integrität ihrer digitalen Objekte dauerhaft sicherstellen konnte. Die Bibliothek erkannte den Wert der Cloud und wünschte sich eine Private-Cloud-Option, die ihren speziellen Anforderungen als Regierungsbehörde gerecht wurde.
Die Lösung ist ein integrierter End-to-End-Objektspeicher mit 900 TB, der von der Hitachi Content Platform unterstützt, unter dem Markennamen „Cascade“ angeboten und über Revera als Service bereitgestellt wird.
Es werden zwei vollständig virtuelle Instanzen der Hitachi Content Platform in zwei Revera-Rechenzentren ausgeführt. Die Konfiguration mit zwei Standorten bietet Dateiobjektschutz. Zum ersten Mal verfügt die Nationalbibliothek von Neuseeland über einen vollständig redundanten Wiederherstellungsstandort.
„Diese Sammlung gehört allen Neuseeländern. Die Technologie ermöglicht endlich jedem Neuseeländer den einfachen Zugang zu dem umfassenden Wissen, das wir für ihn gesammelt haben“, erklärte Macnaught.
Als das Gebäude nebenan nach dem Erdbeben 2016 abgerissen werden musste, wurde die Notwendigkeit einer geografischen Redundanz für die Bibliothek sehr real. Knight wurde damit beauftragt, für die Bibliothek und die neuseeländischen Steuerzahler Einsparmöglichkeiten zu finden. Seiner Ansicht nach gehen die Vorteile jedoch weit über die Erfüllung der Disaster-Recovery-Anforderungen hinaus. „Ein Greenfield-Technologieprojekt, das Geld sparen soll, ist sicherlich keine einfache oder gewöhnliche Sache“, so Knight weiter. „Wir haben zwar noch ein paar Monate vor uns, gehen aber davon aus, dass die Materialkosteneinsparungen, die wir uns zu Beginn des Projekts vorgestellt hatten, realisiert werden.“
Die Lösung bietet der Bibliothek die Möglichkeit, unstrukturierte Daten zu speichern, zu archivieren und darauf zuzugreifen. Sie kann den Speicher durch automatische Komprimierung optimieren, bei Bedarf schnell große Datasets neu aufbauen und die Gesamtkosten senken.
Durch die Kombination intelligenter Archivierungsfunktionen mit erweiterten Metadatenfunktionen und Tools, die das Taggen digitaler Objekte mit benutzerdefinierten Metadaten ermöglichen, wird die Bibliothek ihrer Verantwortung, die digitale Provenienz ihrer Sammlungen zu bewahren, gerecht. Für jedes digitale Objekt kann die Kontrollkette nachgewiesen werden. Die WORM-Speicherung (Write Once, Read Many) garantiert dank Dateiobjektschutz und Versionierung Authentizität.
„Die Nationalbibliothek von Neuseeland hat in Zusammenarbeit mit Hitachi Vantara und Revera eine hochmoderne Lösung für digitalen Speicher entwickelt, die die langfristige sichere Aufbewahrung des digitalen kulturellen Erbes Neuseelands unterstützen soll. Die Lösung wird dazu beitragen, dass dieses Erbe für kommende Generationen verfügbar, zugänglich, aussagekräftig und authentisch ist“, sagte Knight.
Beschleunigen Sie Innovationen und bauen Sie Ihre DataOps-Praxis mit Datenverwaltungsprodukten für Analyse, KI und Datenintegration auf.
WEITERE INFORMATIONENErstellen und implementieren Sie schnell Datenpipelines in großem Maßstab. Integrieren Sie Daten aus Data Lakes, Data Warehouses und Geräten und orchestrieren Sie Datenströme in allen Umgebungen.
WEITERE INFORMATIONEN
Die Nationalbibliothek von Neuseeland hat in Zusammenarbeit mit Hitachi Vantara und Revera eine hochmoderne Lösung für digitalen Speicher entwickelt, die die langfristige sichere Aufbewahrung des digitalen kulturellen Erbes Neuseelands unterstützen soll. Die Lösung wird dazu beitragen, dass dieses Erbe für kommende Generationen verfügbar, zugänglich, aussagekräftig und authentisch ist.
– Steve Knight, Program Director, Preservation Research, Nationalbibliothek von Neuseeland