Biblioteca Nacional da Nova Zelândia preserva o patrimônio digital com as soluções da Hitachi

Visão geral

Desafio

• Coletar, compartilhar e preservar o patrimônio digital da Nova Zelândia de maneira econômica, atendendo aos padrões internacionais de preservação digital.

Solução

• Coletar, compartilhar e preservar o patrimônio digital da Nova Zelândia de maneira econômica, atendendo aos padrões internacionais de preservação digital.

Resultado

• Gerenciamento de dados robusto com recursos avançados e personalizados de metadados e arquivamento inteligente
• Cadeia de custódia comprovada e integridade garantida.
• Prevenção contra perda de dados, recuperação de desastres e redundância geográfica.
• A inovação e a tecnologia permitem que a Biblioteca Nacional da Nova Zelândia preserve e gerencie coleções de patrimônio digital, garantindo a integridade e a autenticidade dos dados.

Desafio

A Biblioteca Nacional da Nova Zelândia constrói coleções de produtos e resultados sociais, culturais, criativos, econômicos, científicos, entre outros, dos neozelandeses. Sua função é preservar a história e a identidade cultural do país e disponibilizar essas coleções para pesquisadores, historiadores, professores, estudantes e outros, agora e no futuro.

O data center da Biblioteca Nacional da Nova Zelândia estava envelhecendo e a cidade de Wellington havia sido atingida por um grave terremoto. Além de drivers como redundância geográfica e recuperação de desastres, a biblioteca realizou um projeto para otimizar o armazenamento digital. Este projeto foi criado para atender às crescentes necessidades de armazenamento, reduzir o custo de armazenamento e encontrar uma solução preparada para o futuro para seus requisitos significativos de gerenciamento de dados.

“Como uma instituição de cobrança, nossos requisitos de armazenamento só aumentarão. Precisamos tornar o processo mais acessível para que possamos coletar ainda mais tesouros digitais para compartilhar com os neozelandeses no futuro”, disse Bill Macnaught, bibliotecário nacional.

O Arquivo do Patrimônio Digital Nacional (NDHA) abriga as coleções “nascidas digitais” e digitalizadas da Biblioteca Nacional. O NDHA é um ecossistema, com cerca de um petabyte de tamanho, que compreende fluxos de trabalho de preservação digital de ponta a ponta para mais de 200 formatos discretos.

“Pegamos objetos físicos, digitalizamos e preservamos essas versões digitais. E também devemos coletar e preservar o que é chamado de material 'nascido digital', material que só esteve em formato digital”, disse o diretor do programa de pesquisa de preservação, Steve Knight.

Ele e sua equipe são responsáveis pela proteção a longo prazo do conteúdo do patrimônio digital que foi identificado e coletado como publicado na Nova Zelândia em formato digital.

“Também coletamos o domínio da Web .nz e temos mais de cinco milhões de páginas de jornais históricos. O conteúdo que precisamos coletar só vai crescer tanto em termos de volume quanto de complexidade”, disse Knight.

Quando se trata de preservar a autenticidade de uma coleção digital, cada alteração ou impacto em um objeto deve se tornar parte do pacote de informações armazenadas com esse objeto para que sua proveniência possa ser verificada e confiável.

“Nosso trabalho é garantir que, daqui a 100 anos, a pessoa que usar nosso arquivo digital tenha a confiança na Biblioteca Nacional da Nova Zelândia para aceitar que cada objeto é o que deveria ser. E, se o trabalho foi feito para garantir a acessibilidade contínua, digamos, mudar do WordStar (um aplicativo de processamento de texto comumente usado na década de 1980) para o PDF, ela poderá ver o registro de todas as alterações armazenadas com esse objeto digital”, disse Knight.

Solução

Em 2011, o governo da Nova Zelândia determinou que seus departamentos usassem um dos três data centers soberanos, que inclui a Revera. Em 2015, a biblioteca concluiu a transferência de todas as suas coleções digitais permanentes para o data center da Revera sob um modelo de infraestrutura como serviço. Buscando reduzir seus custos de armazenamento digital e obter controle de seus dados não estruturados, a biblioteca decidiu realizar um projeto greenfield com a Hitachi Vantara e a Revera, parceira da Hitachi Vantara.

Knight e sua equipe acreditavam que o armazenamento de objetos seria uma solução escalável e econômica. Eles também precisavam de uma camada robusta de gerenciamento de dados para que a biblioteca pudesse garantir que a integridade de seus objetos digitais fosse mantida ao longo do tempo. Embora pudessem ver o valor da nuvem, eles queriam uma opção de nuvem privada que atendesse às suas necessidades específicas como departamento governamental.

A solução era o armazenamento de objetos integrado de ponta a ponta, de 900 TB, sustentado pela Hitachi Content Platform, que foi rotulada como Cascade e é fornecida por meio da Revera como serviço.

Há duas instâncias totalmente virtuais da Hitachi Content Platform, executadas em dois data centers da Revera. O design de dois locais fornece proteção de objetos de arquivo e, pela primeira vez, a Biblioteca Nacional da Nova Zelândia tem um local de recuperação de dados totalmente redundante.

Resultado

“Esta coleção pertence a todos os neozelandeses e a tecnologia torna possível, finalmente, tornar muito fácil para qualquer neozelandês ter acesso à riqueza de conhecimento que coletamos em seu nome”, disse Macnaught.

Quando o prédio ao lado teve que ser demolido após o terremoto em 2016, a necessidade de redundância geográfica tornou-se muito real para a biblioteca. Mas os benefícios vão muito além do cumprimento dos requisitos de recuperação de desastres, de acordo com Knight, que foi encarregado de encontrar economia de custos para a organização e para os contribuintes da Nova Zelândia. “Certamente não é uma coisa fácil ou comum ter um projeto de tecnologia greenfield que realmente economizará dinheiro”, disse Knight. “Temos alguns meses pela frente, mas a expectativa é que a economia de custos de material que prevíamos no início do projeto seja realizada”.

A solução oferece à biblioteca a capacidade de armazenar, arquivar e acessar dados não estruturados. Ele pode otimizar o armazenamento com compactação automatizada, reconstruir grandes conjuntos de dados rapidamente quando necessário e reduzir os custos gerais.

Combinar recursos de arquivamento inteligente com recursos e ferramentas avançadas de metadados que permitem a marcação de objetos digitais com metadados personalizados significa que a biblioteca pode cumprir sua responsabilidade de preservar a proveniência digital de suas coleções. A cadeia de custódia de cada objeto digital pode ser comprovada, e o armazenamento WORM (write once, read many) garante autenticidade, graças à proteção e controle de versão do objeto de arquivo.

“A Biblioteca Nacional da Nova Zelândia, trabalhando com a Hitachi Vantara e a Revera, cocriou uma solução na vanguarda do armazenamento digital, para apoiar a salvaguarda de longo prazo do patrimônio cultural digital. Isso ajudará a garantir que esteja disponível, acessível, seja significativo e autêntico para as próximas gerações”, disse Knight.