Xinhua News Agency unterstützt die objektbasierte Cloud-Plattform mit File und Content-Technologien von Hitachi

Aufgrund der Einschränkungen bei der Verarbeitungskapazität des Systems stellte die audiovisuelle Bibliothek Services nur für die audiovisuelle Abteilung, das Xinhua 08 Video Terminal, für die internationale Abteilung und die Abteilung für auswärtige Angelegenheiten bereit. Da das audiovisuelle Bibliothekssystem mit Daten überlastet war und um sicherzustellen, dass die Daten rechtzeitig erfasst werden, war die zu exportierende Datenmenge begrenzt.

Zusätzliche Herausforderungen ergaben sich aus einer steigenden Anzahl von Benutzern in der Zentrale und den Niederlassungen im Asien-Pazifik-Raum, Lateinamerika und Europa, die Zugriff auf das System angefordert hatten. Aufgrund des betrieblichen Drucks und des Architekturdesigns des Systems konnte das vorhandene Datenbanksystem keinen Benutzern außerhalb der Zentrale zur Verfügung gestellt werden. Infolgedessen war es nicht in der Lage, den Ressourcenbedarf des Unternehmens zu decken.

Xinhua News Agency benötigte außerdem eine Möglichkeit, die Selbstbeschreibung und Selbstverwaltung von Videodateien mit fortschrittlicher Objektspeichertechnologie und angepassten Metadaten-Verwaltungsfunktionen zu realisieren. Diese Funktionen trennen die Videodateien von der Datenbank, um zu unabhängigen, abfragbaren und zugänglichen Medien-Asset-Daten zu werden. Sie eliminieren Lesefehler der Banddaten aufgrund eines möglichen Ausfalls des Datenbanksystems.

Lösung

Xinhua News Agency entschied sich für den Aufbau einer audiovisuellen Unterbibliothek für die weltweit verbreitete Multimedia-Datenbank. Die Unterbibliothek ermöglicht es der Agentur, eine einheitliche Verwaltung von ihrem Hauptsitz und den ausländischen sowie inländischen Zweigstellen zu unterstützen, Ressourcen zu konsolidieren und die Verwaltungskosten aller Knoten zu senken. Sie ermöglicht der Agentur außerdem, eine solide Grundlage für die Entwicklung des TV- und New-Media-Geschäfts bereitzustellen.

Für dieses Projekt musste Xinhua News Agency durchschnittlich 120 Stunden Videodaten pro Tag verarbeiten, importieren und exportieren und die Videodatenanforderungen des TV-Geschäfts für 3 bis 5 Jahre erfüllen. Zudem wurde die Unterstützung für die audiovisuellen Datenarchivierungsanforderungen von Zweigstellen und die einheitliche Verwaltung und gemeinsame Nutzung von Videodaten in der gesamten Agentur spezifiziert.

Hitachi schlug eine auf der Objektspeichertechnologie Hitachi Content Platform 500XL (HCP 500XL) basierende Verwaltungslösung für Cloud-Medienressourcen vor, um die vom Unternehmen benötigten Online- und Archivspeichersysteme aufzubauen. Der Online-Speicher wird verwendet, um Hotspot-Videos, Bilder mit kritischen Frames und Videos mit niedriger Bitrate zu speichern, für die ein schneller Zugriff erforderlich ist. Darüber hinaus ersetzt der Archivspeicher die Bandbibliothek bei der Speicherung von Videodateien, die eine Langzeitarchivierung erfordern.

Das Online-Speichersystem umfasste die leistungsstarke Hitachi NAS Platform 4100 (HNAS 4100). Es steht Millionen von Intranetbenutzern der Xinhua News Agency zur Verfügung, um die Videos gleichzeitig zu durchsuchen und zu bearbeiten.

Der Archivspeicher basiert auf einer privaten Cloud, die es den Intranet- und Extranet-Benutzern von Xinhua News Agency ermöglicht, direkt darauf zuzugreifen, wodurch die Wartezeit für den Bandexport entfällt. Darüber hinaus konnte die Private Cloud-Lösung das Problem der zentralen Erfassung der Daten aus Dutzenden von Filialen lösen.

Hitachi implementierte einen Cluster mit hoher Verfügbarkeit mit zwei High-End-HNAS 4100-Gateways. Durch die Kombination der Gateways mit einem Hitachi Unified Storage 150 (HUS 150)-System entsteht ein äußerst zuverlässiges NAS-Speichersystem mit einer Bandbreite von bis zu 4 GB/s. Darüber hinaus stellen die ausreichenden Fibre Channel-Schnittstellen des HUS 150 einen SAN-basierten Speicherservice für den Datenbankserver bereit.

Außerdem sorgen sechs HCP 500XL-Gateways und ein HUS 150 für eine skalierbare Cloud-Speicherplattform. Die HCP verwendet Festplatten zum Speichern älterer Daten. Der Zugriff auf die Daten ist online über S3-, HTTP-, CIFS- oder NFS-Dateifreigabeprotokolle möglich. Um die hohe Bandbreitenanforderung des Medienressourcen-Verwaltungssystems zu erfüllen, stellt die HCP 500XL einen nachgewiesenen Durchsatz von 250 MB/s pro Gateway-Knoten bereit. Zudem kann die HCP 500XL die Anforderungen hinsichtlich Lese-/Schreibbandbreite für die archivierten Daten erfüllen und dennoch als „Online“-Speicher dienen. Diese mit dem objektbasierten HCP-System implementierte Cloud-Speicherplattform wurde entwickelt, um die Anforderungen an die Datenarchivierung sowie an die Datenfreigabe von Intranet- und Extranetdaten zu erfüllen.

Vor diesem Projekt mussten Journalisten in Zweigstellen der Xinhua News Agency die Videos per FTP in die Zentrale hochladen, was zu einer geringen Effizienz führte. Zur Lösung dieses Problems setzte Hitachi die VM-Software (Virtual Machine) Hitachi Data Ingestor (HDI) in den Niederlassungen ein. In Kombination mit der in der Zentrale bereitgestellten Cloud-Speicherplattform HCP kann die HDI-Software automatisch Daten aus Zweigstellen sammeln und schützen. HDI-VM-Software, die auf VMware ESX-Servern in den einzelnen Zweigstellen bereitgestellt wird, kann als elastisch skalierbares, Backup-freies NAS im LAN der Zweigstellen verwendet werden.

Vorteile

Vollständig digitale und stets verfügbare Medienressource. Vollständig digital zu sein bedeutet, dass die Speichermedien der ursprünglichen Medienressourcendaten von Bändern auf Festplatten und von offline auf online geändert werden. Darüber hinaus wird die Datenzuverlässigkeit verbessert und der Zugriff auf die Daten ist jederzeit möglich, wodurch Wartezeiten und Wartungsarbeiten entfallen.

Weniger Ausfallzeiten. Die HCP stellt eine extrem hohe Systemzuverlässigkeit bereit. Die zugrunde liegende RAID-Datensicherheit verhindert Datenverluste durch Festplattenausfälle, und der Replikationsmechanismus von HCP kann Geschäftsausfallzeiten vermeiden.

Datensicherheit. Die HCP stellt einen umfassenden Datensicherheitsmechanismus bereit. Zusätzlich zu drei Ebenen von Benutzerkennwörtern kann die HCP die Daten sogar mit der WORM-Funktion (Write Once, Read Many) sperren. Vor der angegebenen Zeit kann niemand die Datei löschen oder ändern. Dieser Ansatz gewährleistet die Authentizität und Genauigkeit der Datei.

Datensicherheit. Darüber hinaus kann die HCP auch eine Dateistatusprüfung und -selbstreparatur bereitstellen, um die Datenzuverlässigkeit zu verbessern. Mithilfe der Multicopy-Funktion erstellt es automatisch mehrere Kopien der Datei. Das System führt außerdem regelmäßig einen „Fingerabdruck“-Abgleich (Hash-Wert) für die Datei durch. Wenn es herausfindet, dass die Datei nicht mit dem „Fingerabdruck“ übereinstimmt, gilt die Datei als beschädigt. In diesem Fall ersetzt die HCP die beschädigte Datei automatisch durch eine andere intakte Kopie, um sicherzustellen, dass die Dateikopie immer in einem guten Zustand ist.

Erweiterte Metadatenverwaltung. Mithilfe einer fortschrittlicher Objektspeichertechnologie stellt das Cloud-Speichersystem der HCP eine benutzerdefinierte Metadatenverwaltung bereit. Die HCP kann den Inhalt von Dateiobjekten automatisch beschreiben, ohne auf Datenbanken oder Anwendungssysteme angewiesen zu sein. Daher empfiehlt Hitachi das Hinzufügen einer zusätzlichen Kopie der Metadaten für die Dateiobjekte, die über die APIs der HCP in der HCP geschrieben werden, während das IBM® Content Manager-System ersetzt wird. So können zwei Schutzebenen für die Metadaten bereitgestellt werden.

Zugriff auf Videodateien ist über das Extranet möglich. S3- und HTTP-Protokolle des HCP-Cloud-Speichersystems können Routing unterstützen. Infolgedessen können Intranet- und Extranetbenutzer in Echtzeit auf die in der Zentrale bereitgestellte HCP zugreifen. Das HTTP-Protokoll von HCP kann innerhalb von Abtrennvorrichtungen wie Firewalls und Air-Gaps eingesetzt werden, sodass der Zugriff auf die Videodateien über das Extranet möglich ist.

Automatisierte Erfassung von Daten aus Zweigstellen. Journalisten in Zweigstellen können die Videos schnell per LAN auf HDI hochladen und müssen so nicht lange in den Büros warten. HDI kopiert die Videodateien automatisch auf die Cloud-Speicherplattform der HCP in der Zentrale. Nach der Autorisierung kann die HDI-VM auch die Dateifreigabe zwischen Niederlassungen in verschiedenen Regionen unterstützen.

Hohe Skalierbarkeit. Automatisierte Archivierung bedeutet, dass die HDI-VM lokale veraltete Daten gemäß Richtlinien automatisch löschen kann. Dieser Ansatz kann Speicherplatz freigeben und für einen unbegrenzten Speicherressourcenpool sorgen. Die gelöschten Daten werden durch einen „Stub“ ersetzt, der auf das auf die HCP kopierte Datenreplik verweist. Der Benutzer merkt also nicht, dass die Datei archiviert wurde.

„Mit der HNAS- und HCP-Cloud-Speicherlösung wird Xinhua News Agency die erste Nachrichtenagentur, die in China Festplatten für die Speicherung von Streaming-Media-Assets einführt“, erklärt Jiao Lu, Leader of Cloud Media Asset Project Team, Audio-visual Data Division, Technology Department bei Xinhua News Agency. „Die Objektspeichertechnologie und die benutzerdefinierte Metadatenfunktion der HCP bieten Selbstbeschreibungsfunktionen unabhängig von der Datenbank und dem Anwendungssystem für Streaming-Mediendateien. Gleichzeitig kann das von der HCP angebotene standardmäßige HTTP-basierte Zugriffsprotokoll nicht nur die Wartezeit des Bandexports eliminieren, sondern auch Services für Benutzer aus externen Netzwerken bereitstellen. So kann die Reaktionsgeschwindigkeit beim Lesen und Schreiben von Streaming-Dateien erheblich verbessert werden“, ergänzt er. „Nach Abschluss der Systemimplementierung sind HNAS- und HCP-Cloud-Speicher zur zentralen Datenplattform für den TV-Service von Xinhua News Agency geworden.“