Sauvegarde et récupération des données dans le domaine du HPC et du Big Data

Bacula : Imbattable dans les environnements HPC et Super Computing.

Les centres de calcul haute performance s’efforcent généralement de moderniser leur infrastructure informatique pour répondre aux besoins de demain qui arrivent rapidement. Leurs centres informatiques sont confrontés au défi permanent d’adapter et d’améliorer leurs opérations informatiques afin de rester flexibles et d’offrir les dernières capacités de performance. De nouvelles approches différentes en matière de sécurité, d’efficacité et de performance sont nécessaires – et sont d’ailleurs actuellement adoptées – pour réaliser ces améliorations.

Conformément à son pedigree Open Source, Bacula Enterprise supporte parfaitement les systèmes de fichiers conformes à Posix, ce qui vous permet d’éviter le verrouillage par un  fournisseur. De plus, tous les systèmes de fichiers qui peuvent être montés sur un hôte Linux ou Windows peuvent être utilisés, y compris les systèmes de fichiers parallèles et en grappe tels que Lustre ou Quobyte. Les systèmes de fichiers POSIX sont les systèmes de stockage les plus couramment utilisés aujourd’hui. Ils offrent aux applications un large éventail de fonctions d’entrée/sortie, y compris l’accès au niveau de chaque octet. Cependant, le grand nombre de fonctions d’E/S entraîne une complexité, tant pour l’application que pour le système de fichiers. Bacula aide les utilisateurs HPC à réduire significativement cette complexité en étant agnostique vis-à-vis des systèmes de fichiers. Voici une liste non exhaustive des systèmes de fichiers utilisés par les clients de Bacula Systems :

• ext 2|3|4
• xfs
• ReiserFS
• BeeGFS
• GlusterFS
• GFS
• GPFS
• Hadoop *
• HPSS
• Lustre
• Quobyte
• ZFS
• Swift *

* nécessite un module Bacula Enterprise (plugin)

En tant que solution de sauvegarde et de restauration HPC reconnue et particulièrement performante, Bacula peut gérer facilement de vastes volumes de données. Avec le besoin croissant de solutions HPC et de nouvelles améliorations technologiques, les organisations se tournent vers des domaines tels que les solutions HPC hybrides. Bacula prévoit que les améliorations de la technologie et de l’innovation dans l’espace HPC vont augmenter, en particulier dans des domaines spécifiques tels que le Cloud hybride, le edge compute, les technologies de conteneurs et les approches de sécurité. Alors que les équipes informatiques s’efforcent de créer un équilibre entre les solutions HPC sur site et le cloud, Bacula offre un moyen de protéger et de restaurer ces environnements entiers à partir d’une plateforme unique.

Pour les environnements HPC qui ont des pétaoctets de données à stocker, la bande peut encore être la meilleure option pour l’archivage à long terme et le respect des RPO. Elle est également très efficace pour répondre aux exigences de conservation et de préservation des supports. Les lecteurs de bandes LTO-08 et LTO-9 d’aujourd’hui ont des caractéristiques impressionnantes, notamment des taux de transfert allant jusqu’à 400 Mo/sec. en natif, et une capacité de stockage de 18 To en brut et de 45 To en compressé. Bacula Enterprise est idéal pour les administrateurs de bandes car nous n’accordons pas de licence en fonction du volume de données et offrons des fonctionnalités uniques telles que le support ACSLS. Bacula supporte les librairies de bandes des principaux fabricants mondiaux et fournit toutes les opérations de gestion de librairies de bandes. Il supporte également l’accès des utilisateurs nommés à l’ACSLM, le verrouillage des lecteurs de bandes et des volumes dans un environnement ACSLS partagé, la recherche et la gestion des verrous, le mappage statique des lecteurs de bandes et le mappage dynamique des volumes.

La compatibilité particulièrement large de Bacula avec les technologies HPC contribue à un changement positif des technologies et des outils pour automatiser les processus et appliquer une gouvernance cohérente à travers un laboratoire fédéral/national HPC ou des organisations de recherche. Par exemple, Bacula offre une intégration native avec des technologies telles que Hadoop, Docker, Kubernetes, SAP Hana, GPFS, etc.

Alors que de plus en plus d’organismes de recherche et d’organismes gouvernementaux axés sur le HPC passent à l’utilisation de Bacula, un modèle de besoins émerge clairement de ces organisations, ainsi que les raisons pour lesquelles ce changement a lieu. Le livre blanc de Bacula Systems « Data Backup and Recovery in Federal and National Research Agencies » traite des considérations et des avantages de l’utilisation de Bacula Enterprise, conforme à la norme FIPS 140-2, en tant que système central de sauvegarde et de restauration des données au sein des organismes de recherche, et de la manière dont il peut – et facilite – un rôle spécifique, mais essentiel, dans l’approche globale de la modernisation numérique de ces organisations.

Séparation d’un grand nombre de fichiers de sauvegarde

Cette fonctionnalité de Bacula permet de sauvegarder un grand nombre de fichiers avec une vitesse et une efficacité optimales en divisant la charge de travail en un certain nombre de travailleurs (processus de sauvegarde simultanés). La fonction « Large Backup File Split » de Bacula permet de gagner un temps considérable dans les environnements HPC lorsqu’il s’agit de traiter de très grands ensembles de données. Il peut fonctionner avec n’importe quel type de système de fichiers, et la sauvegarde est automatiquement gérée par Bacula. Ceci est applicable à n’importe quel serveur de fichiers ou NAS.

Un autre attrait de l’automatisation de ce processus par Bacula est sa capacité à réduire le risque d’erreur humaine, ainsi que son caractère entièrement dynamique, ce qui signifie qu’aucun processus de mise à jour de la configuration n’est nécessaire, quels que soient les changements dans la structure ou la taille de l’ensemble de données cible.

Cet outil est particulièrement utile lorsqu’il y a de nombreux utilisateurs, ce qui entraîne une structure de dossiers complexe et un grand nombre de fichiers différents. Ce type de structure de fichiers peut littéralement être utilisé par tout le monde (par exemple, public/privé, utilisateurs internes de l’entreprise, situations de données partagées, etc.) Vous trouverez plus de détails dans le livre blanc HPC de Bacula.