Backup e Recuperação de Dados em HPC e Big Data

Bacula: Imbatível em ambientes de HPC e Super Computação.

Os centros de HPC trabalham intensivamente para modernizar sua infraestrutura de TI para enfrentar os desafios do amanhã. Seus centros de TI enfrentam um desafio contínuo de adaptar e melhorar suas operações para se manterem flexíveis e oferecerem as últimas funcionalidades em questão de desempenho. Novas e diferentes abordagens de segurança, eficiência e desempenho são necessárias (e estão de fato sendo adotadas atualmente) para conseguir essas melhorias.

“Dos avaliados, o Bacula Enterprise foi o único produto que funcionou com o HPSS sem desenvolvimento de fornecedores, forneceu acesso multiusuário (BWeb), tinha criptografia compatível com os Padrões Federais de Processamento de Informação, não tinha um modelo de licenciamento baseado em volume, e estava disponível dentro do orçamento”  –  NASA

Com base no seu puro Código Aberto, o Bacula Enterprise suporta perfeitamente os sistemas de arquivos compatíveis com a Posix, ajudando você a evitar o aprisionamento tecnológico. Além disso, todos os sistemas de arquivos que podem ser montados em um host Linux ou Windows podem ser usados, incluindo sistemas de arquivos paralelos e clustered, tais como Lustre ou Quobyte. Os sistemas de arquivos POSIX são o sistema de armazenamento mais comum em uso atualmente, proporcionando uma ampla gama de funções de E/S para as aplicações a serem usadas, inclusive acesso a nível de bytes. No entanto, com o grande número de funções de E/S vem a complexidade, tanto para a aplicação, como para o sistema de arquivos. O Bacula ajuda os usuários de HPC a reduzir significativamente a complexidade por ser um sistema de arquivo independente. Logo a seguir, está uma lista com alguns dos sistemas de arquivos que os clientes da Bacula Systems usam:

• ext 2|3|4
• xfs
• ReiserFS
• BeeGFS
• GlusterFS
• GFS
• GPFS
• Hadoop *
• HPSS
• Lustre
• Quobyte
• ZFS
• Swift *

*requer um módulo do Bacula Enterprise (plugin)

Como uma solução comprovada de backup e recuperação para HPC com desempenho especialmente alto, o Bacula pode lidar com grandes volumes de dados com facilidade. Com a crescente necessidade de soluções para HPC e de melhorias adicionais em tecnologia, as organizações estão voltando sua atenção para áreas como as soluções híbridas de HPC. A Bacula prevê que as melhorias tecnológicas e de inovação no espaço de HPC irão aumentar, especialmente em áreas específicas como Nuvem Híbrida, computação de ponta, tecnologias de containers e abordagens de segurança. Como as equipes de TI trabalham duro para criar um equilíbrio entre as soluções de HPC locais e em nuvem, o Bacula fornece uma maneira de proteger e recuperar esses ambientes inteiros a partir de uma única plataforma.

Para ambientes de HPC que têm petabytes de dados para armazenar, a fita pode ainda ser a melhor opção para arquivos de longo prazo e para alcançar os RPO’s. Ela também é muito eficaz no que diz respeito às exigências de retenção e preservação de mídia. Os atuais drives de fita LTO-08 e LTO-9 têm especificações impressionantes, incluindo taxas de transferência de até 400 MB/seg. nativos, e armazenamento de até 18 TB de capacidade bruta e 45 TB de capacidade comprimida. O Bacula Enterprise é ideal para administradores de fita, pois nunca licenciamos com base no volume de dados e entregamos recursos únicas, tais como o suporte para ACSLS. O Bacula suporta bibliotecas de fitas de todos os principais fabricantes do mundo e fornece todas as operações de gerenciamento de bibliotecas de fitas. Ele também suporta acesso nomeado pelo usuário ao ACSLM, unidade de fita e bloqueio de volume em ambiente compartilhado ACSLS, consulta e gerenciamento de bloqueio, mapeamento de localização de unidade de fita estática e mapeamento dinâmico de localização de volume.

A compatibilidade especialmente ampla do Bacula com as tecnologias de HPC está contribuindo para uma mudança positiva nas tecnologias e ferramentas para automatizar processos, e para aplicar uma governança consistente em laboratórios ou organizações de pesquisa de HPC Federais/Nacionais. Por exemplo, o Bacula oferece integração nativa com tecnologias como Hadoop, Docker, Kubernetes, SAP Hana, GPFS, etc. O Bacula suporta mais de 33 sistemas operacionais diferentes!

À medida que mais agências de pesquisa e governamentais com base em HPC mudam para o uso do Bacula, um padrão de necessidades surge claramente dessas organizações, assim como as razões pelas quais essa mudança ocorre. O White Paper da Bacula Systems “Backup e Recuperação de Dados em Agências Federais e Nacionais de Pesquisa” discute as considerações e vantagens de usar a conformidade com o FIPS 140-2 do Bacula Enterprise como um sistema central de backup e recuperação de dados dentro de organizações de pesquisa, e como ele pode (e consegue) facilitar uma parte específica, porém crítica, na abordagem de modernização digital dessas organizações.

Grande divisão de arquivos de backup

Este recurso do Bacula faz o backup de um grande número de arquivos com uma velocidade e eficiência ideais, dividindo a carga de trabalho em um número de trabalhadores (processos de backup simultâneos). O Large Backup File Split do Bacula economiza um tempo significativo em ambientes HPC ao lidar com conjuntos de dados muito grandes. Ele pode funcionar com qualquer tipo de sistema de arquivos, e o backup é gerenciado automaticamente pelo Bacula. Isso é aplicável a qualquer caso de uso de servidor de arquivos ou NAS.

Outro atrativo da automação desse processo pelo Bacula é sua capacidade de reduzir a possibilidade de erro humano, além de ser totalmente dinâmico, o que significa que não é necessário nenhum processo de atualização de configuração, independentemente de qualquer alteração na estrutura ou no tamanho do conjunto de dados de destino.

Essa ferramenta pode ajudar principalmente quando há muitos usuários, o que resulta em uma estrutura de pastas complexa e muitos arquivos diferentes. Esse tipo de estrutura de arquivos pode estar sendo usado literalmente por todos (por exemplo, público/privado, usuários internos da empresa, situações de dados compartilhados, etc.). Mais detalhes estão disponíveis no white paper HPC do Bacula.