Chat with us, powered by LiveChat
Home > Backup de dados corporativos > Plug-ins Сorporativos > Software de backup e recuperação do Hadoop HDFS

Proteja lagos de dados do Hadoop, conjuntos de dados de pesquisa e exportações de aplicativos com o plug-in Bacula Enterprise HDFS. Execute backups completos, incrementais e diferenciais. Restaure arquivos selecionados no HDFS ou em um sistema de arquivos local.

Conecte-se ao Hadoop a partir de um host do Bacula File Daemon e gerencie agendas de backup, retenção e monitoramento do HDFS juntamente com suas outras cargas de trabalho protegidas.

 

Baixar versão de avaliação

Benefícios do plug-in HDFS do Bacula

Recupere os arquivos de que você precisa. Restaure um arquivo ou conjunto de dados excluído sem precisar recuperar todo o diretório protegido. Escolha um destino separado quando precisar validar os dados antes de devolvê-los à produção.

Reduza o trabalho repetitivo de backup. Quando um snapshot anterior adequado estiver disponível, as tarefas incrementais e diferenciais utilizam as diferenças do snapshot do HDFS para identificar os arquivos alterados. Isso pode reduzir a quantidade de dados que cada tarefa precisa ler e transferir.

Mantenha as cópias de backup separadas do Hadoop. Armazene os backups do Bacula fora do cluster HDFS de produção para que você tenha uma cópia de recuperação caso o cluster e seus snapshots fiquem indisponíveis.

Incorpore o Hadoop às suas operações de backup existentes. Programe tarefas do HDFS, monitore seus resultados e aplique políticas de retenção de backup juntamente com o restante da sua infraestrutura gerenciada pelo Bacula.

Principais recursos do plug-in HDFS do Bacula

Recursos de backup

  • Backups completos, incrementais e diferenciais baseados em instantâneos. Um backup completo lê a partir de um instantâneo do diretório HDFS configurado. As tarefas incrementais e diferenciais comparam instantâneos. Se o plug-in não conseguir localizar o instantâneo anterior de que necessita, ele recorre a uma varredura completa do instantâneo atual.
  • Filtros de arquivos e caminhos. Use padrões glob ou expressões regulares para incluir arquivos e caminhos críticos ou excluir dados temporários e reproduzíveis.
  • Gerenciamento configurável de instantâneos. Escolha o diretório HDFS a ser instantaneado e se o Bacula deve manter o instantâneo após a tarefa. Liste os diretórios habilitados para instantâneos e consulte seus inventários de instantâneos.
  • Concorrência de backup ajustável. Ajuste a concorrência dos trabalhadores e o tamanho da fila para corresponder à capacidade disponível do cluster e da rede.

Recursos de recuperação

  • Restauração em nível de arquivo. Selecione os arquivos a serem recuperados e direcione a restauração para o HDFS ou para um caminho local no host do File Daemon.
  • Restaure para um diretório HDFS separado. Por exemplo, restaure os arquivos de uma partição Parquet excluída para um diretório de preparação no HDFS para validação antes de devolvê-los ao caminho de produção.

Requisitos da plataforma e autenticação

  • Implantação do File Daemon. O plug-in requer Java 8 ou posterior, acesso de rede ao cluster HDFS e um diretório base com suporte a snapshots.
  • Autenticação simples e Kerberos. Conecte-se usando o modo exigido pelo seu ambiente Hadoop. Carregue os arquivos de configuração do cliente Hadoop e forneça um principal e um keytab para o Kerberos.

Recursos de segurança cibernética do Bacula Enterprise

Proteja a conexão com o Hadoop e a infraestrutura que armazena seus backups. As opções de segurança do Bacula Enterprise dependem da sua configuração, do destino de armazenamento e da carga de trabalho.

Arquitetura e Controle de Acesso

  • Isole a infraestrutura de backup. Para um isolamento mais robusto, implante o plug-in em um host dedicado ao File Daemon com acesso aos serviços HDFS necessários. Mantenha o armazenamento de backup separado e restrinja o acesso a partir da rede de produção do Hadoop.
  • Controle quem pode operar tarefas de backup e restauração. Use funções e permissões do Bacula para limitar quem pode executar tarefas do HDFS, iniciar restaurações ou acessar recursos de backup. Habilite a autenticação multifatorial para interfaces administrativas compatíveis.

Imutabilidade e cópias offline

  • Cópias de backup online imutáveis. Utilize armazenamento em disco ou objeto imutável compatível para proteger as cópias de backup HDFS retidas contra modificações ou exclusões.
  • Cópias em fita WORM offline. Grave uma cópia secundária em fita compatível com o padrão WORM (write-once, read-many). Ejetar a fita e armazená-la offline para manter a cópia fora do alcance de ataques baseados em rede.

Autenticação e criptografia

  • Segurança da conexão com o Hadoop. Use o Kerberos para autenticar o plug-in em um cluster HDFS compatível com Kerberos. Configure a criptografia para essa conexão por meio das configurações do cliente Hadoop.
  • Criptografia para backups do Bacula. Utilize TLS entre os componentes do Bacula e configure a criptografia em repouso para os dados de backup armazenados.

Detecção de ameaças

  • Monitore a segurança dos backups com o BGuardian. Utilize o BGuardian para revisar a configuração de segurança do ambiente Bacula e sinalizar comportamentos incomuns nas tarefas de backup ou vulnerabilidades que possam colocar as cópias de recuperação em risco.
  • Verificações de assinaturas de malware. Quando configurado para cargas de trabalho compatíveis, o Bacula pode comparar assinaturas de arquivos com um banco de dados de malware conhecido e sinalizar correspondências para investigação.

O que toda implantação do Bacula Enterprise inclui

O plug-in HDFS faz parte da plataforma de backup e recuperação do Bacula Enterprise. Utilize as mesmas ferramentas de gerenciamento, políticas de armazenamento e processos de recuperação em toda a sua infraestrutura protegida.

Gerenciamento e administração de backups

  • Administração centralizada de tarefas. Configure agendas de backup de forma centralizada, gerencie tarefas no BWeb Management Suite e utilize o Bconsole para administração por linha de comando e automação.
  • Relatórios e histórico de tarefas. Use o BWeb para analisar os resultados das tarefas e as estatísticas históricas de backup, para que você possa identificar falhas recorrentes ou alterações na duração das tarefas.

Políticas de armazenamento e cópia de backup

  • Armazenamento flexível de backup. Escolha entre armazenamento em disco, fita ou objeto na nuvem, conforme os requisitos de recuperação e retenção. Use tarefas de cópia para manter um backup adicional em um nível de armazenamento separado ou em outro local.
  • Retenção por pool de armazenamento. Defina períodos de retenção de volume diferentes para pools de backup operacionais e cópias de vida útil mais longa. Gerencie-os separadamente da retenção de snapshots no HDFS.

Cobertura de backup em múltiplos ambientes

  • Cobertura em toda a sua infraestrutura. Proteja servidores físicos, máquinas virtuais, bancos de dados, contêineres e outras cargas de trabalho compatíveis por meio da mesma plataforma, com integrações dedicadas, quando disponíveis.
  • Recuperação de sistemas para Windows e Linux. Use as ferramentas de recuperação bare-metal do Bacula Enterprise para reconstruir sistemas Windows e Linux compatíveis após uma falha do sistema.

Assinatura e suporte

  • Preços de assinatura independentes do volume de dados. O Bacula Enterprise não cobra por terabyte protegido. Pergunte à Bacula qual nível de assinatura e suporte se adequa à sua implantação.
  • Suporte técnico e atualizações de software. As assinaturas do Bacula Enterprise incluem suporte técnico, patches e atualizações de versão. Selecione um nível de suporte que atenda aos seus requisitos operacionais.

Perguntas frequentes

O que o plug-in Bacula Enterprise para HDFS faz backup?

O plug-in protege arquivos armazenados no Sistema de Arquivos Distribuído do Hadoop (HDFS), como arquivos de data lake, exportações de aplicativos e conjuntos de dados de pesquisa. Planeje uma proteção separada para configurações de serviço do Hadoop, metastores externos e outros componentes necessários para a execução de seus aplicativos.

Por que fazer backup do Hadoop se o HDFS já replica os dados?

A replicação do HDFS mantém os dados disponíveis quando os nós de armazenamento falham. Quando o Bacula armazena um backup fora do cluster de produção, essa cópia pode facilitar a recuperação caso o cluster e seus snapshots sejam perdidos. O Bacula usa snapshots do HDFS como fonte de um momento específico para seus backups.

O que é necessário para executar o plug-in de backup do HDFS?

Instale o plug-in em um host do Bacula Enterprise File Daemon com Java 8 ou posterior e acesso de rede ao cluster HDFS. Habilite instantâneos no diretório raiz do HDFS selecionado para cada tarefa de backup e conceda à identidade de backup as permissões necessárias. Para o Kerberos, configure os principais e o keytab relevantes no host do File Daemon.

Como funcionam os backups incrementais e diferenciais do HDFS?

O Bacula cria um snapshot do diretório configurado e o compara com um snapshot anterior do Bacula para identificar alterações. Se esse snapshot não estiver disponível, a tarefa verifica o snapshot completo atual. Mantenha os snapshots exigidos pela sua programação de backup e gerencie a retenção de backups do Bacula separadamente.

Posso restaurar um arquivo individual do HDFS ou recuperá-lo fora do Hadoop?

Sim. Selecione os arquivos necessários e restaure-os em seu local original no HDFS, em outro diretório no HDFS ou em um caminho local no host do File Daemon.

O plug-in do HDFS preserva as ACLs e os atributos estendidos?

O plug-in atual não captura listas de controle de acesso (ACLs) do HDFS, atributos estendidos, horários de criação de arquivos, diretórios vazios ou atributos de diretório. Se o seu plano de recuperação depender de qualquer um desses itens, documente como você os recriará e verifique o processo em um teste de restauração.

O plug-in HDFS está disponível na Bacula Community?

O plug-in HDFS está disponível com o Bacula Enterprise. Compartilhe sua distribuição do Hadoop, versão do HDFS e requisitos de restauração com a Bacula Systems para discutir compatibilidade e opções de avaliação.

Mais ajuda sobre backup do Hadoop