Pesquisa de site

Como configurar alta disponibilidade para Resource Manager – Parte 6

YARN é a camada de processamento do Hadoop, que consiste no Mestre (Gerenciador de Recursos) e no Escravo (Node Manager) serviços para processar os dados. O Resource Manager (RM) é o componente crítico responsável pela alocação e gerenciamento de recursos entre todos os trabalhos em execução no Hadoop Cluster.

É sempre recomendado e uma prática recomendada ter a Alta disponibilidade de cluster (HA) habilitada em serviços críticos como Namenode e Resource Manager.

Requisitos

  • Melhores práticas para implantação do servidor Hadoop no CentOS/RHEL 7 – Parte 1
  • Configurando pré-requisitos do Hadoop e reforço de segurança – Parte 2
  • Como instalar e configurar o Cloudera Manager no CentOS/RHEL 7 – Parte 3
  • Como instalar o CDH e configurar posicionamentos de serviço no CentOS/RHEL 7 – Parte 4
  • Como configurar alta disponibilidade para Namenode – Parte 5

Neste artigo, veremos as etapas para ativar a alta disponibilidade no Gerenciador de recursos.

Habilitando alta disponibilidade no Resource Manager

1. Acesse Cloudera Manager nos seguintes endereços e navegue até YARN –> Ações –> Ative a alta disponibilidade.

http://13.233.129.39:7180/cmf/home

2. Selecione um servidor onde você terá um segundo Gerenciador de Recursos. Normalmente, teremos um segundo servidor mestre para implantar alta disponibilidade. Aqui, selecionamos master2 para ativar HA.

3. Uma vez selecionado o master2, clique em ‘Continuar’ para prosseguir.

4. O processo de ativação de HA será iniciado. Você pode visualizar as operações em segundo plano clicando em cada etapa.

5. Assim que todos os processos forem concluídos, você receberá o status ‘Concluído’. Clique em ‘Concluir’.

6. Verifique a alta disponibilidade do Resource Manager visualizando as instâncias do Yarn em Cloudera Manager –> YARN –> Instâncias.

Você pode ver dois Gerenciadores de recursos, um estará no estado ‘Ativo’, outro estará em ‘Em espera’.

Conclusão

Neste artigo, seguimos o procedimento passo a passo para ativar a alta disponibilidade no Gerenciador de recursos. Sempre que o Gerenciador de recursos ativos ficar inativo, o Gerenciador de recursos em espera se tornará Ativo para que a produção não sofra interrupções.