GNU/Linux >> Tutoriales Linux >  >> Cent OS

Cómo configurar la alta disponibilidad para Resource Manager - Parte 6

HILO es la capa de procesamiento de Hadoop , que consiste en el Maestro (Administrador de recursos ) y Esclavo (Node Manager) servicios para procesar los datos. Administrador de recursos (RM) es el componente crítico responsable de la asignación y administración de recursos entre todos los trabajos que se ejecutan en Hadoop Cluster .

Siempre se recomienda y es una buena práctica tener el Cluster High Availability (HA) habilitado en crítico servicios como Namenode y administrador de recursos .

Requisitos

  • Prácticas recomendadas para implementar el servidor Hadoop en CentOS/RHEL 7:parte 1
  • Configuración de los requisitos previos de Hadoop y fortalecimiento de la seguridad:Parte 2
  • Cómo instalar y configurar Cloudera Manager en CentOS/RHEL 7:parte 3
  • Cómo instalar CDH y configurar ubicaciones de servicios en CentOS/RHEL 7:parte 4
  • Cómo configurar alta disponibilidad para Namenode - Parte 5

En este artículo, veremos los pasos para habilitar Alta disponibilidad en Administrador de recursos .

Habilitación de alta disponibilidad en Resource Manager

1. Vaya a Administrador de Cloudera en las siguientes direcciones y vaya a YARN –> Acciones –> Habilitar alta disponibilidad .

http://13.233.129.39:7180/cmf/home

2. Selecciona un servidor donde vas a tener un segundo Resource Manager . Por lo general, tendremos un segundo servidor maestro para implementar la alta disponibilidad. Aquí, estamos seleccionando master2 para habilitar HA .

3. Una vez seleccionado el maestro2 , haga clic en 'Continuar ' para continuar.

4. Habilitación de HA se iniciará el proceso. Puede ver las operaciones en segundo plano haciendo clic en cada paso.

5. Una vez que se completen todos los procesos, obtendrá 'Terminado ' estado. Haga clic en 'Finalizar '.

6. Verificar el Administrador de recursos Alta disponibilidad al ver el Yarn instancias en Cloudera Manager –> HILO –> Instancias .

Puede ver dos Gestor de recursos , uno estará en el estado 'Activo ', otro estará en 'Standby '.

Conclusión

En este artículo, hemos seguido el procedimiento paso a paso para habilitar la alta disponibilidad. en Administrador de recursos . Siempre que el Administrador de recursos activos se cae, el Administrador de recursos en espera se volverá Activo para que la producción no tenga interrupciones.


Cent OS
  1. Cómo configurar accesos directos de escritorio para cPanel

  2. Cómo configurar children-max para el servicio udev en CentOS/RHEL 7

  3. Cómo establecer valores ulimit para un servicio systemd

  4. Cómo establecer la ruta para los comandos sudo

  5. ¿Cómo configurar umask para un usuario del sistema?

Cómo configurar Redis para alta disponibilidad con Sentinel en CentOS 8 – Parte 2

Cómo configurar la alta disponibilidad para Namenode - Parte 5

Cómo instalar y configurar Hive con alta disponibilidad:parte 7

Cómo configurar la alta disponibilidad para Resource Manager - Parte 6

¿Cómo configurar Tls para Postfix en Ubuntu?

Cómo configurar una red externa para contenedores en contenedores de Linux (LXC)