Recherche de site Web

Comment configurer la haute disponibilité pour Resource Manager – Partie 6

YARN est la couche de traitement de Hadoop, qui se compose des services maître (gestionnaire de ressources) et esclave (gestionnaire de nœuds) pour traiter les données. Resource Manager (RM) est le composant critique responsable de l’allocation et de la gestion des ressources parmi tous les travaux exécutés dans Hadoop Cluster.

Il est toujours recommandé d’activer la haute disponibilité du cluster (HA) sur les services critiques tels que Namenode et Resource Manager.

Exigences

  • Bonnes pratiques pour le déploiement de Hadoop Server sur CentOS/RHEL 7 – Partie 1
  • Configuration des prérequis Hadoop et du renforcement de la sécurité – Partie 2
  • Comment installer et configurer Cloudera Manager sur CentOS/RHEL 7 – Partie 3
  • Comment installer CDH et configurer les placements de service sur CentOS/RHEL 7 – Partie 4
  • Comment configurer la haute disponibilité pour Namenode - Partie 5

Dans cet article, nous allons voir les étapes pour activer la haute disponibilité sur Resource Manager.

Activation de la haute disponibilité sur Resource Manager

1. Accédez à Cloudera Manager aux adresses suivantes et accédez à YARN –> Actions –> Enable High Availability.

http://13.233.129.39:7180/cmf/home

2. Sélectionnez un serveur sur lequel vous allez avoir un deuxième gestionnaire de ressources. Habituellement, nous aurons un deuxième serveur maître pour déployer la haute disponibilité. Ici, nous sélectionnons master2 pour activer HA.

3. Une fois que le master2 a été sélectionné, cliquez sur « Continuer » pour continuer.

4. L’activation du processus HA sera lancée. Vous pouvez afficher les opérations en arrière-plan en cliquant sur chaque étape.

5. Une fois tous les processus terminés, vous obtiendrez le statut « Terminé ». Cliquez sur « Terminer ».

6. Vérifiez la haute disponibilité de Resource Manager en affichant les instances Yarn dans Cloudera Manager –> YARN –> Instances.

Vous pouvez voir deux Resource Manager, l’un sera dans l’état « Actif », l’autre sera dans « Standby ».

Conclusion

Dans cet article, nous avons décrit la procédure étape par étape pour activer la haute disponibilité sur Resource Manager. Chaque fois que le gestionnaire de ressources actif tombe en panne, le gestionnaire de ressources de secours devient actif afin que la production ne subisse pas de panne.

Articles connexes: