Website-Suche

So richten Sie Hochverfügbarkeit für Resource Manager ein – Teil 6

YARN ist die Verarbeitungsschicht von Hadoop, die aus dem Master (Ressourcenmanager) und dem Slave besteht (Node Manager)-Dienste zur Verarbeitung der Daten. Resource Manager (RM) ist die kritische Komponente, die für die Ressourcenzuweisung und -verwaltung aller im Hadoop-Cluster ausgeführten Jobs verantwortlich ist.

Es wird immer empfohlen und bewährt, die Cluster High Availability (HA) für kritische Dienste wie Namenode und Resource Manager< zu aktivieren.

Anforderungen

  • Best Practices für die Bereitstellung von Hadoop Server unter CentOS/RHEL 7 – Teil 1
  • Einrichten von Hadoop-Voraussetzungen und Sicherheitshärtung – Teil 2
  • So installieren und konfigurieren Sie den Cloudera Manager unter CentOS/RHEL 7 – Teil 3
  • So installieren Sie CDH und konfigurieren Service-Platzierungen unter CentOS/RHEL 7 – Teil 4
  • So richten Sie Hochverfügbarkeit für Namenode ein – Teil 5

In diesem Artikel sehen wir die Schritte zum Aktivieren von Hoher Verfügbarkeit im Resource Manager.

Aktivieren der Hochverfügbarkeit im Resource Manager

1. Gehen Sie zu Cloudera Manager unter den folgenden Adressen und navigieren Sie zu YARN –> Aktionen –> Aktivieren Sie hohe Verfügbarkeit.

http://13.233.129.39:7180/cmf/home

2. Wählen Sie einen Server aus, auf dem Sie einen zweiten Ressourcenmanager haben möchten. Normalerweise verfügen wir über einen zweiten Masterserver, um Hochverfügbarkeit bereitzustellen. Hier wählen wir master2 aus, um HA zu aktivieren.

3. Sobald Sie master2 ausgewählt haben, klicken Sie auf „Weiter“, um fortzufahren.

4. Der Aktivierungsprozess für HA wird gestartet. Sie können die Hintergrundvorgänge anzeigen, indem Sie auf die einzelnen Schritte klicken.

5. Sobald alle Prozesse abgeschlossen sind, erhalten Sie den Status „Fertig“. Klicken Sie auf „Fertig stellen“.

6. Überprüfen Sie die Hochverfügbarkeit des Resource Manager, indem Sie die Yarn-Instanzen unter Cloudera Manager –> YARN“ anzeigen –> Instanzen.

Sie sehen zwei Ressourcenmanager, einer befindet sich im Status „Aktiv“, ein anderer im Status „Standby“.

Abschluss

In diesem Artikel haben wir Schritt für Schritt die Vorgehensweise zum Aktivieren von Hoher Verfügbarkeit im Resource Manager beschrieben. Immer wenn der Aktive Ressourcenmanager ausfällt, wird der Standby-Ressourcenmanager Aktiv, sodass die Produktion nicht ausfällt.