YARN und ZooKeeper - Vertiefung

Ziele

In diesem Vertiefungs-Workshop lernt der Teilnehmer Details zu YARN und ZooKeeper kennen und übt den grundsätzlichen Umgang mit diesen Diensten anhand praktischer, aufeinander aufsetzenden Übungen.

Zielgruppe

(IT-)Architekt, (IT-)Entwickler

Voraussetzungen

Linux-Grundkenntnisse sowie Grundkenntnisse über „Big Data“ und Hadoop. Idealerweise ist das Seminar Hadoop Überblick absolviert worden.

Agenda

Einführung (ca. 60 Minuten)
In diesem Abschnitt wird der zur Verfügung stehende Hadoop-Cluster auf Basis HortonWorks HDP mit vier Knoten vorgestellt.

YARN im Detail (ca. 60 Minuten)
Das Resource Management YARN wird im Detail vorgestellt.

ZooKeeper im Detail (ca. 60 Minuten)
Das Process Management ZooKeeper wird im Detail vorgestellt.

HandsOn: Verwendung von Labels (ca. 60 Minuten)
Das Prinzip der Verwendung von Labels wird vorgestellt und evaluiert.

HandsOn: Verwendung von Queues (ca. 120 Minuten)
Die Teilnehmer evaluieren die Möglichkeiten der Steuerung von Ressourcen mit Queues.

HandsOn: Verwendung von CGroups (ca. 120 Minuten)
Das Prinzip der Steuerung von Ressourcen mit CGroups wird vorgestellt und evaluiert.

HandsOn: Generierung von Prozessen (ca. 120 Minuten)
Das Prinzip der Prozessgenerierung für ZooKeeper wird vorgestellt und evaluiert.

HandsOn: Analyse von Prozessen (ca. 90 Minuten)
Die Möglichkeiten der Analyse von Prozessen werden vorgestellt und evaluiert.

HandsOn: Modifikation von Prozessen (ca. 90 Minuten)
Die Möglichkeiten der Einflussnahme auf Prozesse werden vorgestellt und evaluiert

Zusammenfassung (ca. 60 Minuten)
Zum Abschluss werden die Ergebnisse zusammengefasst und die durchgeführten Übungen auf ihre Praxistauglichkeit bewertet.