Hadoop Betrieb

Objectives

In diesem Kurs erhalten Sie einen Einblick in die Abläufe des Betriebes und der Verwaltung eines Hadoop-Clusters. Dabei lernen Sie verschiedenene Anforderungen zu erkennen und den Einsatz unterschiedlicher Werkzeuge anhand von Übungen.

Target audience

• Administratoren
• Betreiber

Requirements

• Linux Grundkenntnisse
• Big Data und Hadoop Kenntnisse
• Hadoop Installation ist vorteilhaft

Agenda

Einführung

Sie lernen den zur Verfügung stehenden Hadoop-Cluster auf Basis HortonWorks HDP mit vier Knoten kennen.

Cluster oder Dienste starten/anhalten

In diesem Abschnitt wird vermittelt, wie Dienste gestartet und gestoppt werden.

Knoten hinzufügen und entfernen

In diesem Abschnitt wird dargestellt, wie Sie einen Knoten aus dem Verbund entfernen und ein neuer Knoten dem Cluster hinzufügen können.

Upgrade

Dieser Abschnitt widmet sich dem Upgrade des Hadoop-Clusters

Archivierung

In diesem Abschnitt werden Möglichkeiten der Archivierung vorgestellt.

Komprimierung

Dieser Abschnitt stellt Ansätze zur Komprimierung von Daten vor.

Kapazitätsausgleich

Verschiedene Situationen erfordern eine Balancierung zwischen den Knoten. In diesem Abschnitt wird das Handwerkszeug vermittelt.

Logging und Monitoring

Schwerpunkt dieses Abschnittes sind die Logging- und Monitoring-Möglichkeiten im Hadoop-Umfeld.