Betrieb, Optimierung und Instandhaltung eines Hadoop-Clusters

Objectives

In diesem Kurs lernen Sie Überwachungsmechanismen für den Hadoop-Cluster zu implementieren, Wartungsaufgaben durchzuführen und den Cluster zu sichern, zu erweitern sowie zu skalieren. Zusätzlich erhalten sie einen Einblick in die verschiedenen Logdateien des Clusters.

Target audience

Systemadministratoren

Requirements

• Grundkenntnisse über die Installation und Infrastruktur des Hadoop Clusters (z.B. durch Aufbau eines Hadoop-Clusters)
• Fundierte Kenntnisse in der Administration von Unix-Systemen
• Kenntnisse in Ganglia und/oder Nagios
• XML-Kenntnisse

Agenda

Theorie

• Überblick verschiedene Verwaltungssysteme von Hadoop
• Überblick Überwachungsmöglichkeiten von Hadoop
• Überblick Sicherungs- und Wiederherstellungskonzept

Praxis

• Analyse der Logdateien des Hadoop-Clusters
• Überwachung mit
  • Chukwa und Ambari
  • Ganglia
  • Nagios
• Sicherung und Wiederherstellung des Clusters
• Optimierung

Abschluss

• Zusammenfassung
• Ausblick
• Fragen und Antworten