Flume - Vertiefung

Objectives

In diesem Vertiefungs-Workshop lernt der Teilnehmer den grundsätzlichen Umgang mit Flume anhand praktischer, aufeinander aufsetzenden Übungen.

Target audience

(IT-)Architekt, (IT-)Entwickler

Requirements

Praktische Erfahrung in der IT-Informationsverarbeitung erforderlich. Linux-Grundkenntnisse sowie Kenntnisse über „Big Data“, Hadoop und Java werden vorausgesetzt. Idealerweise ist das Seminar Hadoop Überblick absolviert worden.

Agenda

Einführung (ca. 60 Minuten)
In diesem Abschnitt wird der zur Verfügung stehende Hadoop-Cluster auf Basis HortonWorks HDP mit vier Knoten vorgestellt.

Flume im Detail (ca. 60 Minuten)
In diesem Abschnitt wird Flume im Detail vorgestellt.

Installation und Konfiguration von Flume (ca. 60 Minuten)
In diesem Abschnitt wird das Zusammenwirken von Flume mit anderen Komponenten im Hadoop-Cluster vorgestellt sowie verschiedene Aspekte der Installation und Konfiguration von Flume behandelt.

HandsOn: Programmierung von Quellen und Senken für Flume (ca. 60 Minuten)
Dieser Abschnitt behandelt schwerpunktmäßig die Erstellung von Quellen und Senken für Flume.

HandsOn: Aufbreitung und Speicherung von Logdaten mit Flume (ca. 120 Minuten)
In diesem Abschnitt wird eine praktische Aufgabenstellung mit Flume umgesetzt.

HandsOn: Administration von Flume (ca. 30 Minuten)
In diesem Abschnitt wird auf die Verwaltung und die Steuerung von Flume eingegangen.

Zusammenfassung (ca. 30 Minuten)
Zum Abschluss werden die Ergebnisse zusammengefasst und die durchgeführten Übungen auf ihre Praxistauglichkeit bewertet.