Oozie und Sqoop

nicht mehr verfügbar

Classroom Schulung | Deutsch | Anspruch

Schulungsdauer: 2 Tage

Ziele

In diesem Vertiefungs-Workshop lernt der Teilnehmer den grundsätzlichen Umgang mit Oozie und Sqoop anhand praktischer, aufeinander aufsetzenden Übungen.

Zielgruppe

(IT-)Architekt, (IT-)Entwickler

Voraussetzungen

Praktische Erfahrung in der IT-Informationsverarbeitung erforderlich. Kenntnisse im Einsatz von Datenbanken sowie Linux-Grundkenntnisse und Grundkenntnisse über „Big Data“ und Hadoop werden vorausgesetzt. Idealerweise ist das Seminar Hadoop Überblick absolviert worden.

Agenda

Einführung (ca. 60 Minuten)
In diesem Abschnitt wird der zur Verfügung stehende Hadoop-Cluster auf Basis HortonWorks HDP mit vier Knoten vorgestellt.

Oozie im Detail (ca. 60 Minuten)
In diesem Abschnitt wird Oozie im Detail vorgestellt.

Sqoop im Detail (ca. 60 Minuten)
In diesem Abschnitt wird Sqoop im Detail vorgestellt.

Installation und Konfiguration von Oozie und Sqoop (ca. 60 Minuten)
In diesem Abschnitt wird das Zusammenwirken von Oozie und Sqoop mit anderen Komponenten im Hadoop-Cluster vorgestellt sowie verschiedene Aspekte der Installation und Konfiguration von Storm und Kafka behandelt.

HandsOn: Steuerung von Sqoop via CLI (ca. 60 Minuten)
In diesem Abschnitt evaluieren die Teilnehmer Sqoop via Kommandozeile.

HandsOn: Import von Daten aus einer relationalen Datenbank nach Hadoop (ca. 60 Minuten)
Die Teilnehmer entladen Daten aus der relationalen Welt mit Sqoop nach Hadoop.

HandsOn: Export von Daten aus Hadoop in eine relationale Datenbank (ca. 60 Minuten)
Die Teilnehmer laden Daten aus Hadoop in die relationale Welt mit Sqoop.

HandsOn: Mögliches Zusammenspiel von Hive, Pig und Sqoop (ca. 60 Minuten)
In einem komplexen Beispiel evaluieren die Teilnehmer das Zusammenspiel verschiedener Hadoop-Komponenten mit der relationalen Welt.

HandsOn: Oozie Workflow im Detail (ca. 60 Minuten)
In diesem Abschnitt lernen die Teilnehmer Details zum Oozie Workflow kennen.

HandsOn: Erstellen und Aktivieren von Oozie Workflows via GUI (ca. 120 Minuten)
Die Erstellung und Ausführung von Oozie-Workflows mit der GUI von Hue wird evaluiert.

HandsOn: Ausführen von Oozie Worksflows via CLI (ca. 60 Minuten)
In diesem Abschnitt evaluieren die Teilnehmer Oozie via Kommandozeile.

Zusammenfassung (ca. 60 Minuten)
Zum Abschluss werden die Ergebnisse zusammengefasst und die durchgeführten Übungen auf ihre Praxistauglichkeit bewertet.

Ziele

In diesem Vertiefungs-Workshop lernt der Teilnehmer den grundsätzlichen Umgang mit Oozie und Sqoop anhand praktischer, aufeinander aufsetzenden Übungen.

Zielgruppe

(IT-)Architekt, (IT-)Entwickler

Voraussetzungen

Praktische Erfahrung in der IT-Informationsverarbeitung erforderlich. Kenntnisse im Einsatz von Datenbanken sowie Linux-Grundkenntnisse und Grundkenntnisse über „Big Data“ und Hadoop werden vorausgesetzt. Idealerweise ist das Seminar Hadoop Überblick absolviert worden.

Agenda

Einführung (ca. 60 Minuten)
In diesem Abschnitt wird der zur Verfügung stehende Hadoop-Cluster auf Basis HortonWorks HDP mit vier Knoten vorgestellt.

Oozie im Detail (ca. 60 Minuten)
In diesem Abschnitt wird Oozie im Detail vorgestellt.

Sqoop im Detail (ca. 60 Minuten)
In diesem Abschnitt wird Sqoop im Detail vorgestellt.

Installation und Konfiguration von Oozie und Sqoop (ca. 60 Minuten)
In diesem Abschnitt wird das Zusammenwirken von Oozie und Sqoop mit anderen Komponenten im Hadoop-Cluster vorgestellt sowie verschiedene Aspekte der Installation und Konfiguration von Storm und Kafka behandelt.

HandsOn: Steuerung von Sqoop via CLI (ca. 60 Minuten)
In diesem Abschnitt evaluieren die Teilnehmer Sqoop via Kommandozeile.

HandsOn: Import von Daten aus einer relationalen Datenbank nach Hadoop (ca. 60 Minuten)
Die Teilnehmer entladen Daten aus der relationalen Welt mit Sqoop nach Hadoop.

HandsOn: Export von Daten aus Hadoop in eine relationale Datenbank (ca. 60 Minuten)
Die Teilnehmer laden Daten aus Hadoop in die relationale Welt mit Sqoop.

HandsOn: Mögliches Zusammenspiel von Hive, Pig und Sqoop (ca. 60 Minuten)
In einem komplexen Beispiel evaluieren die Teilnehmer das Zusammenspiel verschiedener Hadoop-Komponenten mit der relationalen Welt.

HandsOn: Oozie Workflow im Detail (ca. 60 Minuten)
In diesem Abschnitt lernen die Teilnehmer Details zum Oozie Workflow kennen.

HandsOn: Erstellen und Aktivieren von Oozie Workflows via GUI (ca. 120 Minuten)
Die Erstellung und Ausführung von Oozie-Workflows mit der GUI von Hue wird evaluiert.

HandsOn: Ausführen von Oozie Worksflows via CLI (ca. 60 Minuten)
In diesem Abschnitt evaluieren die Teilnehmer Oozie via Kommandozeile.

Zusammenfassung (ca. 60 Minuten)
Zum Abschluss werden die Ergebnisse zusammengefasst und die durchgeführten Übungen auf ihre Praxistauglichkeit bewertet.

Tags