Big Data – Hadoop

In dieser Gruppe diskutieren wir über Einsatzszenarien, Technologien und Trends zu Big Data und hadoop.

Deploying Apache Airflow in Azure to build and run data pipelines

Florian J. Deinhard
Apache Airflow ist eine Open Source-Plattform, mit der Workflows erstellt, geplant und überwacht werden. Airflow überwindet einige der Einschränkungen des cron-Dienstprogramms, indem es ein erweiterbares Framework bietet, das Operatoren, eine programmierbare Schnittstelle für das Erstellen von Jobs, eine skalierbare verteilte Architektur sowie umfangreiche Überwachungs- und Überwachungsfunktionen umfasst. Es wurde eine Azure Quickstart-Vorlage entwickelt, mit der Sie eine Airflow-Instanz in Azure schneller bereitstellen und erstellen können, indem Sie Azure App Service und eine Instanz der Azure Database für PostgreSQL als Metadatenspeicher verwenden.

hier gelangen Sie zu weiteren Informationen:
https://azure.microsoft.com/en-us/blog/deploying-apache-airflow-in-azure-to-build-and-run-data-pipelines/

Neueste Mitgliederaktivitäten

Diesen Community Beitrag weiterempfehlen