Data Pipelines mit Apache Airflow
Data Warehouse, Data Lake, Datenbanken – schon lange bedienen sich moderne Analyseinfrastrukturen verschiedener Konzepte, um gesammelte Daten aller Art sicher zu lagern, zu verarbeiten und zugänglich zu machen. Im Zentrum der IT-Architektur steht dabei häufig eine komplexe und ausgefeilte Data Pipeline. Dabei kann bereits die Wahl eines geeigneten Tools zur Gestaltung einer solchen Pipeline schwierig sein, da die Auswahl an Softwarelösungen zahlreiche bewährte Alternativen zur Verfügung stellt.