Cursusaanbod
Herhaling van de basisprincipes van Apache Airflow
- Kernconcepten: DAG’s, taken en operators
- Architectuur en onderdelen van Airflow
- Veelvoorkomende use cases en workflow-examples
Optimalisatie van workflowprestaties
- Het identificeren van knelpunten in Airflow-pipelines
- Technieken voor het optimaliseren op taakniveau
- Gebruik maken van herhaalde uitvoeringen, parallelle verwerking en meerdere taken gelijktijdig
Beheer van complexe afhankelijkheden
- Het definiëren van dynamische relaties tussen taken
- Omgaan met voorwaardelijke en vertakkende workflows
- Doelmatig gebruik maken van taakgroepen en sub-DAG’s
Geavanceerde functies in Apache Airflow
- Het creëren van aangepaste operators en hooks
- Het implementeren van sensoren die extern gebeurtenissen kunnen detecteren
- Integratie met externe diensten en plugins
Opschalen van Apache Airflow-implementaties
- Mogelijkheden voor horizontale en verticale schaling
- Gebruik van de Celery-executor voor gedistribueerde verwerking
- Beste praktijken bij het opschalen in cloud-omgevingen
Monitoren en debuggen van workflows
- Het configureren van logging en meldingen voor nauwkeurig beheer
- Gebruik maken van de Airflow UI en CLI bij het oplossen van problemen
- Identificeren en aanpakken van veelvoorkomende fouten in implementaties
Beveiliging van Apache Airflow
- Authenticatie- en toegangsbeheer binnen Airflow
- Bescherming van gevoelige gegevens en configuraties
- Het vastleggen van audit-trails voor workflows
Enterprise-toepassingen en best practices
- Het ontwerpen van robuuste workflows voor productieomgevingen
- Gebruik maken van Airflow bij data-engineering en ETL-processen
- Bekijken van praktijkvoorbeelden van succesvolle, schaalbare implementaties
Samenvatting en vervolgstappen
Vereisten
- Basiskennis van Apache Airflow
- Vertrouwdheid met Python-programmeren en het beheren van workflows
- Ervaring in het implementeren en beheren van applicaties op Linux-systemen
Doelgroep
- Data-engineers
- DevOps-professionals
- Softwareontwikkelaars
Aangepaste bedrijfsopleiding
Opleidingsoplossingen ontworpen exclusief voor bedrijven.
- Aangepaste inhoud: We passen de syllabus en praktijkopdrachten aan naar de echte doelen en behoeften van uw project.
- Voor flexibel schema: Datums en tijden aangepast aan het rooster van uw team.
- Formaat: Online (live), In-company (bij uw kantoren) of Hybride.
Prijs per privégroep, online live training, startend vanaf 4800 € + BTW*
Neem contact met ons op voor een exacte offerte en om onze laatste promoties te horen
Reviews (1)
De instructeur heeft de training aangepast aan het niveau van de deelnemers en reageerde op alle vragen. Hij was zeer communicatief, waardoor het gemakkelijk was om met hem te interacteren. Ik heb de opbouw van de training erg gewaardeerd, die veel praktische oefeningen bevatte. In het algemeen was het een zeer aangrijpende en goed georganiseerde sessie.
Jacek Chlopik - ZAKLAD UBEZPIECZEN SPOLECZNYCH
Cursus - Apache Airflow: Building and Managing Data Pipelines
Automatisch vertaald
