Tack för att du skickade din fråga! En av våra teammedlemmar kontaktar dig snart.
Tack för att du skickade din bokning! En av våra teammedlemmar kontaktar dig snart.
Kursplan
Recension av Apache Airflow Basics
- Grundläggande begrepp: DAG:er, uppgifter och operatorer
- Luftflödets arkitektur och komponenter
- Sammanfattning av vanliga användningsfall och arbetsflöden
Optimera arbetsflödets prestanda
- Identifiera flaskhalsar i luftflödesledningar
- Optimeringstekniker på uppgiftsnivå
- Utnyttja återförsök av uppgifter, parallellitet och samtidighet
Hantera komplexa beroenden
- Definiera dynamiska beroenden i arbetsflöden
- Hantera villkorsstyrda och förgrenade arbetsflöden
- Använda arbetsgrupper och sub-DAG:er på ett effektivt sätt
Avancerade funktioner i Apache Airflow
- Skapa anpassade operatorer och krokar
- Implementering av sensorer för externa utlösare
- Integrera tjänster och plugins från tredje part
Skalning Apache Airflow Distributioner
- Vågräta och lodräta skalningsmetoder
- Använda Celery Executors för distribuerad körning
- Metodtips för skalning i molnmiljöer
Arbetsflöden för övervakning och felsökning
- Konfigurera loggning och aviseringar för arbetsflödesövervakning
- Använda Airflow-användargränssnittet och CLI för felsökning
- Identifiera och lösa vanliga problem i luftflödesdistributioner
Säkra Apache Airflow
- Autentisering och åtkomstkontroll i Airflow
- Skydda känsliga data och miljökonfigurationer
- Implementera granskningsloggar för arbetsflöden
Enterprise Use Cases och bästa praxis
- Utforma robusta arbetsflöden för produktionsmiljöer
- Utnyttja luftflödet för datateknik och ETL-pipelines
- Utforska verkliga fallstudier av skalbara luftflödesdistributioner
Sammanfattning och nästa steg
Krav
- Grundläggande kunskaper i Apache Airflow
- Kunskaper om Python begrepp för programmering och arbetsflödesorkestrering
- Erfarenhet av att hantera och distribuera applikationer i Linux miljöer
Publik
- Datatekniker
- DevOps Professionella
- Mjukvaruutvecklare
21 timmar
Vittnesmål (1)
Instruktören anpassade utbildningen efter deltagarnas nivå och besvarade alla frågor. Han var mycket kommunikativ, och det var lätt att interagera med honom. Jag uppskattade verkligen formatet på utbildningen, som inkluderade många praktiska övningar. Övergripande sett var det en mycket engagerande och välorganiserad session.
Jacek Chlopik - ZAKLAD UBEZPIECZEN SPOLECZNYCH
Kurs - Apache Airflow: Building and Managing Data Pipelines
Maskintolkat