Köszönjük, hogy elküldte érdeklődését! Csapatunk egyik tagja hamarosan felveszi Önnel a kapcsolatot.
Köszönjük, hogy elküldte foglalását! Csapatunk egyik tagja hamarosan felveszi Önnel a kapcsolatot.
Kurzusleírás
Az Apache Airflow alapjainak áttekintése
- Alapfogalmak: DAG-ok, feladatok és operátorok
- Az Airflow architektúrája és összetevői
- Gyakori használati esetek és munkafolyamatok áttekintése
Munkafolyamatok teljesítményének optimalizálása
- Szűk keresztmetszetek azonosítása az Airflow csatornákban
- Feladatszintű optimalizációs technikák
- A feladatok újrapróbálkozásainak, párhuzamosságának és egyidejűségének kihasználása
Összetett függőségek kezelése
- Dinamikus függőségek meghatározása a munkafolyamatokban
- Feltételes és elágazó munkafolyamatok kezelése
- Feladatcsoportok és al-DAG-ok hatékony használata
Fejlett funkciók az Apache Airflow-ban
- Egyéni operátorok és hookok létrehozása
- Szenzorok implementálása külső eseményekhez
- Harmadik féltől származó szolgáltatások és bővítmények integrálása
Az Apache Airflow telepítések skálázása
- Horizontális és vertikális skálázási megközelítések
- A Celery Executors használata elosztott végrehajtáshoz
- Legjobb gyakorlatok a skálázáshoz felhő környezetekben
Munkafolyamatok monitorozása és hibakeresése
- Naplózás és riasztások konfigurálása a munkafolyamatok monitorozásához
- Az Airflow felhasználói felület és parancssori felület használata hibakereséshez
- Gyakori problémák azonosítása és megoldása az Airflow telepítésekben
Az Apache Airflow biztonsága
- Hitelesítés és hozzáférés-vezérlés az Airflow-ban
- Bizalmas adatok és környezeti beállítások védelme
- Audit nyomvonalak implementálása a munkafolyamatokhoz
Vállalati használati esetek és legjobb gyakorlatok
- Robusztus munkafolyamatok tervezése üzemi környezetekhez
- Az Airflow használata adatmérnöki és ETL csatornákhoz
- Valós példák elemzése skálázható Airflow telepítésekről
Összefoglalás és következő lépések
Követelmények
- Alapvető ismeretek az Apache Airflow-ról
- Ismeret a Python programozásban és a munkafolyamat-összehangolás koncepcióiban
- Tapasztalat alkalmazások kezelésében és telepítésében Linux környezetekben
Célközönség
- Adatmérnökök
- DevOps szakemberek
- Szoftverfejlesztők
21 Órák
Vélemények (1)
Az oktató az edzést a résztvevők szintjéhez igazította és válaszolt az összes kérdésre. Nagyon kommunikatív volt, és könnyű volt kapcsolatba lépni vele. Nagyon értékeltem az edzés formátumát, amely számos gyakorlati feladatot tartalmazott. Összességében nagyon érdekes és jól megtervezett munkamenet volt.
Jacek Chlopik - ZAKLAD UBEZPIECZEN SPOLECZNYCH
Kurzus - Apache Airflow: Building and Managing Data Pipelines
Gépi fordítás