Köszönjük, hogy elküldte érdeklődését! Csapatunk egyik tagja hamarosan felveszi Önnel a kapcsolatot.
Köszönjük, hogy elküldte foglalását! Csapatunk egyik tagja hamarosan felveszi Önnel a kapcsolatot.
Kurzusleírás
A Apache Airflow alapismeretek áttekintése
- Alapfogalmak: DAG-ok, feladatok és operátorok
- Légáramlás architektúra és alkatrészek
- A gyakori használati esetek és munkafolyamatok összefoglalása
A munkafolyamat teljesítményének optimalizálása
- Szűk keresztmetszetek azonosítása az Airflow csővezetékekben
- Feladat szintű optimalizálási technikák
- Feladat újrapróbálkozások, párhuzamosság és párhuzamosság kihasználása
Összetett függőségek kezelése
- Dinamikus függőségek meghatározása a munkafolyamatokban
- Feltételes és elágazó munkafolyamatok kezelése
- Feladatcsoportok és al-DAG-k hatékony használata
Speciális funkciók itt: Apache Airflow
- Egyéni operátorok és horgok létrehozása
- Érzékelők megvalósítása külső triggerekhez
- Harmadik féltől származó szolgáltatások és bővítmények integrálása
Méretezés Apache Airflow Telepítések
- Vízszintes és függőleges skálázási megközelítések
- Celery Executors használata elosztott végrehajtáshoz
- Bevált módszerek a felhőkörnyezetben történő méretezéshez
Munkafolyamatok figyelése és hibakeresése
- Naplózás és riasztások konfigurálása a munkafolyamat figyeléséhez
- Az Airflow UI és CLI használata hibaelhárításhoz
- Az Airflow telepítések gyakori problémáinak azonosítása és megoldása
Biztosítás Apache Airflow
- Hitelesítés és beléptetés az Airflow-ban
- Érzékeny adatok és környezeti konfigurációk védelme
- Ellenőrző nyomvonalak megvalósítása a munkafolyamatokhoz
Enterprise Use Case és legjobb gyakorlatok
- Robusztus munkafolyamatok tervezése termelési környezetekhez
- Az Airflow kihasználása adattervezésben és ETL-csővezetékekben
- A méretezhető Airflow telepítések valós esettanulmányainak felfedezése
Összegzés és a következő lépések
Követelmények
- Alapvető ismeretek Apache Airflow
- Python programozási és munkafolyamat-hangszerelési koncepciók ismerete
- Alkalmazások kezelésében és telepítésében szerzett tapasztalat Linux környezetekben
Közönség
- Adatmérnökök
- DevOps szakemberek
- Szoftverfejlesztők
21 Órák
Vélemények (1)
Az oktató az edzést a résztvevők szintjéhez igazította és válaszolt az összes kérdésre. Nagyon kommunikatív volt, és könnyű volt kapcsolatba lépni vele. Nagyon értékeltem az edzés formátumát, amely számos gyakorlati feladatot tartalmazott. Összességében nagyon érdekes és jól megtervezett munkamenet volt.
Jacek Chlopik - ZAKLAD UBEZPIECZEN SPOLECZNYCH
Kurzus - Apache Airflow: Building and Managing Data Pipelines
Gépi fordítás