Kurzusleírás
A NiFi és az adatfolyamok alapjai
- Mozgó és nyugalmi állapotban lévő adatok: fogalmak és kihívások
- NiFi architektúra: magok, folyamvezérlő, eredetvizsgálat és közlemények
- Kulcsfontosságú komponensek: processzorok, kapcsolatok, vezérlők és eredetvizsgálat
Big Data kontextus és integráció
- A NiFi szerepe a Big Data ökoszisztémákban (Hadoop, Kafka, felhőtárolók)
- Áttekintés a HDFS, MapReduce és modern alternatívákról
- Használati esetek: stream betöltés, naplószállítás, eseménycsatornák
Telepítés, konfiguráció és klaszter beállítás
- NiFi telepítése egyetlen csomóponton és klaszter módban
- Klaszter konfiguráció: csomópont szerepek, zookeeper és terheléselosztás
- NiFi üzembe helyezések koordinálása: Ansible, Docker vagy Helm használata
Adatfolyamok tervezése és kezelése
- Folyamatok irányítása, szűrése, szétválasztása, egyesítése
- Processzor konfiguráció (InvokeHTTP, QueryRecord, PutDatabaseRecord stb.)
- Sémakezelés, bővítés és átalakítási műveletek
- Hibakezelés, újrapróbálkozási kapcsolatok és visszanyomás
Integrációs forgatókönyvek
- Kapcsolódás adatbázisokhoz, üzenetküldő rendszerekhez, REST API-khoz
- Streamelés elemző rendszerekbe: Kafka, Elasticsearch vagy felhőtárolók
- Integráció Splunk, Prometheus vagy naplózási folyamatokkal
Monitorozás, helyreállítás és eredetvizsgálat
- NiFi felhasználói felület, metrikák és eredetvizsgáló használata
- Autonóm helyreállítás és kifinomult hibakezelés tervezése
- Biztonsági mentés, folyamatverziókezelés és változáskezelés
Teljesítményfinomítás és optimalizálás
- JVM, heap, szálkészletek és klaszterparaméterek finomhangolása
- Folyamtervezés optimalizálása a szűk keresztmetszetek csökkentése érdekében
- Erőforrás elkülönítés, folyamatpriorizálás és átviteli sebesség szabályozás
Ajánlott eljárások és irányítás
- Folyam dokumentáció, elnevezési szabványok, moduláris tervezés
- Biztonság: TLS, hitelesítés, hozzáférés-vezérlés, adattitkosítás
- Változáskezelés, verziókezelés, szerepalapú hozzáférés, naplózási nyomvonalak
Hibaelhárítás és incidenskezelés
- Gyakori problémák: holtpontok, memóriaszivárgások, processzorhibák
- Naplóelemzés, hibadiagnosztika és gyökérkivizsgálás
- Helyreállítási stratégiák és folyamvisszaállítás
Gyakorlati labor: Valós adatcsatorna implementálása
- Egy teljes körű folyamat építése: betöltés, átalakítás, szállítás
- Hibakezelés, visszanyomás és skálázás implementálása
- Teljesítménytesztelés és a csatorna finomhangolása
Összegzés és következő lépések
Követelmények
- Tapasztalat a Linux parancssorral
- Alapvető ismeretek a hálózatokról és adatrendszerekről
- Ismeret az adatstreamelés vagy ETL koncepciók terén
Közönség
- Rendszergazdák
- Adatmérnökök
- Fejlesztők
- DevOps szakemberek
Vélemények (7)
GYAKORLÓ FELADATOK. A tanfolyam eredetileg 5 naposnak kellett volna lennie, de a három nap is sok kérdést válaszolt az eddigi NiFi használatomból fakadóan.
James - BHG Financial
Kurzus - Apache NiFi for Administrators
Gépi fordítás
A tanár tempóját megfelelőnek találom. Senkit sem hagyott hátra módszerével. Nagyon támogató volt velünk, az új kezdekkel, akik még nem játszották a rendszergazda vagy infrastruktúra szerepét munkahelyi karrierük során, vagy akik ezt a képességet korábbi karrieri időszakból gyűjtögetették ki.
Pamdrea Ivory - BHG Financial
Kurzus - Apache NiFi for Administrators
Gépi fordítás
Szerettem a gyakorló szekciót. A feladatok elvégzésével jobban tudtam megjegyezni az információkat. Emellett a képződő képessége, hogy teljes körűen bekapcsolja az osztály minden tagját, olyan környezetet teremtett, amelyben megvoltak a feltétel, hogy nyugodtan feltegyek kérdéseket azokról a témákról, amelyekben bizonytalan voltam.
Leila - BHG Financial
Kurzus - Apache NiFi for Administrators
Gépi fordítás
Használati esetek és példák a NiFi adatfolyamok létrehozásához. Megoldottuk a gyakori problémákat és hátrányokat.
Nelson - BHG Financial
Kurzus - Apache NiFi for Administrators
Gépi fordítás
Szerettem a szerkezetet. Az első napon belemértünk a Nifi alapjaiiba, fogalmaiba és alkalmazási eseteibe. A második napon az első nap megismerett ismereteket gyakoroltuk, folyamatokat készítve forgatókönyvi követelményeknek megfelelően. Harmadikon a Nifi Registry-t és a verziókezelést, valamint a több bérlős működést tanultuk meg, és átnéztük a kérdéseket és válaszokat.
Adam - BHG Financial
Kurzus - Apache NiFi for Administrators
Gépi fordítás
Szerettem, hogy részletesebben elmagyarázta a NiFi-t és milyen erőforrásos. Alapvetően bármely infrastruktúrában használható, és sok különböző programozási nyelvet támogat. Emellett örömmel látom, hogy sikerült megoldanunk a NiFi tanúsítványfrissítési problémát a bizalmi tárolóval.
Joachim Martin - BHG Financial
Kurzus - Apache NiFi for Administrators
Gépi fordítás
általános ismeretek és a képzés által kínált lehetőségek a eszköz tekintetében.
Nalfis Tobar - BHG Financial
Kurzus - Apache NiFi for Administrators
Gépi fordítás